Typy vyhledávaných elementů

Vyhledávané elementy dělíme podle způsobu rozpoznávání do tří hlavních skupin:

Rozpoznané UI elementy – objekty detekované přímo AI modelem z obrazu obrazovky.
Speciální objekty – slouží k vymezení pracovních oblastí, maskování či určování relativních souřadnic.
Hledání na základě pozice – určují prvky na základě jejich polohy vůči jinému referenčnímu objektu.

Každý typ hraje klíčovou roli v automatizaci a umožňuje robotovi spolehlivě hledat a ovládat prvky uživatelského rozhraní.

📄️Hledání na základě pozice

Elementy vyhledávají prvek na základě jeho polohy vůči jinému prvku. Vždy se nastavují dvě položky:

Model detekce přímo zpracuje snímek obrazovky a vrátí elementy vhodné pro interakci.

Nepředstavují interaktivní prvky; vymezují oblasti či masky.