Játék program automatizált gombnyomogatása, gombfelismeréssel, scripteléssel

Helló!

Arra keresek valamilyen open source  / ingyenes megoldást, hogy például egy böngészőben futó játékban mivel lehet megoldani, hogy a szoftver érzékelje a gombot, azaz én meg tudom adni, hogy néz ki, amit keresni kell, és megnyomja, majd utána hogy mikor mire kattintson, időzítve, scriptelve, akár programozva. Túlzásnak érzem, hogy egy AI megértse az egészet és úgy nyomogassa, de csak van ennél egyszerűbb megoldás.

Van sok billentyűzet és egér macro rögzítő program, azokkal az a baj, ha a képernyőn véletlenszerű helyen lehet, amit meg kell nyomni, akkor oda nyom ahol nincs a gomb, és nem működik. 

Töltöttem fel példa gombokat, amiket meg kellene nyomni: https://imgur.com/a/RvdIsq5

Arra gondoltam, hogy amit meg kell nyomni, azt a gombot mint kép lementem, és a programban beállítom, ha azt látja a képen, nyomja meg. A megadott alkalommal megkeresi ezt vagy azt a gombot, ezt vagy azt a gombot megnyomja, egérrel ide vagy oda klikkel, és ha lefutott akkor kész. Mivel lehetséges ez?

Jó lenne még szám felismerés, hogy ki tudjon bizonyos értéket olvasni, és annak fügvgényében tenni valamit.

Az is jó, ha Linuxon fut, jobb lenne Windowson, virtuális gépben is mehet, csak működjön.

Selenium tudhat ilyet? Azt tudom róla, hogy a HTML-en belül nagyon jó submit gombok megnyomásában, de ha valami grafikus (nem háromdimenziós), akkor ott nem tudja megkeresni. Vagy igen?

Főként egy fogadásról szól, egy haverom szerint ilyet nem lehet megoldani ingyenes megoldással, csak ha én megírom, vagy ha fizetek különböző komolyabb havi díjas játék tesztelő szoftverért, ő keresett ilyet. Utána nézés nélkül én viszont arra fogadtam, hogy van ilyen, szóval nagy rajtam a nyomás, hogy legyen ilyen! :)