Robot sterujący myszką

Cześć wszystkim, chciałbym troszkę przyśpieszyć swoją pracę i napisać robota sterującego myszką.
Szperałem trochę i wiem mniej więcej jak to zrobić ale chciałem spytać się bardziej doświadczonych czy nie wyskoczą mi jakieś kwiatki po drodze, z którymi nie będę mógł sobie poradzić i ogólnie co sądzicie o tym pomyśle.

Robot sterował by myszką za pomocą pyautogui:
-otwierałby program
-wybierał by z listy item(trzeba by zmapować itemy po pikselach)
-klikałby na itemy
-robił by screen shota(co np. 20m) a następnie odczytywał z obrazu czy procesowanie się zakończyło
-następnie przechodziłby do następnego itemu z listy

Dodam jeszcze jedną rzecz, bo obstawiam, że może być na to lepszy pomysł. Całość miała by chodzić w jakiejś pętli póki są itemy.

Jeśli ten program to np apka webowa to tak, są lepsze sposoby.

Jeśli apka okienkowa to pyautogui od biedy się nada. Musisz tylko pamiętać o jednakowej rozdziałce.

Myślałem żeby odpalać to jako skrypt pythona, ale kompletnie nie mam doświadczenia w takich sprawach.
Program, na którym miało by to działać jest na pulpicie więc chyba apka webowa odpada, tym bardziej, że liczy się tutaj czas napisania robota, żeby się w ogóle opłacało go pisać. Max to 5 dni, najlepiej jakby to zajęło 2,3

Poczytaj o rozwiązaniach RPA, polecam UiPath. Kiedyś był darmowy w wersji na jednego robota. Technologia stworzona do takich rzeczy ;)

Super, dzięki za pomoc :)

Jesli chcesz moge ci krok po kroku wytlumaczyc jak to zrobic posiadasz discorda?