Setup virtualnih mašina za paralelni rad bot-a

Također, rekoh da zavirim ispod haube od pyautogui https://medium.com/@reha.2624120.shah/pyautogui-a-glimpse-behind-the-scenes-86a5c97645cd

...cilj mi je bio upravljati mišom direktno onim metodama kako upravlja pyautogui. (Gdje pyautogui prepoznaje koji OS je na snazi, onda svoju upravljačku komandu prilagođava tom tipu OS-a)

...i uspijem tako upravljati mišem na windowsima, no kada sam istu metodu išao primjeniti na Debian (koji je VM), s naravno prilagođenim code-om koji je za Debian ... tada sam se susreo sa greškom: "Mouse device is not founded"

Što će reći da se Debian VM ipak ne ponaša kao pravo računalo vezano uz odnos prema mišu, nego nekako simulirano dobiva inpute od miša koje mu prevodi/simulira software za virtualizaciju (VMware). I u tome je očito kvaka zašto pyautogui ne može upogoniti miša, jer miš kao device niti ne postoji za vrijeme rada VM-a. (Barem ne u trenutnom setupu)

Iskopao sam i ovo https://communities.vmware.com/t5/Virtual-Machine-Guest-OS-and-VM/independent-mouse/td-p/153579, gdje upravo govore o tome kako setupirati VMware da bi VM vidjela pravi fizički miš.

Nisam to još probao, no sa time ako bi se nešto i postiglo, to neće postići postojanje nezavisnog miš-a za VM .. što je cilj, heh.

Čini se tako da odgovor se jedino može naći u arhitekturi samog softwarea za virtualizaciju, u ovom slučaju VMware ..i da oni odaju trik kako utjecati na onog miša kojeg vidi guest OS.

@LunKraljPonoci, hvala ti na tvom testu.

Što se tiče problema, mogao bi biti i u kombinaciji Debian + VMware, pošto ti vrtiš windows na virtualnoj mašini.

Inače, probao sam već i sa VirtualBox-om, da eliminiram VMware (isto sam stavio Debian-a) ... i nije mi radilo. Još mi je nešto počeo štekati i VirtualBox, tako da sam se brzo vratio na VMware (moguće prije nego sam to dobro i istestirao)

Molim te ako možeš dati sljedeće detalje:

- Koji windows imaš na računalu (host)

- Koje windowse stavljaš na virtualnu mašinu?

- Što koristiš za upravljanje mišem, pyautogui?

...

...

...

I ako slučajno imaš volje da probaš jel bi kod tebe radilo i na Debianu?

Nezz, imaš li iskustva sa Debianom? ...ja nisam imao, pa da olakšam ... evo uputa za setup...

Međuostalim, možda se u ovim uputama i krije ono što ja radim krivo i zašto mi stvar neće raditi ...pa ako netko ima iskustva sa Debian-om, možda uoči ako što griješim...

Koraci su mi sljedeći:

1. Nakon instalacije debiana, cilj mi je instalirati python i library pyautogui ... a kako tu sve ide preko terminala, komande su sljedeće: "sudo ..."

2. Prije nego uopće krenem sa sudo komandama, terminal bi me redovito blokirao i rekao da moj user ne postoji među sudoers userima, po naputku chatGPT-a taj problem eliminiram na način:

Terminal:

su -

visudo //ovo otvara nekakav editor za neki file 

bozoou ALL=(ALL) ALL  //dodajemo ovu liniju u taj file ...gdje je "bozoou" ime usera ... spremamo, zatvaramo editor

3. Vraćamo se na instalaciju pythona:

sudo apt update
sudo apt install python3
sudo apt install pip3

4. Instalacija pyautogui-a

Ako bi kucao samo naredbu:

pip3 install pyautogui

...dobio bi grešku:

error: externally-managed-environment

× This environment is externally managed
╰─> To install Python packages system-wide, try apt install
python3-xyz, where xyz is the package you are trying to
install.

If you wish to install a non-Debian-packaged Python package,
create a virtual environment using python3 -m venv path/to/venv.
Then use path/to/venv/bin/python and path/to/venv/bin/pip. Make
sure you have python3-full installed.

If you wish to install a non-Debian packaged Python application,
it may be easiest to use pipx install xyz, which will manage a
virtual environment for you. Make sure you have pipx installed.

See /usr/share/doc/python3.11/README.venv for more information.

note: If you believe this is a mistake, please contact your Python installation or OS distribution provider. You can override this, at the risk of breaking your Python installation or OS, by passing --break-system-packages.
hint: See PEP 668 for the detailed specification.

Tako da sam po naputku chatGPT-a pyautogui instalirao na način da prvo kreiram vlastiti enviroment:

Terminal:

python3 -m venv myenviroment    //kreiranje evniromenta
source myenviroment/bin/activate  //aktiviranje enviromenta

pip3 install pyautogui      //zatim pip instalacija prolazi

I nakon pyautugui instalacije, pokrećem python skriptu:

Terminal:

python3 /path/to/file/python_file.py

I šećer na kraju, pyautogui komande mi nakon svega ovoga nebi radile.

Probao sam tako i drugi pristup bez "myenviroment", tu bi instalirao pyautogui na drugi način kako sugerira gore citirana greška, to je:

Terminal:

pip3 install pyautogui --break-system-packages

Takva instalacija bi se naizgled uredno izvršila, ali prilikom pokretanja skripte, linija "import pyautogui" bi uzrokovala python grešku:

Xlib.error.DisplayConnectionError: Can't connect to display ":0": b'Authorization required, but no authorization protocol specified'

Opet po naputku chatGPT-a, tu grešku bi nadišao otvaranjem nekakvih generalnih permissiona kucanjem naredbe:

Terminal:

xhost +

Nakon toga se gornja greška više nebi prikazivala, ali pyautogui naredbe ipak nebi radile.

(P.S. U svim varijantama mi samo ne rade pyautogui naredbe za upravljanje mišem i tipkovnicom, dok tipa naredba za dohvat veličine ekrana bi uredno vraćale dimenzije prozora VM-a)

Lessons learned :

Uvijek pročitati specifikacije.

(specifikaciju pročitaš u  10 minuta, bug tražiš 10 dana)

Plus mislim da te ChatGPT zeznuo sa naredbom xhost +

koja isključuje access control.

Naravno,

Isprobao sam oba dva načina , pa mogu tvrditi koji je bolji (barem meni)

A. U naprijed znam s čime radim, je li to python3 , sqlite3 i koji su moduli, pa uzmem specifikacije. (faza odabira alata, faza prikupljanja specifikacija i dokumentacije)

ili : 

B. (postupak) 

start ->

traži na internetu riješenje ->

riješenje, da -> kraj

riješenje, ne -> pitaj na stackoverflow -> čekaj ->

riješenje, da -> kraj

riješenje, ne -> radi nešto drugo -> kraj

Mogu se koristiti komplementarno, ali skoro nikad nije potrebno.

Tu se miješaju pojmovi Rad, učenje, rad drugih, 

Treba razdvojiti to. inače 10 dana tražiš riješenje na 3 foruma.

Samo tako nastavi.

Živio.