Здравствуйте, Разраб, Вы писали:

Р>ну вот допустим, нужно автоматизировать работу пользователя. если научить сетку находить на экране нужные кнопки, и по скрипту кликать.
Р>а то я пробовал тессерактом текст распознавать. такая лажа оказалась.

Так, это уже просто использование готовой, обученной нейросети. Это можно сделать из OpenCV, в нём есть модуль opencv_dnn, который умеет это делать. Да, через обёртки типа EmguCV, или через С++.