Escanear pantalla para obtener datos de entrada

[alehop17]

Querria desarrollar un programa que emula al conductor de un coche, me gustaría saber si alguien conoce un software o librería que ecanee mi pantalla en busca de texto y figuras (como señales de trafico) y las transformen en datos de entrada que mi programa pueda procesar
Si alguien conoce UIPath, sería como su funcion Screen Scrapping, que reconoce texto de la pantalla y lo pasa a texto plano, pero llevandolo al nivel de reconocer formas y figuras.
Un saludo