Robot Mac lecture de graphique

Bonjour,
Mon projet consiste en un simple robot capable de lire les éléments présents sur un graphique boursier, et lorsqu'un signal se déclenche (signal déjà possédé et matérialisé sous forme de flèche rouge verte ou orange), le robot doit appuyer sur le bouton d'achat ou de vente.
Je dispose de l'affichage du graphique, de l'indicateur utilisé, et de l'interface de passage d'ordre.
Il y a quelques éléments un peu plus précis à ajouter mais rien qui ne dépasse la simple exécution de taches comme appuyer sur un bouton à l'écran ou une lettre du clavier.
Le travail est à priori assez simple mais nécessite une lecture précise du graphique (voir capture d'écran ci-jointe, à laquelle sera ajouté d'autres éléments graphiques, notamment des lignes horizontales à prendre en compte)
Nous pourrons discuter des meilleures solutions pour optimiser ce robot en confrontant nos idées.

Merci d'avance.