Pipeline Teams : vidéos, transcriptions, résumé et Q&A

Contexte et Objectif :
L’objectif est de créer une solution automatisée permettant de récupérer l’ensemble des réunions Teams (vidéos et transcriptions), puis de renforcer la qualité des transcriptions pour faciliter l’analyse. Actuellement, bien que Teams fournisse une transcription incluant l’identification des interlocuteurs, la qualité reste parfois insuffisante et la présence d’interlocuteurs n’est pas toujours garantie sur les vidéos enregistrées. La mission consiste donc à combiner la transcription générée par Teams avec une nouvelle transcription réalisée sur la vidéo, afin d’obtenir un résultat fiable et complet. Ces données seront ensuite exploitées pour construire une application d’analyse de réunion capable de :

Générer une liste consolidée des réunions,

Produire des résumés automatisés,

Mettre en place un système de question/réponse reposant sur l’analyse de la transcription grâce à des techniques de recherche par LLM ou d’autres méthodes.

Tâches et Livrables :

Récupération des données Teams :

Intégrer l’API de Teams (Office 365) pour récupérer automatiquement les réunions, incluant vidéos et transcriptions existantes.

Stocker et organiser ces données (base de données ou solution de stockage adaptée) pour un traitement ultérieur.

Amélioration de la transcription :

Concevoir un module qui combine la transcription existante de Teams (avec identification des interlocuteurs) et une transcription complémentaire générée directement à partir de la vidéo.

Utiliser l’API Azure – notamment Azure Cognitive Services – pour la transcription audio/vidéo et vérifier la cohérence entre les interlocuteurs extraits et la nouvelle transcription.

Pipeline Automatique :

Développer un pipeline automatisé qui, à chaque nouvelle réunion disponible, exécute les étapes de récupération, de re-transcription (si nécessaire) et d’agrégation des données.

Mettre en place des logs et des alertes pour identifier et corriger rapidement d’éventuelles erreurs.

Application d’Analyse :

Créer une interface ou un backend permettant de visualiser et d’analyser les réunions (liste, détails, résumé).

Intégrer un module d’analyse avancée utilisant des modèles LLM ou autres techniques de recherche textuelle pour permettre la recherche dans les transcriptions et répondre à des questions spécifiques sur le contenu des réunions (type HAG).

Documentation et Déploiement :

Fournir une documentation technique complète (architecture, API, schémas de données, procédures de déploiement).

Démontrer le pipeline en condition réelle et proposer, si nécessaire, une solution de déploiement (Docker, CI/CD, etc.).

Profil Recherché :

Expérience :

Une expérience minimale dans la création de pipelines d’automatisation et d’intégration d’API (notamment l’API Azure et l’API Teams/Office 365).

Connaissance pratique et éprouvée des solutions de transcription via Azure Cognitive Services ou des API similaires.

Expérience dans l’implémentation de méthodes de recherche textuelle, notamment par l’utilisation d’LLM (ou autres méthodes d’analyse sémantique) pour l’interrogation de grands volumes de texte.

Compétences Techniques :

Maîtrise des langages de programmation tels que Python, et frameworks associés pour le traitement asynchrone et les pipelines automatisés.

Connaissances en gestion d’API, authentification et sécurité.

Expérience en conception d’architectures robustes et scalables.

Capacité à travailler sur l’intégration de différents services cloud (notamment Azure).

Qualités Personnelles :

Rigueur dans la conception et la documentation technique.

Capacité d’analyse et de résolution de problèmes.

Approche orientée résultats avec une bonne organisation dans la gestion de projets techniques.