Developpement un compagnon et assistant du quotidien

Je souhaite développer une IA type assistant personnel, évolutive et adaptative à l’utilisateur, destinée à servir de base à un projet plus ambitieux (potentiellement commercialisable), avec une forte exigence de contrôle des données.
Objectifs
Choisir et intégrer un LLM open-source (local ou cloud privé) avec pipeline de déploiement.
Concevoir un système de prompt engineering modulaire (blocs, injection dynamique selon intention : conversation / relance / fonctions/outils).
Mettre en place une mémoire long terme (SQLite + mémoire vectorielle type ChromaDB, ou équivalent), avec stratégie de résumé/archivage.
Implémenter des fonctions/outils (function calling) avec gestion multi-tour (extraction paramètres → clarification → exécution → réponse).
Développer une interface vocale à distance : wake word / mise en veille, STT/TTS, fluidité conversationnelle, latence optimisée.
Contraintes importantes
Données personnelles : local ou cloud privé dédié (pas de dépendance obligatoire à des APIs externes).
Code propre, modulaire, manipulable, documenté, versionné (Git).
Approche “socle solide” : on priorise une base stable et extensible.
Livrables attendus
Repo structuré + doc d’installation
Prototype fonctionnel (texte + voix)
Mémoire long terme opérationnelle
Outils multi-tour (au moins quelques fonctions réelles)
Roadmap technique pour la V2