Cursus
Formation Créer son propre agent IA avec les LLMs open source
Objectifs
Comprendre le fonctionnement des modèles de langage open source (LLMs).
Installer et interagir avec un modèle type Mistral, LLaMA ou GPT-J via HuggingFace.
Construire un agent conversationnel autonome avec prompt chaining et RAG.
Déployer une interface interactive (local ou via app web simple).
Pré-requis
Participants
Programme de formation
PRISE EN MAIN DES MODÈLES OPEN SOURCE
Introduction aux LLMs open source : panorama (Mistral, LLaMA, Falcon, GPT-J)
Premiers tests de génération en local (ou via API HuggingFace Hub)
Comparaison CPU/GPU, modèle quantisé ou non
HuggingFace Transformers : chargement de modèles et de tokenizers
CRÉATION DE L’AGENT IA ET INTERACTION ENRICHIE
Prompt engineering avancé : rôle, style, contraintes
Chaining de prompts (exécution structurée de tâches)
Intégration d’un système de mémoire courte (buffer, recap)
Notions de contexte & token management
ENRICHIR AVEC SES DOCUMENTS (RAG)
Introduction au RAG (Retrieval-Augmented Generation)
Encodage de documents (Sentence Transformers)
Utilisation de FAISS ou ChromaDB pour base vectorielle
Recherche sémantique + génération conditionnée