Cette année , l'entreprise récidive dans l'IA générative en développant son propre modèle de fondation . Retour sur un projet à la fois innovant et totalement original . n n " Nous avons décidé de mettre au point notre propre modèle de fondation car un développement interne nous permet de maitriser entièrement le projet , du point de vue de la souveraineté et de la sobriété " , justifie Maxime Havez , chief data officer et chief data scientist chez Crédit Mutuel Arkéa . Pour ce projet , le groupe est parti du large language model ( LLM ) open source Bloom . Un LLM qui a été créé en 2022 à l'initiative du franco-américain Hugging Face . n nL'open source sous le capot n nCrédit Mutuel Arkéa a réentrainé Bloom sur un corpus en français en s'appuyant sur des instances graphiques ( GPU ) du cloud de Google . Le tout au sein d'un environnement sécurisé par des clés de cryptage Thales . " Dans le cadre d'un tel projet , nous pourrons être amenés à utiliser , aussi , le service managé de LLM Palm 2 de la Google Cloud Platform quand celui-ci sera disponible en Europe et couvert par le système de chiffrement de Thales " , précise Maxime Havez . n nConcrètement , Crédit Mutuel Arkéa a eu recours à la génération augmentée de récupération ou retrieval-augmented generation ( RAG ) . Une technique qui permet d'injecter de nouveaux contenus dans la base vectorielle d'un modèle par le biais d'invites , et ainsi d'éviter un réentrainement complet . Une fois cette tâche réalisée , le modèle peut ensuite glaner directement ses réponses au sein des contenus ainsi injectés . n n n " Les résultats obtenus sont très encourageants , notamment comparés au Bloom historique mais aussi à GPT 3 . 5 " n n nLe réapprentissage de Bloom a abouti à un modèle en français centré sur la finance . Résultat : il se retrouve nettement moins volumineux que le modèle Bloom d'origine .