content.raw: 🇫🇷 Lancement officiel de l'OpenLLM French Leaderboard : initiative open-source pour référencer l’évaluation des LLMs francophones
content.type: text
content.value: 🇫🇷 Lancement officiel de l'OpenLLM French Leaderboard : initiative open-source pour référencer l’évaluation des LLMs francophones
content.type: new_line
content.type: new_line
content.raw: Après beaucoup d’efforts et de sueurs avec Alexandre Lavallee, nous sommes ravis d’annoncer que le OpenLLMFrenchLeaderboard est en ligne sur Hugging Face (space url: 
content.type: text
content.value: Après beaucoup d’efforts et de sueurs avec Alexandre Lavallee, nous sommes ravis d’annoncer que le OpenLLMFrenchLeaderboard est en ligne sur Hugging Face (space url: 
content.raw: https://huggingface.co/spaces/le-leadboard/OpenLLMFrenchLeaderboard
content.id: le-leadboard/OpenLLMFrenchLeaderboard
content.type: space
content.type: resource
content.url: https://huggingface.co/spaces/le-leadboard/OpenLLMFrenchLeaderboard
content.raw: ) la toute première plateforme dédiée à l’évaluation des grands modèles de langage (LLM) en français. 🇫🇷✨
content.type: text
content.value: ) la toute première plateforme dédiée à l’évaluation des grands modèles de langage (LLM) en français. 🇫🇷✨
content.type: new_line
content.type: new_line
content.raw: Ce projet de longue haleine est avant tout une œuvre de passion mais surtout une nécessité absolue. Il devient urgent et vital d'oeuvrer à plus de transparence dans ce domaine stratégique des LLM dits multilingues. La première pièce à l'édifice est donc la mise en place d'une évaluation systématique et systémique des modèles actuels et futurs.
content.type: text
content.value: Ce projet de longue haleine est avant tout une œuvre de passion mais surtout une nécessité absolue. Il devient urgent et vital d'oeuvrer à plus de transparence dans ce domaine stratégique des LLM dits multilingues. La première pièce à l'édifice est donc la mise en place d'une évaluation systématique et systémique des modèles actuels et futurs.
content.type: new_line
content.type: new_line
content.raw: Votre modèle IA français est-il prêt à se démarquer ? Soumettez le dans notre espace, et voyez comment vous vous comparez par rapport aux autres modèles.
content.type: text
content.value: Votre modèle IA français est-il prêt à se démarquer ? Soumettez le dans notre espace, et voyez comment vous vous comparez par rapport aux autres modèles.
content.type: new_line
content.type: new_line
content.raw: ❓ Comment ça marche :
content.type: text
content.value: ❓ Comment ça marche :
content.type: new_line
content.raw: Soumettez votre LLM français pour évaluation, et nous le testerons sur des benchmarks de référence spécifiquement adaptés pour la langue française — notre suite de benchmarks comprend : 
content.type: text
content.value: Soumettez votre LLM français pour évaluation, et nous le testerons sur des benchmarks de référence spécifiquement adaptés pour la langue française — notre suite de benchmarks comprend : 
content.type: new_line
content.type: new_line
content.raw: - BBH-fr : Raisonnement complexe 
content.type: text
content.value: - BBH-fr : Raisonnement complexe 
content.type: new_line
content.raw: - IFEval-fr : Suivi d'instructions 
content.type: text
content.value: - IFEval-fr : Suivi d'instructions 
content.type: new_line
content.raw: - GPQA-fr : Connaissances avancées 
content.type: text
content.value: - GPQA-fr : Connaissances avancées 
content.type: new_line
content.raw: - MUSR-fr : Raisonnement narratif 
content.type: text
content.value: - MUSR-fr : Raisonnement narratif 
content.type: new_line
content.raw: - MATH_LVL5-fr : Capacités mathématiques 
content.type: text
content.value: - MATH_LVL5-fr : Capacités mathématiques 
content.type: new_line
content.raw: - MMMLU-fr : Compréhension multitâche
content.type: text
content.value: - MMMLU-fr : Compréhension multitâche
content.type: new_line
content.type: new_line
content.raw: Le processus est encore manuel, mais nous travaillons sur son automatisation, avec le soutien de la communauté Hugging Face.
content.type: text
content.value: Le processus est encore manuel, mais nous travaillons sur son automatisation, avec le soutien de la communauté Hugging Face.
content.type: new_line
content.type: new_line
content.raw: @clem
content.type: mention
content.user: clem
content.raw:   , on se prépare pour une mise à niveau de l’espace ? 😏👀
content.type: text
content.value:   , on se prépare pour une mise à niveau de l’espace ? 😏👀
content.type: new_line
content.type: new_line
content.raw: Ce n'est pas qu'une question de chiffres—il s'agit de créer une IA qui reflète vraiment notre langue, notre culture et nos valeurs. OpenLLMFrenchLeaderboard est notre contribution personnelle pour façonner l'avenir des LLM en France.
content.type: text
content.value: Ce n'est pas qu'une question de chiffres—il s'agit de créer une IA qui reflète vraiment notre langue, notre culture et nos valeurs. OpenLLMFrenchLeaderboard est notre contribution personnelle pour façonner l'avenir des LLM en France.
rawContent: 🇫🇷 Lancement officiel de l'OpenLLM French Leaderboard : initiative open-source pour référencer l’évaluation des LLMs francophones
  
  Après beaucoup d’efforts et de sueurs avec Alexandre Lavallee, nous sommes ravis d’annoncer que le OpenLLMFrenchLeaderboard est en ligne sur Hugging Face (space url: https://huggingface.co/spaces/le-leadboard/OpenLLMFrenchLeaderboard) la toute première plateforme dédiée à l’évaluation des grands modèles de langage (LLM) en français. 🇫🇷✨
  
  Ce projet de longue haleine est avant tout une œuvre de passion mais surtout une nécessité absolue. Il devient urgent et vital d'oeuvrer à plus de transparence dans ce domaine stratégique des LLM dits multilingues. La première pièce à l'édifice est donc la mise en place d'une évaluation systématique et systémique des modèles actuels et futurs.
  
  Votre modèle IA français est-il prêt à se démarquer ? Soumettez le dans notre espace, et voyez comment vous vous comparez par rapport aux autres modèles.
  
  ❓ Comment ça marche :
  Soumettez votre LLM français pour évaluation, et nous le testerons sur des benchmarks de référence spécifiquement adaptés pour la langue française — notre suite de benchmarks comprend : 
  
  - BBH-fr : Raisonnement complexe 
  - IFEval-fr : Suivi d'instructions 
  - GPQA-fr : Connaissances avancées 
  - MUSR-fr : Raisonnement narratif 
  - MATH_LVL5-fr : Capacités mathématiques 
  - MMMLU-fr : Compréhension multitâche
  
  Le processus est encore manuel, mais nous travaillons sur son automatisation, avec le soutien de la communauté Hugging Face.
  
  @clem  , on se prépare pour une mise à niveau de l’espace ? 😏👀
  
  Ce n'est pas qu'une question de chiffres—il s'agit de créer une IA qui reflète vraiment notre langue, notre culture et nos valeurs. OpenLLMFrenchLeaderboard est notre contribution personnelle pour façonner l'avenir des LLM en France.
reactions.reaction: 🔥
reactions.users: clem AdinaY John6666 EnguerrandLec louisbrulenaudet MyDsoElliott coyotte508 malhajar MaziyarPanahi clefourrier giadap alielfilali01 ZennyKenny andito
reactions.reaction: ❤️
reactions.users: clem PeteMarc davanstrien malhajar Jeronymous MaziyarPanahi Ashoka74
reactions.reaction: 👍
reactions.users: Kaba AkimfromParis
commentators._id: 5e67bdd61009063689407479
commentators.avatarUrl: https://cdn-avatars.huggingface.co/v1/production/uploads/1583857146757-5e67bdd61009063689407479.jpeg
commentators.fullname: Clem 🤗
commentators.name: clem
commentators.type: user