Ton LLM (ou devrais-je dire gml) est impressionnant… jusqu’à ce qu’il te fasse risquer 5 ans de prison pour une erreur de conformité.?
text
Ton LLM (ou devrais-je dire gml) est impressionnant… jusqu’à ce qu’il te fasse risquer 5 ans de prison pour une erreur de conformité.?
new_line
new_line
Aujourd’hui, legml.ai publie la première évaluation open‑source des modèles d’IA sur le droit des affaires français.
text
Aujourd’hui, legml.ai publie la première évaluation open‑source des modèles d’IA sur le droit des affaires français.
new_line
new_line
Et en même temps, le benchmark le plus complet:
text
Et en même temps, le benchmark le plus complet:
new_line
"Les Audits Affaires Leadboard"
text
"Les Audits Affaires Leadboard"
new_line
new_line
Pendant que beaucoup se contentent de dire que leur LLM "parle bien français", nous nous sommes questionnés :
text
Pendant que beaucoup se contentent de dire que leur LLM "parle bien français", nous nous sommes questionnés :
new_line
 • Est‑ce qu’il sait éviter un redressement fiscal ? Connaît‑il les délais URSSAF, les pénalités TVA, ou les règles DORA 2025 ?
text
 • Est‑ce qu’il sait éviter un redressement fiscal ? Connaît‑il les délais URSSAF, les pénalités TVA, ou les règles DORA 2025 ?
new_line
 • Tu lui ferais confiance pour structurer une clause de cession d’actions ?
text
 • Tu lui ferais confiance pour structurer une clause de cession d’actions ?
new_line
new_line
Dans 41 % des cas, la réponse est non.
text
Dans 41 % des cas, la réponse est non.
new_line
new_line
Hallucinations, seuils erronés, articles inventés, procédures fictives.
text
Hallucinations, seuils erronés, articles inventés, procédures fictives.
new_line
new_line
Quand un modèle se trompe en droit, c’est un risque réel.
text
Quand un modèle se trompe en droit, c’est un risque réel.
new_line
new_line
C’est pourquoi nous avons construit les‑audits‑affaires, un benchmark qui reflète la complexité concrète des enjeux juridiques et financiers des entreprises françaises.
text
C’est pourquoi nous avons construit les‑audits‑affaires, un benchmark qui reflète la complexité concrète des enjeux juridiques et financiers des entreprises françaises.
new_line
new_line
→ 2 670 cas métiers réalistes : questions posées par des DAF, juristes, comptables, RH, dirigeants.
text
→ 2 670 cas métiers réalistes : questions posées par des DAF, juristes, comptables, RH, dirigeants.
new_line
→ 9 codes juridiques analysés (commercial, fiscal, travail, bancaire, consommation…)
text
→ 9 codes juridiques analysés (commercial, fiscal, travail, bancaire, consommation…)
new_line
→ 5 dimensions d’évaluation : action, délai, documents, impact financier, risques juridiques.
text
→ 5 dimensions d’évaluation : action, délai, documents, impact financier, risques juridiques.
new_line
new_line
Mais on ne s’est pas contentés d’un score.
text
Mais on ne s’est pas contentés d’un score.
new_line
new_line
Pour chaque modèle évalué, vous avez accès à un rapport complet à 
text
Pour chaque modèle évalué, vous avez accès à un rapport complet à 
https://lnkd.in/dBqKR7YZ
https://lnkd.in/dBqKR7YZ
link
 : texte du modèle vs. ground‑truth légal, score détaillé, et justification article par article.
text
 : texte du modèle vs. ground‑truth légal, score détaillé, et justification article par article.
new_line
new_line
C’est transparent. C’est précis. C’est vérifiable.
text
C’est transparent. C’est précis. C’est vérifiable.
new_line
new_line
Explorez dès maintenant :
text
Explorez dès maintenant :
new_line
 • Leaderboard → 
text
 • Leaderboard → 
https://huggingface.co/les-audites-affaires-leadboard
les-audites-affaires-leadboard
user
resource
https://huggingface.co/les-audites-affaires-leadboard
new_line
 • Dataset → 
text
 • Dataset → 
https://huggingface.co/datasets/legmlai/les-audits-affaires
legmlai/les-audits-affaires
dataset
resource
https://huggingface.co/datasets/legmlai/les-audits-affaires
new_line
 • Eval harness → 
text
 • Eval harness → 
https://github.com/legml-ai/les-audits-affaires-eval-harness
https://github.com/legml-ai/les-audits-affaires-eval-harness
link
new_line
 • Article Huggingface : 
text
 • Article Huggingface : 
https://lnkd.in/dTHYKuzr
https://lnkd.in/dTHYKuzr
link
new_line
new_line
Envie de confronter votre modèle ? On publie vos résultats
text
Envie de confronter votre modèle ? On publie vos résultats
Ton LLM (ou devrais-je dire gml) est impressionnant… jusqu’à ce qu’il te fasse risquer 5 ans de prison pour une erreur de conformité.?

Aujourd’hui, legml.ai publie la première évaluation open‑source des modèles d’IA sur le droit des affaires français.

Et en même temps, le benchmark le plus complet:
"Les Audits Affaires Leadboard"

Pendant que beaucoup se contentent de dire que leur LLM "parle bien français", nous nous sommes questionnés :
 • Est‑ce qu’il sait éviter un redressement fiscal ? Connaît‑il les délais URSSAF, les pénalités TVA, ou les règles DORA 2025 ?
 • Tu lui ferais confiance pour structurer une clause de cession d’actions ?

Dans 41 % des cas, la réponse est non.

Hallucinations, seuils erronés, articles inventés, procédures fictives.

Quand un modèle se trompe en droit, c’est un risque réel.

C’est pourquoi nous avons construit les‑audits‑affaires, un benchmark qui reflète la complexité concrète des enjeux juridiques et financiers des entreprises françaises.

→ 2 670 cas métiers réalistes : questions posées par des DAF, juristes, comptables, RH, dirigeants.
→ 9 codes juridiques analysés (commercial, fiscal, travail, bancaire, consommation…)
→ 5 dimensions d’évaluation : action, délai, documents, impact financier, risques juridiques.

Mais on ne s’est pas contentés d’un score.

Pour chaque modèle évalué, vous avez accès à un rapport complet à https://lnkd.in/dBqKR7YZ : texte du modèle vs. ground‑truth légal, score détaillé, et justification article par article.

C’est transparent. C’est précis. C’est vérifiable.

Explorez dès maintenant :
 • Leaderboard → https://huggingface.co/les-audites-affaires-leadboard
 • Dataset → https://huggingface.co/datasets/legmlai/les-audits-affaires
 • Eval harness → https://github.com/legml-ai/les-audits-affaires-eval-harness
 • Article Huggingface : https://lnkd.in/dTHYKuzr

Envie de confronter votre modèle ? On publie vos résultats
👍
John6666 drhypnoss HumanistAtypik