Produits

Mesurer

LomBench

Le référentiel qui évalue l'IA sur les langues africaines

12langues togolaises et lingua franca évaluées
1métrique publiée et reproductible : le score Lom

01

Le produit

LomBench applique la métrique Lom, développée par notre équipe de recherche, pour évaluer objectivement les modèles de reconnaissance vocale, de traduction et de synthèse sur les langues d'Afrique de l'Ouest. Elle quantifie le niveau réel de « préparation à l'IA » d'une langue, au-delà des annonces marketing.

Analyse de graphiques de performance sur un écran de données
Le référentiel qui évalue l'IA sur les langues africaines

02

Le récit du produit

Mesurer plutôt que promettre

Annoncer qu’un modèle « prend en charge » une langue africaine ne coûte rien. LomBench remplace l’annonce par un chiffre : la métrique Lom quantifie le niveau réel de préparation d’une langue à l’IA, tâche par tâche.

Sur quoi porte l’évaluation

L’évaluation s’appuie sur le corpus Eyaa-Tom et couvre les tâches qui comptent en usage réel.

  • Reconnaissance de la parole — le modèle comprend-il ce qui est dit ?
  • Traduction — le sens survit-il au passage d’une langue à l’autre ?
  • Synthèse vocale — la voix produite est-elle intelligible pour un locuteur natif ?
Ce qui n’est pas mesuré finit toujours par être surestimé.
Principe de conception LomBench

Reproductible, et publié

La métrique Lom et le corpus Eyaa-Tom ont été présentés à AfricaNLP 2026 et couvrent douze langues togolaises et lingua francas. Le protocole est publié : un tiers peut refaire la mesure et retrouver le même score.

03

Contribuer

Ce que fait un contributeur, étape par étape.

  1. Choisissez un modèle

    Le vôtre ou un modèle public que vous voulez comparer.

  2. Sélectionnez les langues

    Une ou plusieurs langues du corpus Eyaa-Tom, selon votre besoin d'évaluation.

  3. Lancez le benchmark

    LomBench exécute la batterie de tests et calcule le score Lom correspondant.

  4. Comparez les résultats

    Consultez le classement et les métriques détaillées par tâche et par langue.

Demander un accès

04

Devenir client

Comment se passe un accès aux données, de la demande à la livraison.

  1. Décrivez votre modèle

    Architecture, langues cibles, cas d'usage prévu.

  2. Nous configurons l'évaluation

    Choix des langues, des tâches et du protocole de test avec notre équipe.

  3. Rapport et recommandations

    Vous recevez un score Lom détaillé et des pistes d'amélioration concrètes.

Demander une évaluation