Comment nous testons Okaasan

Avant le lancement, nous avons fait tourner Okaasan sur de vraies étiquettes et de vrais menus japonais, et vérifié chaque réponse par rapport à ce que dit l’étiquette. Voici les résultats, et ce qu’ils ne prouvent pas.

Obtenir Okaasan Pro

Les résultats

Mesurés en novembre 2026, avec la même IA et le même filet de sécurité que l’application.

  • 1 500+

    vrais scans d’étiquettes et de menus testés avant le lancement

  • 115

    vrais produits japonais, testés 3 fois chacun

  • 389

    erreurs graves de l’IA rattrapées par le filet de sécurité d’Okaasan : 0 restante

  • 99 %

    des plats trouvés sur 15 vrais menus de restaurant (471 sur 475)

L’IA lit. Le Contrôle de maman rattrape le reste.

Okaasan utilise une IA pour lire l’étiquette, puis vérifie chaque réponse comme une mère relit des devoirs : c’est le Contrôle de maman, le filet de sécurité d’Okaasan. Nous avons donné à l’IA d’Okaasan les mêmes 115 étiquettes sans ce filet, avec les mêmes questions qu’à ChatGPT, Claude et Gemini. Elle a dit végétariens des chips aux crevettes et une pâte de poisson, sans fruits de mer des gyoza à la sauce de poisson, et a ignoré 19 mentions d’allergènes imprimées sur les étiquettes. Avec son filet de sécurité, Okaasan est 49 fois plus fiable.

40

erreurs graves de l’IA d’Okaasan sans son filet de sécurité, sur les 115 étiquettes

0

avec son filet de sécurité

De quoi est fait le filet de sécurité

  • 15

    séries de tests sur de vraies étiquettes japonaises, chacune suivie de corrections et d’un nouveau test

  • Des centaines

    de mots japonais d’ingrédients vérifiés dans notre code : porc caché, gélatine, alcool de la sauce soja et du miso, bouillon de poisson

  • 2

    lectures de chaque étiquette de produit : une deuxième rien que pour les petits caractères, les mentions d’usine et l’encadré des allergènes

  • 4

    langues pour vos allergies : anglais, français, chinois et japonais

  • 0

    produit affiché « OK » sans liste d’ingrédients à vérifier

  • 298

    vérifications automatiques avant chaque mise en ligne, dont 79 sur la sécurité des régimes et des allergies

Comment se passe un test

  1. La bonne réponse d’abord

    Pour chaque produit, nous lisons l’étiquette ingrédient par ingrédient et écrivons la réponse attendue pour chaque régime et chaque ingrédient, avant tout scan.

  2. Okaasan scanne la photo

    La même IA et le même filet de sécurité que dans l’application, 3 fois par produit, parce qu’une IA ne répond pas toujours de la même façon.

  3. Chaque réponse est comparée

    Une fois pour l’IA seule, une fois après le filet de sécurité d’Okaasan, c’est-à-dire ce que vous voyez. Une erreur devient une correction, et la correction est retestée sur tous les produits.

Ce qu’est une erreur grave

Un produit affiché « OK » alors que son étiquette dit le contraire : halal, végan ou végétarien, sans gluten, ou sans porc, lait, soja, fruits de mer, alcool ou caféine. C’est l’erreur qui peut faire du mal. Sur 345 scans des 115 produits, l’IA seule en a fait 389. Après le filet de sécurité d’Okaasan : 0.

Quelques pièges

  • かつお (bonite) dans des crackers de riz, sur une étiquette photographiée à l’envers
  • 豚肉 (porc) écrit seulement dans la parenthèse des allergènes de pâtes fraîches à la bolognaise
  • ゼラチン (gélatine) dans un yaourt à la pomme
  • 酒精 (alcool) dans un miso de riz

70 fois plus fiable que ChatGPT, 57 fois plus que Gemini, 35 fois plus que Claude

En novembre 2026, nous avons donné les mêmes 115 étiquettes à ChatGPT (GPT-6.1) et à Claude (Opus 5.5), sur leurs offres payantes, et à Gemini dans son application gratuite (Auto), avec les mêmes questions sur les régimes et les ingrédients pour chaque produit. Leurs réponses ont été notées comme celles d’Okaasan, avec les mêmes réponses attendues.

Okaasan, l’IA d’Okaasan seule, ChatGPT, Claude et Gemini sur les mêmes 115 vraies étiquettes japonaises, novembre 2026
OkaasanAvec son filet de sécuritéL’IA d’Okaasan, seuleSans son filet de sécuritéChatGPTGPT-6.1ClaudeOpus 5.5GeminiAppli gratuite
Erreurs gravesAffiché « OK » alors que l’étiquette dit le contraire040des chips aux crevettes dites végétariennes3un cracker de riz au poisson dit végan21mentions d’allergènes de l’étiquette ignorées50un ramen au bouillon de porc dit sans porc
« Pas clair » alors que l’étiquette répondaitmoins de 1 sur 5001 sur 201 sur 81 sur 221 sur 26
Okaasan est plus fiableRéférence49 fois70 fois35 fois57 fois

Testé en novembre 2026 sur les mêmes 115 vraies étiquettes japonaises, avec les mêmes questions pour chacun : ChatGPT et Claude sur leurs modèles payants, Gemini dans son application gratuite. Une réponse sur laquelle on ne peut pas compter est une réponse fausse, ou « pas clair » alors que l’étiquette répondait. Les règles qui diffèrent d’une application à l’autre, comme l’alcool de la sauce soja, ne sont pas comptées contre eux.

ChatGPT a été prudent, mais souvent sans réponse. Claude a lu juste chaque liste d’ingrédients, mais a répondu « non » 21 fois pour un allergène que l’étiquette cite dans sa mention d’usine, comme le lait sur trois paquets HARIBO. Gemini a dit sans porc un ramen instantané au bouillon de porc, et végétariens des HARIBO à la gélatine. Okaasan garde les allergènes de la mention d’usine à part et ne les affiche jamais comme absents.

Seuls, les modèles de ChatGPT et de Claude font moins d’erreurs que l’IA d’Okaasan. Okaasan est plus fiable grâce à son filet de sécurité, qui compare chaque réponse avec la liste d’ingrédients japonaise avant que vous ne la voyiez.

Menus de restaurant

471 des 475 plats trouvés sur 15 vrais menus, imprimés, manuscrits et au pinceau, et les 15 prix lus justes. Un menu donne le nom d’un plat, pas sa recette : ses indications de régime sont donc des estimations éclairées. Vérifiez les allergènes auprès du personnel.

Ce que ces tests ne prouvent pas

  • Qu’Okaasan ne se trompe jamais

    Les 115 produits ont été choisis pour leurs pièges : ce n’est pas un échantillon au hasard de l’alimentation japonaise. Une étiquette déchirée ou froissée, ou une photo floue, peut encore le tromper.

  • Qu’un produit est sans danger pour votre allergie

    Okaasan lit ce que l’étiquette imprime, pas ce qu’elle ne dit pas. Vérifiez toujours les allergènes sur l’emballage, et auprès du personnel au restaurant.

  • Ce que valent ChatGPT, Claude et Gemini aujourd’hui

    Chacun a répondu une fois par produit, en novembre 2026, avec une question précise écrite pour le test : ChatGPT et Claude sur leurs modèles payants, chacun dans une seule conversation, Gemini dans son application gratuite. Ces applications changent souvent, et un voyageur qui pose sa question avec ses propres mots n’a pas été testé.

Au prochain konbini, vous saurez ce que vous achetez.