Noter les réponses japonaises de forme libre avec un LLM : Django + pydantic-ai

J'étudie pour le JLPT (visant le N2 ce cycle), et ce qui me dérangeait à propos de chaque application de préparation que j'ai essayée, c'est qu'elles sont toutes à choix multiples. Vous appuyez sur A/B/C/D, vous obtenez une coche verte et vous avez l'impression d'apprendre. Mais les choix multiples entraînent la reconnaissance, pas le rappel. Vous pouvez faire correspondre votre chemin jusqu'à obtenir une partition de passage sans pouvoir réellement produire une seule phrase.

J'ai donc commencé à créer BetterLingo, une application d'étude JLPT dont la pratique quotidienne est de forme libre. Pas de choix multiples. Vous écrivez une vraie réponse et un LLM la note. Cet article concerne la partie qui était réellement intéressante à construire : noter une réponse japonaise de forme libre de manière suffisamment fiable pour qu'un apprenant fasse confiance à la partition.

Le problème avec "demandez simplement au modèle de le noter"

La version naïve est une invite : « Voici...
[Courte citation de 8% de l'article original]