J'ai écrit un validateur llms.txt avec 64 tests — et vérifié si les bots lisent ce fichier
L'auteur a créé un générateur et un validateur pour llms.txt, exécuté 64 tests, et découvert que les bots d'intelligence artificielle demandent rarement ce fichier : seulement 408 requêtes sur 515 millions d'événements de bots. Le validateur aide à garantir que le fichier respecte la spécification, qui est souvent violée.
Un article sur Habr décrit le développement d'un validateur et d'un générateur pour le fichier llms.txt, une norme proposée pour fournir des résumés de site aux modèles de langage. L'auteur a effectué 64 tests et a découvert que les bots IA demandent rarement llms.txt : l'analyse de Limy.ai en mai 2026 a montré seulement 408 requêtes sur environ 515 millions d'événements de bots sur 90 jours. Malgré cela, le validateur s'est avéré utile car la spécification est souvent violée dans les fichiers réels, avec des problèmes comme des titres manquants, plusieurs H1 et des liens http. Le parseur sépare l'analyse syntaxique de la validation, et le score de validation soustrait des pénalités pondérées (critique 40, élevée 25, moyenne 12, faible 5) de 100. La suite de tests couvre 22 règles spécifiques et des cas limites, s'exécutant en 43 millisecondes. L'auteur recommande d'utiliser llms.txt comme une police d'assurance peu coûteuse plutôt que comme un chemin garanti vers des réponses IA, et conseille de vérifier la structure du fichier avant de le publier.
Source: Habr — хаб ИИ —
original