Avec l’évolution des intelligences artificielles génératives et des modèles de langage de grande taille comme LLLMs, il existe de nouvelles pratiques qui émergent afin d’organiser, de structurer et d’optimiser la visibilité des contenus en ligne. Parmi celles-ci, le fameux llls.txt qui commence à titiller la curiosité de certains développeurs et de responsables marketing. Qu’est-ce que le llms.txt ? Quelle est sa réelle utilité et faut-il s’en soucier aujourd’hui ?
Qu’est-ce que le fichier llms.txt ?
Ce fichier est une proposition de standard visant à guider les modèles de langage dans la compréhension et l’exploitation du contenu structuré d’un site web donné. C’est un fichier texte (.txt) au format Markdown qui est hébergé à la racine d’un site web. Ce fichier est organisé selon des catégories données, comme celle de la documentation technique, des politiques de service ou des informations produit.
En un mot, c’est d’une précieuse aide pour orienter les IA vers des pages clés contenant des données essentielles telles que :
- les politiques de retour,
- les documentations API,
- les guides de taille,
- et les catalogues produits.
L’objectif principal est de réduire l’ambiguïté lors des traitements des informations par les LLMs. Cela offre une carte claire vers les contenus ayant une valeur ajoutée considérable.
Une logique similaire à robots.txt ou le sitemap.xml
Le concept du fichier llms.txt est semblables aux outils bien établis tels que robots.txt ou sitemaps.xml. Ces anciens fichiers ont été utilisés depuis longtemps pour indiquer aux moteurs de recherche comment explorer un site web. En suivant ce parcours, llms.txt a repris le relais tout en adoptant une orientation spécifique vers les intelligences artificielles.
Toutefois, il convient de signaler une différence essentielle. Aucun fournisseur d’IA n’a encore adopté le fichier lllms.txt dans ses protocoles de crawl. Les célèbres OpenAI, Google, Anthropic et Méta, utilisent tous les robots.txt. Aucun de ces grands noms n’a formellement utilisé le fichier llms.txt.
A quoi ressemble un fichier llms.text ?
Un fichier llms.txt typique est structuré à l’aide de titres H2 en Markdown avec des liens vers des pages intéressantes et pertinentes. Voici un exemple de llms.txt.
# llms.txt
## Docs
– /api.md
Résumé des méthodes API, authentification, limites de taux et exemples de requêtes.
– /quickstart.md
Guide d’installation pour les développeurs.
## Politiques
– /terms.md
Conditions générales d’utilisation.
– /returns.md
Politique de retour.
## Produits
– /catalog.md
Index structuré des produits et catégories.
– /sizing-guide.md
Guide des tailles selon les catégories.
La création de ces fichiers est désormais possible à l’aide de l’éditeur Markdown ou un générateur en ligne gratuit.
Qui utilise réellement llms.txt ?
Au moment où l’on écrit, l’utilisation de llms.txt reste marginale. Une poignée d’entreprises technologiques y recourent tout de même. C’est le cas de Anthropic qui publie une carte complète de sa documentation API. Le cas de Cloudfare qui l’utilise avec des liens vers ses ressources sur la sécurité et les performances. Enfin, Tinybird et Mintlify utilisent le fichier sur le projet axé sur les développeurs.
Il existe un site web qui comprend l’annuaire communautaire des fichiers publics llms.txt. Ce ne sont que des expérimentations isolées sans validation officielle des principaux acteurs du secteur.
Une adoption future est-elle envisageable ?
Rien n’indique jusqu’à présent que llms.txt sera intégré aux pratiques des grands modèles de langage. Les experts en SEO et les responsables de l’indexation IA rappellent qu’une simple création du fichier ne garantit en rien sa consultation ni son interprétation par les robots de l’Open AI, de Google ou d’autres plateformes.
Le représentant de Google, John Mueller a récemment comparé le fichier llms.txt à la balise de méta keywords: un signal que le propriétaire du site veut envoyer, mais sans aucune garantie que les robots en tiennent compte. Cela signifie qu’il vaut mieux travailler sur la qualité de la page que sur un fichier qui est encore que théorique.
Quels sont les avantages et les risques du fichier llms.txt ?
Si bien que ce fichier n’est pas encore de grande notoriété, sa mise en place ne présente pas de risque. C’est un fichier non intrusif, facilement modifiable et affectant en rien le fonctionnement du site ni son SEO traditionnel. Pour les sites ayant des contenus structurés, llms.txt peut servir de support de navigation interne.
Toutefois, il est essentiel de rester lucide, llms.txt n’apporte aujourd’hui aucune preuve de gain de visibilité.
Conclusion
llms.txt est un concept prometteur dans le contexte de l’IA générative. Bien qu’il n’ait pas encore trouvé sa place dans les standards du web, il peut être d’une grande aide plus tard dans l’avenir. En l’absence de reconnaissance par les principaux fournisseurs de LLM, il reste une initiative spéculative. Son utilisation peut être envisagée à titre expérimental.
Recent Comments