Respecter la négociation de contenu pour servir Markdown au lieu de HTML à LLMS

Les agents n'ont pas besoin de voir des sites Web avec balisage et style; Tout autre chose que la marque simple n'est que de l'argent gaspillé dépensé pour les jetons de contexte.

J'ai décidé de rendre mes sites Astro plus accessibles aux LLMS en leur faisant retourner des versions de marque de pages lorsqueAccepterL'en-tête atexte / plaineouTexte / marqueprécédenttexte / html. Cela a été très fortement inspiré par ce post sur X de Bunjavascript.

J'espère que cela aide aussi le référencement, car les agents sont une grande partie de mon trafic. L'équipe BUN a rapporté une chute de jetons 10x pour Markdown et Frontier Labs Pay par jeton, donc les pages moins chères devraient être plus grattées, être plus susceptibles de se retrouver dans des données d'entraînement et de me donner un petit ascenseur supplémentaire des assistants et de la recherche.

Remarque: vous pouvez consulter la fonctionnalité en direct en exécutantCurl -H "Accepter: Text / Markdown" https://www.skeptrune.comoucurl -h "accepter: texte / simple" https://www.skeptrune.comdans votre terminal.

Les générateurs de sites statiques sont déjà à mi-chemin

Les générateurs de sites statiques comme Astro et Gatsby génèrent déjà un grand dossier de fichiers HTML, généralement dans undistroupubliquedossier à travers unNPM Run Buildcommande. La seule chose qui manque est un moyen de convertir ces fichiers HTML à Markdown.

Il s'avère qu'il existe un excellent outil CLI pour cela appelé HTML-To Markdown qui peut être installé avecNPM Install -d @ wcj / html-to markdown-CLIet exécuter pendant une étape de construction en utilisa...
[Courte citation de 8% de l'article original]