J'ai construit un Firecrawl local et sans clé pour Claude Code — voici pourquoi publié : false

DEV - 05:50
Un modèle de langage paie pour chaque jeton de navigation, publicité et pied de page qu'il lit. Cette phrase est la...

Un modèle de langage paie pour chaque jeton de navigation, publicité et pied de page qu'il lit.

Cette seule phrase est la seule raison pour laquelle la feuille de déchirure existe. Je fais beaucoup de travail de recherche au sein de Claude Code, et une grande partie consiste à "va lire cette page et dis-moi ce qu'elle dit". Les outils de style Firecrawl sont vraiment excellents dans ce domaine, mais ils sont SaaS. Des clés API, des quotas, une facture et vos URL quittant votre machine pour y arriver. Je voulais le même ensemble d'outils, fonctionnant entièrement sur mon propre ordinateur portable, alimentant mon agent en contenu propre sans rien de tout cela.

Alors je l'ai construit. Cela s'appelle Tearsheet, c'est sous licence MIT, et voici pourquoi.

feuille déchirable (n.) : une page arrachée d'une publication et déposée comme preuve de sa parution.

Cette définition est sur le repo pour une raison. L’ensemble de l’outil est construit autour de l’idée que ce qu’il restitue doit être suffisamment fiable pour être déposé comme preuve. Plus d’informations à ce sujet ci-dessous – c’est la partie qui me tient le plus à cœur.

Pourquoi je l'ai construit

Deux choses m’ont poussé à bout.

Les jetons sont de l'argent. Lorsque vous grattez une page et videz le HTML brut – ou même une conversion naïve « lisible » – dans le contexte d'un modèle, vous payez pour la bannière de cookies, le méga-menu, le modal de la newsletter et le pied de page à six profondeurs. Lors d’une recherche...
[Courte citation de 8% de l'article original]

Loading...