shirenchuang/web-content-fetcher

Extrayez le contenu d'articles de n'importe quelle URL en Markdown propre. Utilise Scrapling en méthode principale (avec repli automatique rapide→furtif) et Jina Reader pour les pages simples. Préserve titres, liens, images, listes et blocs de code. Utilisez cette compétence lorsque l'utilisateur souhaite récupérer, lire, extraire, scraper ou résumer du contenu depuis une URL – y compris articles de blog, actualités, articles WeChat, pages de documentation ou toute page web.

Qu'est-ce que web-content-fetcher ?

Cette compétence permet à un agent IA (comme Claude Code, Cursor ou Codex) de récupérer et extraire le contenu textuel principal d'une page web (URL) et de le convertir en Markdown bien structuré. Elle utilise en premier lieu un script Scrapling avec un mode furtif (stealth) qui tombe automatiquement en mode rapide (fast) si nécessaire, et en dernier recours le service Jina Reader pour les pages plus simples. L'intérêt principal est de fournir un contenu propre, débarrassé du bruit (publicités, menus, etc.), tout en préservant la structure (titres, liens, images, listes, blocs de code). Le cas d'usage typique est la lecture d'articles de blog, d'actualités, d'articles WeChat (微信公众号) ou de pages de documentation. L'agent doit utiliser cette compétence dès que l'utilisateur formule une demande en lien avec la récupération, la lecture, l'extraction ou le résumé d'une page web, y compris des phrases comme « 帮我读一下这篇文章 » (lis-moi cet article) ou « 抓取这个网页 » (scrape cette page).

Compatible avec~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/shirenchuang/web-content-fetcher/tree/main/skills/web-content-fetcher

Installed? Explore more Recherche et analyse de données skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

Demander à votre IA préférée

Ouvre une nouvelle conversation avec cette compétence d'agent déjà préchargée.

Documentation

Que fait web-content-fetcher ?

Extrayez le contenu d'articles de n'importe quelle URL en Markdown propre. Utilise Scrapling en méthode principale (avec repli automatique rapide→furtif) et Jina Reader pour les pages simples. Préserve titres, liens, images, listes et blocs de code. Utilisez cette compétence lorsque l'utilisateur souhaite récupérer, lire, extraire, scraper ou résumer du contenu depuis une URL – y compris articles de blog, actualités, articles WeChat (微信公众号), pages de documentation ou toute page web. Déclenchez-la également lorsque l'utilisateur dit des phrases comme « 帮我读一下这篇文章 », « 抓取这个网页 », « 提取正文 » ou « read this page for me ».

Skills associés