Community연구 & 데이터 분석github.com

shirenchuang/web-content-fetcher

모든 URL에서 글 내용을 깔끔한 Markdown으로 추출합니다. Scrapling 스크립트를 기본 방식으로 사용하며(자동 fast→stealth 폴백), 간단한 페이지의 경우 Jina Reader를 대안으로 사용합니다. 제목, 링크, 이미지, 목록, 코드 블록을 보존합니다.

web-content-fetcher란 무엇인가요?

이 스킬은 사용자가 제공한 URL에서 웹 페이지의 본문 콘텐츠를 추출하여 깔끔한 Markdown 형식으로 변환하는 AI 에이전트 도구입니다. 블로그 게시물, 뉴스 기사, 위챗 공개 계정(微信公众号) 글, 문서 페이지 등 다양한 웹 페이지에서 핵심 콘텐츠를 손쉽게 가져올 수 있습니다. Claude Code, Cursor, Codex와 같은 주요 AI 어시스턴트 플랫폼에서 사용할 수 있으며, 사용자가 '이 글을 읽어줘', '웹페이지를 긁어와' 같은 요청을 할 때 자동으로 트리거되도록 설계되었습니다. 내부적으로는 Scrapling 라이브러리를 활용한 스크립트를 기본 추출 방식으로 사용하며, 실패 시 자동으로 'stealth' 모드로 폴백하여 차단을 우회합니다. 간단한 페이지의 경우 Jina Reader를 대체 방법으로 사용하여 안정성을 높입니다. 최종 결과물은 제목, 링크, 이미지, 목록, 코드 블록 등의 구조를 그대로 유지한 Markdown 본문으로 반환됩니다.

지원 대상~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/shirenchuang/web-content-fetcher/tree/main/skills/web-content-fetcher

Installed? Explore more 연구 & 데이터 분석 skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

즐겨 사용하는 AI에게 물어보기

이 에이전트 스킬이 미리 로드된 새 채팅을 엽니다.

문서

web-content-fetcher은(는) 무엇을 하나요?

어떤 URL에서든 글 내용을 깔끔한 Markdown으로 추출합니다. Scrapling 스크립트를 기본 방식으로 사용하며(자동 fast→stealth 폴백), 간단한 페이지의 경우 Jina Reader를 대안으로 사용합니다. 제목, 링크, 이미지, 목록, 코드 블록을 보존합니다. 사용자가 URL에서 내용을 가져오거나, 읽거나, 추출하거나, 스크래핑하거나 요약하고자 할 때 이 스킬을 사용하세요. 블로그 게시물, 뉴스 기사, 위챗 공개 계정(微信公众号) 글, 문서 페이지 또는 모든 웹 페이지가 해당됩니다. 사용자가 "帮我读一下这篇文章", "抓取这个网页", "提取正文" 또는 "read this page for me" 같은 말을 할 때도 트리거하세요.

관련 스킬