jamditis/web-scraping

Web scraping con evasión anti-bot, extracción de contenido, APIs no documentadas y detección de señuelos. Útil para extraer contenido de sitios web, manejar muros de pago, implementar cascadas de scraping o procesar redes sociales. Cubre patrones de requests, trafilatura, Playwright con modo sigiloso, yt-dlp e instaloader.

¿Qué es web-scraping?

Esta habilidad, denominada jamditis/web-scraping, está diseñada para desarrolladores y agentes de IA que necesitan extraer datos de sitios web de forma robusta y eficiente. Su objetivo principal es superar obstáculos comunes como bloqueos anti-bot, muros de pago y contenido dinámico, utilizando técnicas como navegación headless con Playwright en modo sigiloso y extracción de datos de APIs no documentadas. La habilidad proporciona un enfoque en cascada que combina diferentes herramientas (requests, trafilatura, Playwright, yt-dlp, instaloader) para maximizar la tasa de éxito en la obtención de contenido, e incluye detección de 'poison pills' (contenido engañoso). Es compatible con plataformas como Claude Code, Cursor, Codex y otros agentes que sigan el estándar de skills. Su documentación en SKILL.md define patrones claros de implementación y mejores prácticas para scraping ético y eficiente.

Compatible con~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/jamditis/claude-skills-journalism/tree/main/skills/web-scraping

Installed? Explore more Investigación y análisis de datos skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

Preguntar en tu IA favorita

Abre un nuevo chat con esta habilidad de agente ya precargada.

Documentación

¿Qué hace web-scraping?

Web scraping con evasión anti-bot, extracción de contenido, APIs no documentadas y detección de señuelos. Útil para extraer contenido de sitios web, manejar muros de pago, implementar cascadas de scraping o procesar redes sociales. Cubre patrones de requests, trafilatura, Playwright con modo sigiloso, yt-dlp e instaloader.

Individual skills in this repo

This repo contains 2 individual skills — each has its own dedicated page.

Skills relacionados