AIKraft/Skills/scrapling-official

scrapling-official

Извлекает данные с сайтов через Scrapling, обходя антибот-защиты (Cloudflare Turnstile) и выполняя JS. Применяется при парсинге, краулинге или когда web_fetch не работает из-за защиты.

d4vinci official Разработка ★ 85.7k

Что делает навык

Scrapling — это адаптивная система веб-скрейпинга, которая автоматически адаптируется к изменениям на сайтах, переопределяя элементы при обновлении страниц. Она позволяет обходить антибот-защиты (например, Cloudflare Turnstile) и выполнять JavaScript, а также масштабировать парсинг до многопоточных краулов с паузой/возобновлением и ротацией прокси.

Когда применять

  • Парсинг данных с сайтов, защищенных антибот-системами, такими как Cloudflare Turnstile.
  • Извлечение информации со страниц, требующих выполнения JavaScript.
  • Масштабный краулинг с возможностью паузы, возобновления и автоматической ротации прокси.
  • Сбор данных с сайтов, структура которых часто меняется, благодаря адаптивному парсеру.

Как работает

  1. Убедитесь, что используется Python 3.10 или выше.
  2. Для командной строки обязательно используйте аргумент --ai-targeted для защиты от инъекций промптов и блокировки рекламы.
  3. При необходимости укажите параметры прокси или CDP (CDP URL, user_data_dir, proxy auth), которые будут проверены библиотекой.
  4. Запустите парсинг или краулинг; библиотека автоматически адаптируется к изменениям на странице и обходит защиты.
  5. При необходимости используйте функции паузы и возобновления для многопоточных сессий.

Примеры запросов агенту

Извлеки данные с сайта, защищенного Cloudflare, используя Scrapling.
Запусти краулинг сайта с ротацией прокси и возможностью паузы.
Собери элементы со страницы, которая часто обновляет свою структуру.

Что понадобится

  • Python 3.10+

Описание составлено по SKILL.md навыка, сверено 06.10.2026.

Как подключить

1Скачать навык
# возьмите папку навыка «scrapling-official» из репозитория: # https://github.com/d4vinci/scrapling
2Положить папку с SKILL.md к навыкам ассистента
# положите папку навыка туда, где ассистент ищет skills: cp -r scrapling-official/ ~/.claude/skills/scrapling-official/

Навык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.