scrapling-official
Извлекает данные с сайтов через Scrapling, обходя антибот-защиты (Cloudflare Turnstile) и выполняя JS. Применяется при парсинге, краулинге или когда web_fetch не работает из-за защиты.
Что делает навык
Scrapling — это адаптивная система веб-скрейпинга, которая автоматически адаптируется к изменениям на сайтах, переопределяя элементы при обновлении страниц. Она позволяет обходить антибот-защиты (например, Cloudflare Turnstile) и выполнять JavaScript, а также масштабировать парсинг до многопоточных краулов с паузой/возобновлением и ротацией прокси.
Когда применять
- Парсинг данных с сайтов, защищенных антибот-системами, такими как Cloudflare Turnstile.
- Извлечение информации со страниц, требующих выполнения JavaScript.
- Масштабный краулинг с возможностью паузы, возобновления и автоматической ротации прокси.
- Сбор данных с сайтов, структура которых часто меняется, благодаря адаптивному парсеру.
Как работает
- Убедитесь, что используется Python 3.10 или выше.
- Для командной строки обязательно используйте аргумент --ai-targeted для защиты от инъекций промптов и блокировки рекламы.
- При необходимости укажите параметры прокси или CDP (CDP URL, user_data_dir, proxy auth), которые будут проверены библиотекой.
- Запустите парсинг или краулинг; библиотека автоматически адаптируется к изменениям на странице и обходит защиты.
- При необходимости используйте функции паузы и возобновления для многопоточных сессий.
Примеры запросов агенту
Что понадобится
- Python 3.10+
Описание составлено по SKILL.md навыка, сверено 06.10.2026.
Как подключить
SKILL.md к навыкам ассистентаНавык — папка с файлом SKILL.md (описание + инструкции) и опциональными скриптами. Ассистент (Claude, Claude Code и совместимые) подхватывает его по описанию и следует шагам.