AIKraft/MCP-серверы/io.github.taylorsmithgg/crawl-census

io.github.taylorsmithgg/crawl-census

Проверяет, разрешит ли домен работу вашего веб-скрапера, откажет в доступе или потребует оплаты. Полезен для оценки совместимости с crawl-census перед сбором данных.

taylorsmithgg Удалённый · HTTP Данные official

Что это

Проверяет, разрешит ли домен работу вашего веб-скрапера, откажет в доступе или потребует оплаты. Полезен для оценки совместимости с crawl-census перед сбором данных.

Как подключить

1Remote MCP — устанавливать локально не нужно
https://crawlcensus.com/mcp
2Добавить в конфиг MCP-клиента (mcp.json / claude_desktop_config.json)
{ "mcpServers": { "io-github-taylorsmithgg-crawl-census": { "url": "https://crawlcensus.com/mcp" } } }

Вставьте блок в конфиг клиента (Claude Desktop, Claude Code, Cursor, VS Code, Cline). Для защищённого endpoint добавьте заголовок авторизации из официальной инструкции.