AIKraft/MCP-серверы/com.actablesite/ai-crawler-robots-monitor

com.actablesite/ai-crawler-robots-monitor

Проверка политики robots.txt для AI-краулеров и мониторинг изменений политики публичного сайта, карты сайта и llms.txt.

unitedideas Удалённый · HTTP official

Что это

Проверка политики robots.txt для AI-краулеров и мониторинг изменений политики публичного сайта, карты сайта и llms.txt.

Как подключить

1Remote MCP — устанавливать локально не нужно
https://actablesite.com/mcp/
2Добавить в конфиг MCP-клиента (mcp.json / claude_desktop_config.json)
{ "mcpServers": { "com-actablesite-ai-crawler-robots-monitor": { "url": "https://actablesite.com/mcp/" } } }

Вставьте блок в конфиг клиента (Claude Desktop, Claude Code, Cursor, VS Code, Cline). Для защищённого endpoint добавьте заголовок авторизации из официальной инструкции.