io.github.nolindnaidoo/scrape-le
Анализ содержимого robots.txt и отчет о том, может ли путь быть проиндексирован.
AInolindnaidoo
Локальный · npm
official
Что это
Анализ содержимого robots.txt и отчет о том, может ли путь быть проиндексирован.
Как подключить
1Официальный package
npm · scrape-le-mcp@2.2.4
2Установить и запустить в терминале
npx scrape-le-mcp@2.2.4
3Добавить в конфиг MCP-клиента (mcp.json / claude_desktop_config.json)
{
"mcpServers": {
"io-github-nolindnaidoo-scrape-le": {
"command": "npx",
"args": [
"scrape-le-mcp@2.2.4"
]
}
}
}
Вставьте блок в конфиг клиента (Claude Desktop, Claude Code, Cursor, VS Code, Cline). Команда и package собраны из полей официального MCP Registry.