RecodeX 重构消息,开发者工具 Crawlerpeek 上线,提供命令行界面(CLI)与 MCP 两种接入方式,用于查看网站允许哪些 AI 爬虫访问。该工具面向网站运营者与开发者,帮助其核查 AI 爬虫的放行情况。
Crawlerpeek 推出 CLI 与 MCP 工具,可查看网站放行的 AI 爬虫
AI 辅助判断中性仅供信息参考,不构成投资建议
原始信息来源Hnrssgithub.com
查看原文 ↗RecodeX 重构消息,开发者工具 Crawlerpeek 上线,提供命令行界面(CLI)与 MCP 两种接入方式,用于查看网站允许哪些 AI 爬虫访问。该工具面向网站运营者与开发者,帮助其核查 AI 爬虫的放行情况。