$ loading_
监控网站对 AI 爬虫的访问策略及 sitemap、llms.txt 变更
复制安装指令,让 AI 自动完成配置 · 推荐新手
请帮我安装 askskill 上的 "ActableSite AI Crawler Monitor" MCP 服务: 执行:claude mcp add --transport http 'com-actablesite-ai-crawler-robots-monitor' 'https://actablesite.com/mcp/'
请检查 example.com 的 robots.txt,判断是否对常见 AI crawler 进行了允许或限制,并总结当前策略。
返回该站点 robots.txt 中与 AI 爬虫相关的规则摘要,以及允许或限制情况说明。
持续监控 example.com 的 sitemap,如有新增、删除或更新,请整理变更内容并提醒我。
输出 sitemap 的变更记录或提醒,帮助用户跟踪公开页面结构变化。
监控 example.com 的 llms.txt 文件,一旦内容发生变化,告诉我具体改动和可能影响。
返回 llms.txt 的更新提醒与差异摘要,便于了解网站面向大模型的公开说明是否变化。
开发者或产品经理可以用它检查官网 robots.txt 中针对 AI 爬虫的规则,及时发现公开抓取策略是否发生变化。
运维或网站负责人可以监控 sitemap 和 llms.txt 的更新,了解公开页面结构或面向大模型说明是否被调整。
它用于检查 AI crawler 的 robots.txt 策略,并监控公开网站的 policy、sitemap 和 llms.txt 变化。
根据给定描述,它会关注 robots.txt 策略、公共站点 policy、sitemap,以及 llms.txt 的变化。
给定素材没有提供安装步骤、运行环境或密钥要求;如需具体方式,见源码仓库。
帮助用户即时审查任意网址的 SEO 状态、站点地图与爬虫访问配置。
帮助 AI 抓取网站动态内容、提取链接并保存结构化 Markdown。
帮助用户抓取并审计网站,发现技术 SEO 与 GEO 问题并给出修复建议
智能爬取并自适应探索网站,输出结构化网页分析结果。
检查网站是否能被 ChatGPT、Perplexity 和 Claude 等 AI 搜索看见
获取任意网站的FIND/READ/USE代理就绪度审计评分