OAI-SearchBot（OAI-SearchBot）

User-agent: OAI-SearchBot
Disallow: /

把以上片段加入网站根目录的 robots.txt 即可要求该蜘蛛停止抓取全部页面（需改为只拦某个目录，把 Disallow: / 换成对应路径）。 注意：OAI-SearchBot 抓取的内容用于 AI 模型训练与问答，不参与搜索引擎收录，拦截它不影响你在搜索结果中的排名；如不希望站点内容被用于 AI 训练，建议直接按上方片段拦截。