「关闭 AI 搜索优化功能」在 3 个层面能做:搜索端不想看 AI 摘要,在账号设置里关;站点不想被 AI 抓取用于生成答案,在 robots.txt 里挡 AI 爬虫的 UA;网站后台的 AI 摘要与 AI 客服模块,在插件开关里停。前 2 种 10 分钟内能做完,第 3 种要动网站文件。
先确认你要关的是哪一种。多数人搜这句话,想的是第 2 种:自己站点的内容被 AI 搜索引用后,出现了错误的答案或流量下滑,想把口子关上。下面按这个前提写,另两种在第二节单独标出。
3 种关法的对象完全不同。第 1 种改的是你手机上的显示,第 2 种改的是爬虫能不能进,第 3 种改的是网站上有没有这块功能。改错了对象,做完看不出变化,白折腾 1 轮。判断方法很简单:你要的结果是「我看不到 AI 答案」「AI 看不到我的站」还是「我的页面上不要 AI 段落」,3 句话对应 3 种关法。
第 3 条是硬要求。我见过 1 次事故:运维在 robots 里写了 Disallow: /,第 2 天全站从索引里掉,恢复花了 3 周。
在搜索引擎的手机客户端里,进入「我的」→「设置」→ 找「AI 摘要」「智能回答」「AI 搜索」这类选项,关掉后搜索结果页只显示网页链接与摘要片段。这一项只影响你自己的账号,不影响别人看到的结果,也不影响你的站点被抓取。改完立即生效,不收费。
打开 robots.txt,按 UA 分段写。下面这段挡 5 个常见 AI 爬虫,其余搜索引擎不受影响:
每段之间留 1 个空行,写完保存。生效时间看爬虫下一次访问,快的 1 天,慢的 7 天。文件里不要出现 Disallow: / 这样的全站屏蔽,会连普通搜索引擎一起挡掉。
进网站后台,找「插件」「扩展」「模块管理」,把「AI 摘要」「AI 客服」「智能问答」「自动生成标签」这类模块停用。用宝塔面板的,在「网站」→「设置」→「伪静态」里看有没有 AI 相关规则,一并删掉。改完清 1 次缓存,前台刷新 2 到 3 次确认模块不再加载。
这一步动的是站点功能,跟搜索引擎无关。停用后页面上的 AI 生成段落会消失,如果那些段落已经被收录,搜索结果里的摘要不会立刻变,要等下次抓取。
第 1 种只作用在 1 台设备、1 个账号上,换手机或退出登录就恢复。第 2 种作用在域名上,挡的是所有 AI 爬虫,普通搜索引擎照常抓,改了要等 1 到 7 天看效果。第 3 种作用在页面上,改完立刻可见,但要动模板文件,改错会让整站报错。
从影响面看,第 2 种的决定性大。它决定了你的内容还能不能进 AI 的答案库,收窄之后要重新放开,得删掉那几行规则再等抓取,中间的空档期通常 2 到 4 周。我自己的做法是先只挡 2 个爬虫,观察 2 周,看 AI 来源的访问掉了多少,再决定要不要全挡。
从操作成本看,第 3 种反而容易失控。停用 AI 客服模块,可能连带把在线留言的表单一起停掉,因为两者常挂在同一个插件里。停之前把插件名与功能清单截 1 张图,出问题能照着恢复。
| 字段 | 填什么 | 常见错填 |
|---|---|---|
| User-agent | 爬虫 UA 全名,区分大小写 | 写成 gptbot 小写,规则不生效 |
| Disallow | 要挡的路径,写 / 表示全站 | 写成完整网址,规则无效 |
| Sitemap | 站点地图的完整网址 | 与挡爬虫规则写在同一段 |
| Allow | 要放行的子目录 | 顺序写在 Disallow 之前 |
| 文件位置 | 域名根目录 | 放在子目录或静态资源目录 |
表里第 1 行踩的人多。UA 名区分大小写,GPTBot 写成 gptbot,爬虫读到不认,规则等于没写。写完在浏览器打开 你的域名/robots.txt,看返回的是纯文本还是 404。
挡住 AI 爬虫之后,AI 搜索里出现你站点的次数会下降。这部分曝光在有些行业是增量,在有些行业是干扰。判断方法看 1 个指标:最近 30 天,AI 来源带来的访问里,有多少停留在 10 秒以上。停留时间短、跳出高的,挡掉不吃亏;停留时间长、有咨询的,挡掉是自断一条渠道。
我接触过 1 家做工业配件的企业,AI 搜索每天进 20 多次访问,停留中位数 3 分钟,还留了 2 条询盘。他们没关,只把 1 个错误百出的产品页下线重写。另一家做本地服务的,AI 摘要里把营业时间写错,客户打电话来质问,他们选择挡住,2 周后错误摘要消失。
第 2 条属于紧急故障,处理顺序是恢复文件、提交抓取、观察 3 天。别在故障当天继续改其他规则,1 次只改 1 项,出问题才能定位。
第 6 条要接受 1 个现实:robots 只是一份行业内的君子协定,没有强制力。大厂的爬虫多数遵守,因为要维护自身口碑;采集站与小爬虫不读,也找不到处罚渠道。真要挡,只能在服务器上按 UA 或 IP 段封,代价是误封的风险,同一段 IP 里可能既有爬虫也有真实用户。
关掉只是把口子收窄,不等于内容不再被引用。已经抓走的内容还在对方库里,摘要会跟着缓存走一段,快的 3 天刷新,慢的 1 个月。要让错误信息消失,得回到源头把页面改对,再等下次抓取覆盖。改完在页面上加 1 行更新日期,比在后台偷偷改动更容易被识别为新版本。
还有 1 件事值得先做:把站点上被 AI 引用频次高的 10 个页面列出来,逐个核 1 遍关键字段,价格、地址、营业时间、服务范围。这 4 类信息最容易在 AI 答案里被写错,也最容易引起客户投诉。核完再决定关不关,顺序反过来做,往往是先关了口子,错误信息还挂在别人的答案里。本文信息核对时间:2026-11