关掉 ai 搜索优化服务要分 3 处动:AI 产品里的联网开关、站点侧的爬虫许可、服务商手上的账号与授权。只关第 1 处,站点照旧被抓;只删账号不撤 robots,内容还在答案里出现。
先确认要关到哪一层。不想让自家页面出现在 AI 答案里,做第 2、3 处;不想再付服务费,做第 4 处;只是自己不想看到联网结果,第 1 处就够。
第 4 条最容易漏。我处理过 1 个站,主账号收回了,服务商手里还留着 2 个子账号和 1 个 DNS 解析权限,停了 2 个月内容还在更新。
三种诉求对应三套动作,混着做会白折腾。第 1 种关完看不到变化,第 2 种关完 1 个月内答案还在,第 3 种关完对方还能改你站点。
第 2 种和第 3 种常被当成一回事。有人解约了服务商,robots 里还写着允许抓取,内容照旧被引,只是没人再更新。
打开对话产品的设置页,找「联网搜索」「搜索增强」「深度研究」这类开关,关掉后回答只基于模型自身知识,不再拉取网页。
这一步只影响你自己的会话,站点被抓取的记录不变。想让全公司都不出现,得逐台设备、逐个账号关,管不住外部用户。
在站点根目录打开 robots.txt,末尾追加 5 段,每段 2 行,格式如下:
每段的 User-agent 行和 Disallow 行各占 1 行,中间不能有空行,段与段之间留 1 个空行。写成 1 行会把规则并到上一条,等于没写。
写完后访问 站点域名/robots.txt 确认能打开。返回 404 说明文件没放对位置,返回首页内容说明服务器做了重写,要单独给 robots.txt 加例外。
进 CDN 控制台的「访问控制」或「UA 黑名单」,把上面 5 个 UA 加进去,动作选「拒绝」或「返回 403」。这一步比 robots 硬,robots 只是君子协定,UA 拦截是真拦。
拦完看 3 天日志。正常情况这几个 UA 的请求会掉到 0,如果还有请求,多半走了备用 UA 或代理 IP,要再按 IP 段补规则。
按合同条款发书面通知,邮件 + 纸质各 1 份,写清停止日期和服务范围。通知里列 3 项:停止内容生产、停止分发投放、停止数据抓取。
第 3 项要单独写。有的服务商合同里内容生产和数据监测是两个包,只停前者,后者还在跑。
逐项回收:网站后台子账号、统计工具权限、搜索资源平台的站点权限、DNS 解析、服务器 SSH 或面板账号、企业微信或协作工具的外部联系人。
DNS 托管最容易被忘。域名解析放在服务商账号下的,先迁回自己账号再解约,否则对方一改解析,站就断了。
| 改动位置 | 影响范围 | 生效时间 | 可逆性 |
|---|---|---|---|
| AI 产品联网开关 | 仅本人会话 | 立即 | 随时可开 |
| robots.txt | 遵守规则的爬虫 | 7 到 30 天 | 改回即可 |
| CDN 的 UA 拦截 | 全部命中 UA 的请求 | 5 分钟内 | 删规则即可 |
| 服务商合同 | 内容生产与投放 | 按通知期,30 到 90 天 | 需重签 |
| 子账号与权限 | 对方操作能力 | 立即 | 可再授权 |
| 已发布内容 | 站外存量页面 | 不自动消失 | 需逐条申请删除 |
表里最后 1 行要有预期。已经发到站外的稿件不会因为解约就消失,得按平台流程逐条申请下架,周期 3 到 15 个工作日。
第 1 条要当事故处理。整站被拦 1 周,恢复索引要 2 到 4 周。改 robots 前一定先备份,改完立刻用测试工具跑 3 个 URL。
第 2 条不等于关成功。AI 答案有缓存,抓取停了,答案可能还挂 2 到 4 周。判断标准看日志,不看答案页面。
AI 渠道的曝光会归零,这块原本带来的咨询也会停。我见过 1 个站关了 3 个月又开回来,理由是新客里 5 个里有 1 个说在 AI 里看到过。
要保留 AI 渠道又想控风险的,别全站屏蔽。把产品页、资质页留开,把内部通知、招聘、旧活动页屏蔽,用目录级规则代替整站规则。
目录级写法是 1 个 UA 配多条路径,按需分行,每行 1 条规则。写 4 到 6 行就够,写十几行容易把想留的页一起关掉。
关之前拍 1 张基线:当月来自 AI 渠道的咨询条数、5 个品牌词的答案截图。3 个月后对比,才知道该不该开回来。
正在做品牌搜索量爬坡的站,别整站屏蔽。品牌词刚有人搜,答案里出现的自家页面正是转化的落点,这时候关掉等于把刚起来的口子堵上。
有招投标、资质公示需求的行业,也别关。采购方常在 AI 里核企业资质,页面被引到反而是加分项。真要控,屏蔽报价页和内部文档页就够,公共信息页留着。
真正的判断标准是 1 条:AI 渠道来的咨询,接得住吗。接得住就留,接不住再关,关之前先把接单流程补起来更划算。
关停动作留 1 份记录:改了什么文件、谁改的、几点改的、备份放哪。半年后要开回来,这份记录比记忆可靠,robots 里哪几行是自己加的,只能靠它对照。
本文信息核对时间:2026-11。