AI 把不存在的规定说得像真的,自己怎么核一遍

3小时前发布

问 AI 某个政策怎么办,它给了一条带条款号的原文,去官网搜不到,不确定是编的还是自己没找对。
4条回答
hangyeguancha
1楼-- · 3小时前

模型按前文概率往后接字。它读过大量「某办法第几条」的写法,把这套格式学下来了,文件本身存不存在,它不查。

编出来的条款通常长得很像:机关名称对,编号连续,还带着施行日期。破绽落在细节,比如文件名里的年份和正文引用的年份差 2 年,或者文号在官网上搜不到。

我核这类内容的顺序是 3 步:搜文件全称,搜发文字号,打 12345 问这份文件还有没有效。

三步里任意一步落空,这句话就不能写进给客户的材料,宁可换成「按当地现行规定办理」这种不给具体条款的写法。

核一条要 10 到 15 分钟。客户拿着错文件去窗口被退回来,损失的是 3 天时间和一趟路费。

ziliaoheji
2楼-- · 3小时前

核一条政策类答案,我按 6 项逐条对,缺哪一项就说明这条不能用。

1. 文件全称,带书名号和年份,例如《XX 管理办法(2023 年修订)》。

2. 发文机关,写全称,不写简称。

3. 发文字号,形如「X政发〔2023〕7 号」,缺号的要多留个心眼。

4. 发布日期和施行日期分开放,两个日子隔半年以上的,注意过渡条款怎么算。

5. 现行状态,去发文机关官网的政策文件栏目看有没有废止公告。

6. 条款原文,AI 给的句子要在原文里能逐字找到,找不到就删掉。

这 6 项核完通常 15 分钟,比事后返工便宜。

shiyongjilu
3楼-- · 3小时前

去年 11 月,AI 给我一条《XX 市住宅专项维修资金管理办法》第 17 条,说是业主大会成立前由开发商代管。

我照着写进一份方案,客户拿去问区住建局窗口,人家说这个市没有这份办法,只有省里 2019 年的一份规定,条款号也对不上。

那份方案退回重写,前后耽误 4 天,客户还多跑了一趟政务大厅。

后来我立了两条硬规矩:政策类内容必须附官网链接和截图;找不到链接的改写成「建议向当地住建部门确认」。

同一个月我把手上 6 份旧方案翻了一遍,又找出 2 处类似的问题。

它自己不知道哪句是错的,连「这份文件存在吗」这个问题它都答不了。

bikengtixing
4楼-- · 3小时前

几种我试过、核不出问题的做法。

问它「你确定吗」,它会改口,改成另一条同样不存在的条款,语气比第一次还肯定。

让它给链接,链接是按域名规律拼出来的,点开 404 是常态,偶尔跳到一个同名的旧页面,更容易被当成真的。

把同一句话发给两个平台比对,两边都编,还编得不一样,比完更乱。

有效的一步只有去官网搜原文,站内检索框比问 AI 可靠,搜不到就当它没说。

两份转述同一条规定,却给出两个年份,基本可以判死。

编造的条款有个共同点:越具体越像真的,带编号、带日期、带金额。这 3 样恰恰是最该核的地方,也最容易骗过眼睛。