AI 内容识别
速览要点
- 它把守的是哪一关
- 在答案循环(answer loop)的第三步「采信」和第四步「合成」上,对应着垃圾内容过滤与信任过滤这两道闸门
- 生产环境里真的有一个「AI 检测器」吗
- 没有。主流 AI 与搜索引擎里,没有任何一家公开承认在线上运行这样的分类器;OpenAI 自家做的那一款,也已在 2023 年 7 月因准确率太低而下线
- 真正被惩罚的是什么
- AI 大规模产出时常见的那套模式:批量页面、捏造数据、伪造作者署名、过度分块、Schema 标记越权宣称。这套模式不管是 AI 做的、人工做的,还是人机协作做的,都一样会被惩罚
- 用了 AI vs. 用了这套模式
- 用 AI 本身不会被惩罚,被惩罚的是 AI 规模化产出时常见的那套模式。只要有人工把关、有第一手经验、有原创判断,AI 辅助写出来的内容一样可以被采信
- 这个说法在行业里是通用术语吗
- 现象本身在行业里是公认的,但引擎在描述自己到底惩罚什么时,用的词是「规模化内容滥用(scaled content abuse)」或「低质量内容」,而不是「AI 检测」
1. 「AI 内容识别」到底是什么
「AI 内容识别」这个说法经常被笼统地当成一件事来谈,但它其实指的是两件完全不同的事;大多数关于「我这页会不会因此被惩罚」的疑问,本质上都源自把这两件事混为一谈。
第一种含义:外部分类器。 这一类是第三方工具(GPTZero、Originality.ai、Copyleaks、Pangram Labs、Turnitin、Hive 等),它们分析一段文字的特征,去预测这段文字是不是模型生成的。这类产品面向的是出版社、学校、招聘方和合规团队,并不在任何 AI 引擎内部运行;它们给出的分数也不会决定你的页面是否出现在 ChatGPT、Perplexity、Google AI Overviews 或 Bing Copilot 的答案里,更不会影响这些引擎是否引用你。
第二种含义:搜索 / AI 引擎的质量系统。 这一类指的是引擎自己跑的垃圾内容过滤与信任过滤,作用在检索、采信(grounding)、合成这几个环节上。它的目标从来不是要给某段文字贴上「AI 写的 / 人写的」标签,而是去惩罚那些常与「低质量产出」「批量滥用」绑在一起的模式;同一套模式不管来自模型、来自内容农场,还是来自过度热心的代运营机构,处理结果都一样。Google 在 2023 年 2 月关于 AI 生成内容的声明 和 2024 年 3 月的「规模化内容滥用」政策 里反复说的就是这一点:该政策适用于「自动化生产、人工生产,或两者结合生产」的内容。
这两种含义的差别,放到下面这张表里对照最清楚。
| 第一种含义:外部分类器 | 第二种含义:引擎质量系统 | |
|---|---|---|
| 它是什么 | 一类第三方工具:分析文字特征,预测这段文字是不是模型写出来的 | 引擎自己跑的垃圾内容过滤与信任过滤,作用在检索、采信、合成这几个环节上 |
| 由谁部署 | GPTZero、Originality.ai、Copyleaks、Pangram Labs、Turnitin 等厂商 | Google、Bing、OpenAI、Perplexity 等引擎自己,跑在引擎内部 |
| 实际惩罚什么 | 对引擎自身的决策没有任何作用:它只输出一个分数,怎么处理由人来定 | 看的是模式,不是工具:规模化滥用、捏造数据、伪造作者署名、Schema 标记越权宣称 |
| 与 GEO 的相关性 | 既挡不住你的页面进 AI 答案,也推不动你的页面进 AI 答案 | 会在采信阶段把不合格的页面剔除,发生在可引用性闸门与 E-E-A-T 信任过滤之前 |
引擎并不去判断一段文字到底是不是 AI 写的;它们识别的,是 AI 大规模产出时常见的那套模式,而同一套模式由人工做出来,也一样会被惩罚。
2. 这条反信号在答案循环的哪一步触发
这条反信号并不是引擎新加出来的一层。在四步答案循环(answer loop)里,它作用在两道本来就有的闸门上,另外还有检索之前的一道触发点。
- 第三步:采信。 过度优化的结构性模式(过度分块、堆砌 FAQ、模板化样板)会在这一步被识别出来;这类页面会进入候选集,但永远不会被选中。这道闸门正是 可引用性 §6 所谓「必要而非充分」的那条边界。
- 第四步:信任过滤 / 合成。 低质量批量内容、捏造数据、伪造作者署名会在这一步因「来源不可信」被剔除。这道闸门正是 E-E-A-T §7 所谓「赢得不来、标记也没用」的那条边界。
- 检索之前:标记审查。 与正文对不上的 Schema 或元数据宣称会被识别为「越权」,在检索发生之前就触发反作弊;这道机制和合成阶段的信任过滤是平行运行、互相独立的(参见 Schema for AI)。
把这三道闸门放到一起看,可以归纳出一条统一的结论:这并不是引擎新加出来的一层「AI 检测器」,而是一直在运行的那套垃圾内容与信任过滤系统,只不过现在面对的规模和对手都升级到了 AI 量级。也正因为如此,同一种反模式会在不同的闸门上有不同的名字:在结构这一关上叫「过度优化」,在信任这一关上叫「伪造权威」,在索引这一关上叫「Schema 标记越权」。说到底,这仍然是同一套机制。
3. 为什么基于分类器的「AI 检测」并不靠谱
到目前为止,没有任何一项同行评议研究能证明商业 AI 文本分类器在真实、对抗性的输入上跑得出它们宣传的准确率,这一点在实务讨论里常常被低估。厂商的声量很大,学术文献里的证据却很薄弱。
| 证据 | 说明了什么 |
|---|---|
| OpenAI 自己下线了自家分类器,2023 年 7 月 20 日 | OpenAI 在更新说明里直接说:「该 AI 分类器已不再提供,原因是准确率过低。」发布之初它的真阳性率只有 26%、假阳性率 9%;OpenAI 自己也认定,这两个数字哪怕是在非对抗场景下也已经不堪用(来源)。 |
| Liang 等人,Patterns 2023 | 论文给出的结论是:「在常用检测器上,非英语母语者写的 TOEFL 作文有一半以上被错判为『AI 生成』;相比之下,美国 8 年级学生的英文作文几乎都能被正确判定为人写。」(arXiv:2304.02819)这篇论文表面看是讲「歧视非母语者」,但更深一层的发现是:这些分类器把某些文体特征(词汇受限、困惑度低)误当成了模型输出的指纹。 |
| Sadasivan 等人,arXiv 2023 | 论文给出的结论是:「改写攻击足以击穿当前一整批检测器,连带水印的方案和神经网络检测器也在其中。」(arXiv:2303.11156)论文还推导出一条理论上界:当语言模型的文风越来越接近人类,哪怕是理论上最优的检测器,其表现也会逐步逼近随机分类器。 |
把当前主要的几家厂商列一下:GPTZero(2023 年 1 月创立,宣称「99% 准确率」)、Originality.ai(同样宣称「99% 准确率」,并配套提供抄袭检测与事实核查)、Copyleaks(宣称「99%+ 准确率、0.2% 假阳性率」)、Pangram Labs(宣称「99.98% 准确率」),以及 Turnitin(对于 AI 生成占比 ≥20% 的文档,宣称假阳性率「不到 1%」)。这些数字全都是在厂商自家的基准上跑出来的;到目前为止,没有任何一家拿出过同行评议的评估,能在前面那些学术研究指出的对抗条件下复现自己的宣传值。
结论很直接:把第一种含义下的分类器分数拿来当 GEO 工作的审计输入并不安全;真正起作用的,是第二种含义下的引擎质量系统。
4. AI 引擎真正惩罚的是哪些模式
政策依据。 Google 的一贯立场是:用了 AI 本身并不构成违规;用任何自动化手段(包括 AI 在内)批量生成、以操纵排名为主要目的的内容,才是违规。 2024 年 3 月的核心更新 扩展了垃圾内容政策,明确列出三件事:过期域名滥用、规模化内容滥用、站点信誉滥用。Google 官方的 Spam Policies 页面给规模化内容滥用下的定义是:「为操纵搜索排名而非帮助用户,而批量生成大量页面……包括使用生成式 AI 工具或类似工具生成大量对用户无价值的页面。」Bing 的 Webmaster Guidelines 与 AI Performance 预览版 沿用的是同一套质量框架。OpenAI、Anthropic、Perplexity 对「能不能用某种工具」这件事没有公开规则,它们依赖的是来源端的权威信号。
2026-05-15,这个定义被拓宽了。 Google 改写了垃圾内容政策的开篇:原本讲的是操纵搜索系统「使内容排名靠前」,改后讲的是操纵搜索系统「使内容被显著呈现……或者试图操纵 Google 搜索中的生成式 AI 回答」。下面那张模式清单一条都没有变,「看模式而不是看工具」这个立场也没有动。变的是适用范围:AI Overviews 和 AI Mode 如今与排名作弊适用同一套降权或移除规则,因此一个页面在合成阶段过不了信任过滤,违反的是白纸黑字写着的规则,而不再只是一条推断出来的规则。这也意味着,最刻意的那一端,也就是主动去操控答案、而不只是批量发内容,如今已经写进政策,不再只是研究文献里的话题(见 GEO 作弊与操纵)。
模式清单。 下表每一行都是引擎实际会检查的一类模式,并附上相关条目的链接。
| 模式 | 看起来是什么样的 | 为什么被惩罚 |
|---|---|---|
| 批量生成的内容 | 在互不相关的主题上一次性产出大量看似完整、其实低成本的页面 | 大规模的低质量产出可以在统计层面被识别出来;Google 的规模化内容滥用政策明确点名了这种情况。另见 E-E-A-T §7 从信任过滤角度的论证 |
| 捏造的统计数据 | 没有来源的数字、可疑的整数比例、引用根本不存在的研究 | 没有来源的数字会被信任过滤识别出来;这正是 可引用性 §6 与 E-E-A-T §7 都会点名的反模式 |
| 伪造作者署名 / 虚构资历 | 作者档案在网上找不到对应的 sameAs 关联,没有知识图谱(Knowledge Graph)记录,简介却写得很权威 | 引擎无法完成实体解析;E-E-A-T §7 的信任过滤专门覆盖这种情况 |
| 过度分块 / FAQ 堆砌 | 大量短小的问句式片段,却对不上任何真实查询 | 形式上像可引用性,但片段本身没有意义、问题也无人在问,会在采信闸门被识别为样板内容 |
| 模板化样板 | 同一种结构在多个主题、多个站点上反复堆砌 | 大规模批量内容的典型形态;Google 的规模化内容滥用政策与 Bing 的质量准则都点名了它 |
| Schema / 标记越权宣称 | 结构化数据宣称了作者、评分、组织 sameAs 等属性,正文却给不出对应的支撑 | 被识别为越权后触发反作弊,机制与「伪造权威触发信任过滤」是同一套(详见 Schema for AI) |
| 过期域名滥用 | 买下一个原本可信的老域名,转用于完全无关的新内容 | 在 2024 年 3 月的垃圾内容政策扩展 里被直接点名 |
| 无实质的引用堆砌 | 引用数量很多,但每条引用都撑不起对应的那句论断 | 引用与论断对不上是能被识别出来的,页面会因此被下调权重;E-E-A-T §7 也讲到了这一点 |
把上面每一行里的「AI」替换成「批量生产」,整张表依然成立。这才是更准确的理解方式:人工产出的内容只要也走了这套模式,一样会以完全相同的方式失败。
5. 实证依据:Aggarwal 等人对「关键词堆砌」的实测
「这些模式会被惩罚」不是假设。GEO 领域那篇奠基论文就给出过清晰的实证依据。Aggarwal 等人在 GEO-bench 上测试了九种内容改写手法,结果分得很干净:内容实质层面的改写(引用来源、补充统计数据、加入引文)能可观地提升答案可见度;而关键词堆砌,也就是 SEO 的典型条件反射,不仅没有提升,甚至可能产生反效果。 详见 Aggarwal 等人 KDD ‘24 与本站论文条目。
比那个标题数字更值得注意的,是它的适用边界。论文给出的是「最高 40%」的提升,但这是某一种手法、在内部评测环境里、对自身指标得出的上限。同一种手法换到真实引擎 Perplexity.ai 上时缩到了约 22%;本站论文条目的批评一节把这一差距部分归因于真实引擎上的信任过滤:那些「捏造统计数据」的改写能在评测环境里赢下一次表面胜利,但到了真实引擎上,第二种含义下的质量系统会让它们失分。Puerto 等人的 C-SEO Bench(NeurIPS ‘25 数据集与基准)把这条发现延伸到了「多方博弈」场景:当不止一个作者都在用这套手法时,许多原本有效的改写会变得无效,甚至产生反效果。
结论很清楚:引擎确实会主动惩罚 SEO 式的垃圾内容模式,而同一套机制也压住了那些方向本来正确的实质性改写所能带来的提升。 惩罚反模式与压低实质改写的收益上限,其实是同一道闸门的一体两面。
6. 水印技术:愿景与现实
水印几乎是每个决策者都会问到的话题。截至 2026 年 5 月,它仍属于研究前沿,并不是可以直接拿来做审计的输入。
- Scott Aaronson 在 2022 年的最早设想是第一个有可信度的密码学水印思路(最初在 Microsoft Research 的一次报告上提出):在模型采样 token 时引入一种只有密钥持有者才能识别的偏置。
- Google DeepMind 的 SynthID-Text 是迄今最具说服力的生产级方案。它在 2024 年底通过 Hugging Face Transformers 开源,并在 Gemini 中上线;做法是调制 token 的采样概率,让输出对人类读起来无差别,但训练过的模型能识别出来(详见 SynthID)。Dathathri 等人发表在 Nature 的论文报告了一次面向约 2000 万 Gemini 用户的 A/B 实验,结果显示带水印的回答没有出现明显的质量下降。
- 会让可检测性归零的操作:通过另一个模型改写、轻度的人工编辑、用不带水印的另一个模型转译、把带水印与不带水印的文本混合。Nature 论文本身也明确指出:对短输出或被大幅改动的输出,检测置信度会显著下降。
- 目前还缺的东西:跨厂商的强制力。OpenAI、Anthropic、Meta、Google 各自用一套不同的方案,或干脆不用,互不相通,也没有任何规则要求它们必须互通。一段文字只要经过两个模型,几乎一定就不再携带可用的水印。
对 GEO 实务来说,结论只有一句:没有任何一家生产环境中的 AI 引擎以水印作为采信信号;它既不是引擎能索引到的信任信号,也不是审计输入,更不是可以用来争取被引用的杠杆。
7. AI 到底能不能用来写内容?
这是客户最常问到的问题,这里只做基于事实的判断,不做道德评判:
使用 AI 本身并不会被惩罚;被惩罚的是 AI 规模化时常见的那套模式。 只要有人工编辑、有原创思路、专业度也经得起核实,AI 辅助写出来的稿件并不属于上面那些失败模式。批量生成、没有人工把关的 AI 内容确实会被惩罚;但把它识别出来的,是 Google 和 Bing 这十年来一直在跑的同一套质量系统,与文字出自人还是机器无关。
真正拉开差距的一步,是去做规模化最难伪造的那件事:亲身接触这个主题,也就是 E-E-A-T 里的「经验」一项。具体来说,就是拿得出亲历的细节和原始数据、写得出真实的地名和有日期的事件、给得出可以被核实的论断。这些痕迹不是模型「写不出来」,而是要在大规模产出里写出来,必须真的做过那件事。
可以停止担心的事情:
- 你的页面会不会被 GPTZero 或 Originality.ai 判成 AI 生成(详见 §3,这些工具根本进不到引擎的决策链路里)。
- 用 ChatGPT 辅助的初稿是不是天然会被惩罚(Google 的政策已经明确说不会)。
- 译者过一遍机器翻译会不会触发识别(详见上文 FAQ,真正的失败模式是「无人复核」,不是机器翻译本身)。
需要开始认真担心的事情:
- 你的内容是不是带有「没有亲历过那件事,模型根本写不出来」的经验痕迹。
- 你的统计数据是不是有来源、可被核实,而不是那种听上去像真数据、其实只是凑整的百分比。
- 你的署名作者是不是真实存在的人,有可以对得上的
sameAs与知识图谱记录。 - 你的结构是不是有真正的实质撑着,而不只是一个空架子;这正是 可引用性 §6 所说的「必要而非充分」。
引擎真正在问的,并不是「这是不是人类写的」,而是「这些主张背后有没有一个能负责的人」。
8. 这件事在 GEO 上的意义 + 接下来怎么做
这条反信号处理的,正是 E-E-A-T §9 与 可引用性 §8 都在处理的那道采信瓶颈,只不过换成了从失败的角度去看。实质信号会把页面拉上去;规模化滥用模式会把页面拉下来。它们是同一道过滤的两个方向。
| 你想做什么 | 第一站 |
|---|---|
| 审计内容是否存在过度优化模式 | 可引用性 §6 |
| 检查与信任有关的信号:作者、资历、来源 | E-E-A-T |
| 确认 Schema 没有越权宣称 | Schema for AI |
| 把这条反信号定位到答案循环里 | Answer Loop |
| 整体框架 | 生成式引擎优化 |
| 实证依据 | Aggarwal 等人(KDD ‘24) |
参考资料
官方平台文档(截至 2026-05):
- Google Search Central — Google Search 关于 AI 生成内容的指引(2023-02-08)·使用 AI 生成内容·2024 年 3 月核心更新与新垃圾内容政策(2024-03-05)·Spam Policies for Google Web Search(垃圾内容定义于 2026-05-15 修订,纳入生成式 AI 回答;报道见 Search Engine Land)·站点信誉滥用政策更新(2024-11-19)
- OpenAI — 面向 AI 文本识别的新型分类器(2023-01-31 上线,2023-07-20 下线)
- Google DeepMind — SynthID — 文本水印
- Microsoft Bing — Webmaster Guidelines·Bing Webmaster Tools 引入 AI Performance(公开预览)(2026-02-09)
学术:
- Dathathri, S. 等(2024)。Scalable watermarking for identifying large language model outputs。Nature 634, 818–823。doi:10.1038/s41586-024-08025-4
- Liang, W.、Yuksekgonul, M.、Mao, Y.、Wu, E. & Zou, J.(2023)。GPT detectors are biased against non-native English writers。Patterns 4(7), 100779。arXiv:2304.02819
- Sadasivan, V. S.、Kumar, A.、Balasubramanian, S.、Wang, W. & Feizi, S.(2023)。Can AI-Generated Text be Reliably Detected? arXiv:2303.11156
- Aggarwal, P. 等(2024)。GEO: Generative Engine Optimization。KDD ‘24。arXiv:2311.09735·ACM DL·本站论文条目
- Puerto, H.、Gubri, M.、Green, C.、Oh, S. J. & Yun, S.(2025)。C-SEO Bench: Does Conversational SEO Work? NeurIPS ‘25 数据集与基准。arXiv:2506.11097
厂商页面(仅作盘点;不可靠性的论据见 §3):
常见问题
Google 会识别出我用了 ChatGPT 来写这篇文章吗?
GPTZero、Originality.ai、Copyleaks、Pangram、Turnitin 这些 AI 检测器靠谱吗?
水印技术能解决这个问题吗?
我能用 AI 写文章初稿吗?
那 AI 翻译的内容呢?
延伸阅读
参考来源
一手来源
- Google Search's guidance about AI-generated content · Google Search Central · 2023-02-08
- Using AI-generated content · Google Search Central
- What web creators should know about our March 2024 core update and new spam policies · Google Search Central · 2024-03-05
- Spam Policies for Google Web Search · Google Search Central
- An update to our site reputation abuse policy · Google Search Central · 2024-11-19
- New AI classifier for indicating AI-written text · OpenAI · 2023-01-31
- SynthID — text watermarking · Google DeepMind
- Bing Webmaster Guidelines · Microsoft Bing
- Introducing AI Performance in Bing Webmaster Tools (Public Preview) · Microsoft Bing · 2026-02-09
- GEO: Generative Engine Optimization (Aggarwal et al., KDD '24) · arXiv · 2024-06-28
- GEO: Generative Engine Optimization (KDD '24 Proceedings) · ACM SIGKDD · 2024-08-25
二手来源
- Google updates Search spam policies to clarify it applies to generative AI responses · Search Engine Land
- Scalable watermarking for identifying large language model outputs (Dathathri et al., Nature 2024) · Nature
- GPT detectors are biased against non-native English writers (Liang et al., Patterns 2023) · arXiv / Patterns (Cell Press)
- Can AI-Generated Text be Reliably Detected? (Sadasivan et al. 2023) · arXiv
- C-SEO Bench: Does Conversational SEO Work? (Puerto et al., NeurIPS '25 D&B) · arXiv / NeurIPS '25 D&B