知识卡片：Grokipedia 与 Wikipedia：基于 LLM 的政治中立性审计

英文标题：Grokipedia vs Wikipedia: An LLM-Based Audit of Political Neutrality along Ideologies
英文关键词：political bias, LLM, Grokipedia, Wikipedia, neutrality, ideology

一句话结论

四项LLM评判（包括Grok自身）一致认为，由LLM Grok全自动编写的百科Grokipedia在政治中立性上不如Wikipedia，且两者存在相反方向的意识形态偏好：Grokipedia偏袒经济右翼政客、惩罚社会自由主义政客，而Wikipedia则偏袒社会自由主义政客。

事件概述/研究问题

2025年底，由xAI推出的LLM Grok完全撰写的在线百科Grokipedia上线，其动机之一是提供一个无偏见的Wikipedia替代品（Wikipedia长期被指责有“左翼”和“自由主义”偏见）。本研究通过大规模政治偏差审计，探究LLM编写的百科是否真正实现中立，还是仅仅嵌入另一种意识形态。研究对象包括1,394对描述政府成员的百科文章，涵盖九个由专家编码的意识形态维度。

方法/产品要点

• 构建1,394对文章对，分别来自Grokipedia和Wikipedia，内容均为政府成员。
• 使用四个LLM作为评判者：Grok、Claude、Mistral、DeepSeek，对每篇文章沿九个意识形态维度进行中立性评分。
• 由于LLM评判自身可能存在偏差，研究还分析了评判模式，以交叉验证结果。

主要结果或产业意义

• 所有LLM评判（包括Grok自身）均认为Grokipedia整体上不如Wikipedia中立。
• 两部百科均整体上对政客呈现正面描绘，但偏向的意识形态群体不同：
  • Grokipedia尤其偏袒经济右翼政客，并惩罚社会自由主义政客。
  • Wikipedia被评判为偏袒社会自由主义政客。
• 表明LLM生成的百科并未消除偏见，而是引入了系统的、不同方向的意识形态偏差。

为什么重要

• 首个大规模、多评判者的比较研究，直接评估LLM生成百科与人工百科的政治中立性。
• 揭示出依赖单一LLM生成公共知识产品可能存在新型系统性偏见，挑战了“AI中立”的假设。
• 对在线百科全书、信息检索和民主话语的公正性具有重要启示。

局限与不确定性

• LLM评判本身可能具有偏差，尽管研究通过多模型交叉验证减轻，但无法完全消除（待核实是否完全消除）。
• 仅分析政府成员文章，未覆盖其他主题（如历史、科学等），结论可能不具泛化性。
• 意识形态维度的编码依赖专家判断，可能存在主观性。
• Grokipedia的具体生成过程（提示词、数据来源等）未公开，无法独立复现。

可用于图书/PPT/简报的角度

• 案例：AI生成内容的偏见问题 —— 以Grokipedia与Wikipedia对比为例。
• 数据可视化：展示不同LLM评判下两套百科的中立性得分对比，以及偏袒方向的雷达图。
• 讨论：当AI被用作知识创造工具时，如何审计和确保其政治中立性？

原始材料

• 论文标题：Grokipedia vs Wikipedia: An LLM-Based Audit of Political Neutrality along Ideologies
• arXiv ID：2607.15146v1
• URL：https://arxiv.org/abs/2607.15146v1
• 作者：Filippos Vlahos, Guillaume Bied, Tijl De Bie
• 发布/更新日期：2026-07-16