AI使用真相：独立研究揭示公司报告盲点

我们仍然不知道人们如何真正使用人工智能。但一项新研究表明，工作用例所占的比例比人工智能公司声称的要小。人工智能研究人员表示，Anthropic和OpenAI等人工智能公司定期发布关于人们如何使用Claude和ChatGPT等产品的报告，但它们只发布希望我们看到的数据。

斯坦福大学可信AI研究（STAIR）实验室的计算机科学博士生Anka Reuel说：“没有独立来源可以证实这一点。”Reuel是名为AI Observatory的新研究项目的联合负责人，该项目旨在填补这一空白。

这是一个公共平台，通过七个现有数据集，在用户同意的情况下收集并分析了与Claude和Gemini等流行模型的真实AI对话。该观察站的目的是为研究人员和政策制定者提供独立的信息来源，以评估人们如何使用生成式AI。

Reuel表示，利益相关者目前正基于非常有限的数据对AI的收益和风险做出重大决策。AI Observatory发现，不同模型的AI使用情况差异显著，且随时间变化。其研究显示，AI使用中存在比主要AI公司报告所捕捉到的更多敏感行为，这些公司报告更侧重于工作而非个人使用。

Anthropic经济指数是最著名、被引用最广泛的AI使用数据来源之一，但它存在盲点。

顾名思义，Anthropic经济指数专注于Claude AI的工作和生产力相关用途，过滤掉与这些用途无关的对话。当AI Observatory团队将Anthropic的方法应用于他们的数据集时，他们发现近一半的对话（48%）会被过滤掉。

这些被过滤掉的非工作相关对话更可能涉及健康和人际关系（44.2%对比Anthropic分析中的31.2%）、成人或非法话题（7.9%对比2.1%）、骚扰和仇恨（27.5%对比5.66%）以及性内容（16.7%对比2.4%）。

（OpenAI 2025年关于ChatGPT使用的报告同样发现，消费者使用中只有30%与工作相关。

）Anthropic已发布单独的博客文章，介绍人们如何使用Claude获得支持或陪伴，甚至生成CSAM，但UT-Austin信息学院助理教授David Widder表示，“拥有AI Observatory的鸟瞰式分析，而不是将其分割成单独的报告，

有助于”研究人员更一致地理解不同用途。Widder研究人们如何与AI系统互动，并未参与AI Observatory。AI Observatory研究的数据集包括2023年至2025年间的对话，它发现人们使用AI的方式以及各AI平台的回应方式都存在差异。

WildChat是AI Observatory研究中所包含的最大、最详细的数据集之一，其中的对话随时间推移变得更长、更复杂，表现为提示token、响应token和对话轮次的增加。同时，闲聊也明显增多。

这表明AI陪伴使用在增加；与此同时，AI助手的自我披露（即表明自己是聊天机器人）减少了。此外，研究人员标记为敏感使用（即包含潜在有害或受限内容，如性骚扰和仇恨言论）的交流减少了。这可能表明平台总体上部署了更有效的防护措施。

AI Observatory还发现，不同模型的AI使用情况差异显著。根据工具的不同，用户在主题、互动风格、对话结构以及敏感用例的可能性和类型上都有所不同。例如，研究人员发现，人们更频繁地使用Grok和Gemini进行信息检索。

Grok尤其受新闻和政治信息查询的欢迎，但也是错误信息集中的地方。（这与其他研究一致，这些研究也表明错误信息在Grok上容易扩散。xAI未回应置评请求。）

与此同时，人们更倾向于使用Anthropic进行编码，使用Gemini进行社交和角色扮演，使用ChatGPT做作业。同一模型的不同版本甚至也存在差异。

研究人员发现，当ChatGPT由GPT-3.5驱动时，人们的对话更短，而使用GPT-4o时对话更长、更具迭代性——鉴于该版本以导致情感成瘾而闻名，这很合理。然而，公司报告往往无法捕捉到这些细微差别，无论是跨模型还是模型内部。

“没有哪家公司的报告能讲述全部故事，”与Reuel共同领导这项研究的麻省理工学院媒体实验室应届博士毕业生Shayne Longpre说。

为了创建AI Observatory，Reuel和来自MIT、斯坦福、数据溯源倡议等机构的研究人员，从先前研究收集的七个真实世界数据集中，汇总了24,521段对话，涵盖85,633个对话轮次（即用户提示和相应的AI响应）。

这些对话来自2023年至2025年间5,000名用户与52种不同模型的互动，包括ChatGPT、Gemini、Claude和Grok。但与大型实验室自身掌握的数据相比，这些对话只是沧海一粟。例如，最新的Anthropic经济AI指数基于对100万次Claude对话的分析；

OpenAI关于人们如何使用ChatGPT的报告分析了150万次对话。

Anthropic的一位代表表示，他们发表的研究反映了其研究团队的具体问题和兴趣，以及支持外部独立研究的重要性。OpenAI未回应置评请求。此外，AI Observatory的数据集来自自愿提供的来源，这意味着它可能低估了敏感用途，因为人们可能不太愿意分享这些内容。

因此，研究人员提醒说，其研究结果并不代表所有AI使用情况。不过，AI Observatory的工作拓宽了研究界的访问渠道。Reuel和Widder等独立研究人员表示，AI公司通常不分享其聊天数据以供分析，这意味着他们的报告往往侧重于能最好地展示公司形象的发现。

Widder解释说：“例如，当我们想问：Anthropic的通用AI系统……主要用于好还是坏……我们无法回答这个问题，因为该信息是专有的。”AI Observatory的数据将可供研究人员分析，团队希望随着时间推移扩大其数据集。

Reuel说，理想情况下，AI公司会以保护用户隐私的方式与独立研究人员分享数据。

但就目前而言，任何基于AI使用数据做决策的人，都冒着“完全在野外运作，在不知道公司叙事之外实际发生了什么的情况下做出这些重大决策”的风险，Reuel说。深度报道：人工智能。一家初创公司声称突破了阻碍LLM的瓶颈。

Subquadratic现已分享其新模型的更多细节，但一些人仍持怀疑态度。一个根本性缺陷使LLM极易受到攻击。这使它们容易被欺骗去做不该做的事，比如告诉你如何破坏飞机的导航系统。Anthropic发现了一个隐藏空间，Claude在其中思考概念。

一项新技术让该公司比以往任何时候都更深入地探究LLM的怪异运作。Claude Science是Anthropic最新的旗舰产品。该公司正加倍押注AI用于科学。保持联系。获取最新更新。