每年,Anthropic 都会根据我们模型不断演进的能力以及从客户那里收到的反馈,更新其使用政策。我们今天发布新版政策。在这篇文章中,我们总结了所做的变更。
最新版本中的大部分更新旨在澄清现有规则。自上次更新以来的一年里,Claude 承担了更长时间、更独立的工作。本次更新提供了新的示例,展示我们的规则如何适用于 Claude 的新能力。它借鉴了我们在过去一年中观察到的影响力行动、武器开发和监控领域的新滥用模式(正如我们在最新威胁情报报告中所记录的)。我们还更新了规则,以澄清我们对健康和金融等领域高风险用例的要求,为 Claude 被用于自主采取物理行动的情况增加管控,并应对针对我们模型的滥用行为。
更新后的政策于 11 月 12 日生效。完整的使用政策和支持地区政策可在各自的页面上找到。
关于欺骗性活动的新章节
正如我们上个月所写,我们看到了国家媒体机构、政府宣传办公室和商业公司利用 Claude 运营虚假账号网络和捏造新闻网站的例子。我们的政策此前已禁止此类活动,但相关限制分散在我们的选举、欺诈、隐私和虚假信息章节中。
我们将这些规则整合为一个新章节,标题为“不得参与欺骗性活动或人为活动”,该章节适用于任何类型的欺骗性活动(无论是政治还是商业)。它涵盖试图掩盖信息背后主使者、通过虚假账号或帖子放大内容的努力,以及为运营影响力行动而构建工具和基础设施的行为。
重新聚焦我们的选举章节
我们在每一版《使用政策》中都不断完善对政治内容的限制,以确保我们的模型能够在民主进程中被恰当使用。在这一版中,我们进一步收紧了关于选举的条款,将其重点明确放在禁止使用 Claude 欺骗选民或扰乱选举上(例如,散布关于候选人或不实投票信息的虚假信息、冒充候选人或选举官员,或试图压制投票率)。我们将其更名为「不得破坏民主进程」,以反映这一范围。
出于类似原因,我们还取消了针对个性化投票和竞选定向的一刀切禁令。该禁令曾涵盖合法的公民工作,例如非营利组织使用 Claude 为其他语言的选民撰写信息,或选举官员发送选票补救通知。促使最初规则出台的行为(如依赖欺骗或滥用选民个人数据的选民定向)仍在我们关于欺骗性竞选、监控和隐私的条款下被禁止。
澄清我们的武器禁令
我们的《使用政策》一直禁止使用 Claude 开发武器。最近,我们看到有人试图使用我们的模型为武器构建制导与控制软件。更新后的条款明确表明,我们的禁令涵盖使武器得以运作的软件和组件,以及诸如为无人机和其他自主载具配备武器等行为。这些变化反映了我们此前执行既有政策的方式。
关于监控和执法更精确的措辞
我们 9 月的威胁情报报告记录了 AI 被越来越多地用于构建识别和追踪政治异见者的监控系统。我们重写了监控与刑事司法部分,以更精确地说明我们禁止的内容。例如,未经他人同意追踪他人是被禁止的,无论是实时进行,还是通过分析此前收集的数据。Claude 不得被用于在执法或刑事司法程序中决定或建议调查、逮捕或起诉谁。我们也禁止将 Claude 用于构建或改进专为监控设计的工具。
与之前对武器禁令的更新一样,此次更新并不反映我们在实践中执行内容的改变:它只是为了让我们的政策更加明确。新章节还阐明了哪些用途仍然被允许,包括经人们同意的追踪(例如欺诈监测)、内容审核、新闻工作和法律研究。
对高风险用例的更清晰要求
当我们的产品被用于可能影响某人健康、法律权利、财务状况、生计或获取基本服务的场景时,我们要求必须有合格的“人在回路”(即有权审查并在必要时更改 Claude 建议的人),并且必须告知受影响的个人使用了 AI。
这些要求并未随我们使用政策的更新版本而改变。然而,用户经常询问我们某个特定用例是否有这些要求,因此我们重写了高风险用例要求部分,以更直接地回答这一问题。现在它列出了哪些类型的建议被涵盖,哪些不被涵盖。
在我们推出模型硬件标准之后,本节还增加了对我们模型在连接到可采取自主物理行动且可能造成伤害的硬件时的使用要求。合格的 operator 必须能够观察设备并在需要时将其停止;如果 Claude 断开连接,设备也必须能够保持安全状态。
应对针对我们模型的滥用行为
我们新增了一项禁令,禁止对我们的模型持续进行无谓的虐待或残忍行为。此次政策更新仅适用于极端情况,即用户反复以毫无明显目的的方式残忍对待我们的模型。它不适用于常见的用户挫败感、反驳、黑暗创作主题,或模型测试与研究。
这一新增内容与我们已采取的一项措施一致,即允许 Claude 模型终止与持续辱骂用户的罕见对话在 Claude.ai 和 Claude Code 上。此类辱骂是本次更新的主要关注点;Claude 终止这些交互的能力仍将是主要的执行机制。
澄清我们的受支持地区政策
去年,我们更新了我们的受支持地区政策以限制由总部位于我们未受支持地区的实体多数持股的公司访问 Claude。我们更新了我们的受支持地区页面以澄清我们如何执行该政策。我们的政策禁止身处未受支持地区的人员、在该地区注册或设立总部的实体,以及由这些地区的人员或实体多数持股或控制的实体使用 Claude。
展望未来
随着 Claude 的能力和风险发生变化,我们将持续更新我们的使用政策。与本次及此前的更新一样,我们将广泛征求 Anthropic 内部以及政策制定者、领域专家、公民社会和我们的产品用户的意见。
相关内容
Anthropic 投资 1 亿美元培训 10,000 名工程师,以解决企业 AI 人才缺口
Anthropic 正在向 Claude Frontier Academy 投资 1 亿美元,计划到 2027 年底培训 10,000 名 Frontier Deployed Engineers,来自 Accenture、Bain、CBA、Deloitte、McKinsey、Morgan Stanley 和 Novo Nordisk 的首批学员已经开课。