返回 文章 学习 CMS 文章

Y Combinator 的 Garry Tan 呼吁美国开放权重 AI 实验室也“蒸馏”前沿模型

Garry Tan 主张美国开放权重 AI 实验室应合法蒸馏前沿模型,以对抗中国开放权重模型并防止 AI 权力垄断。

Garry TanY CombinatorAI蒸馏开放权重模型
成长分 / 100 71 综合收获、行动、留存与影响

Y Combinator 的 Garry Tan 呼吁美国开放权重 AI 实验室也“蒸馏”前沿模型
为什么值得读了解硅谷知名加速器 Y Combinator 掌门人对 AI 蒸馏争议的鲜明立场,与 Anthropic 等公司的呼吁形成对比。

理解开放权重与专有 AI 模型之间的竞争与平衡逻辑,以及监管可能扮演的角色。

关键洞察
  1. Garry Tan 希望监管机构不要介入蒸馏,并主张建立“美国式的蒸馏制度”,让小型开放权重实验室合法使用前沿模型的训练技术。
  2. Anthropic 指控中国实验室从事“非法蒸馏攻击”,其 CEO Dario Amodei 呼吁监管打击,但 Tan 不认同这一做法。
  3. Tan 认为 AI 实验室限制客户如何使用模型属于越权,并指出专有实验室训练时大量摄取受版权保护材料也未获许可。
转成行动

深入阅读

正文与原文对照

原文保真覆盖:全文原文字符:3519

当谈到中国 AI 实验室利用蒸馏技术从前沿模型开发者那里提取知识时,Y Combinator 首席执行官 Garry Tan 希望监管机构不要介入。事实上,他认为美国 AI 实验室或许也应该玩同样的游戏。

“我什么都不会做,”他在本周早些时候接受 CNBC 采访时表示。“我们可以主张,应该有一套美国式的蒸馏制度。”

他向 TechCrunch 进一步解释,这意味着他希望规模较小的美国开放权重 AI 实验室对美国前沿 AI 实验室使用同类的训练技术,从而让美国拥有更丰富的非中国开放权重选项。

蒸馏是指模型开发者通过大量提示另一个模型,来学习它如何运作和推理。AI 实验室通常且正当地使用它来帮助训练新模型。

Anthropic 本周发布了其第二份报告,指控中国实验室从事“非法蒸馏攻击”,隐藏身份未经许可进行蒸馏,并依赖欺诈和窃取的凭证来实施。Anthropic 首席执行官 Dario Amodei 此前曾公开呼吁美国监管机构打击蒸馏行为。

值得注意的是,硅谷这家声名显赫且成果丰硕的创业加速器的掌舵人并不认同这一做法。

需要明确的是,Tan 并不主张美国 AI 实验室使用窃取的凭证进行蒸馏。他希望它们能够自由地从正门进入。事实上,他的论点有两方面。他认为,AI 实验室规定客户可以如何使用模型与其共享的信息,属于越权。

他还指出,专有 AI 实验室在尽可能多地吸收人类知识来训练其模型时,并没有征求许可。它们曾大量摄取受版权保护的材料,而未获得那些知识产权持有者的许可

当被问及为什么美国实验室也应该可以自由蒸馏时,他告诉 TechCrunch:“控制用户和客户对闭权重模型的 API 调用能做什么,让人感到受限,而政府可以在这里发挥作用,使这样一个事实正常化:对基于广泛公开可获取数据训练出来的智能的访问,本身也应该更像一种公共产品,而不是被锁在限制性服务条款背后的东西。”

Tan 本人是一位如此热衷的 AI 用户,以至于他曾形容自己有网络精神病,他希望在开放权重 AI 实验室和前沿实验室之间看到一种平衡。

“它们处于前沿并推动其向前发展。我们希望这能够获得资金支持,并持续成为一种伟大的商业模式,”他告诉 CNBC。“你希望开放权重模型给人们自由和访问权。”

在他看来,真正的AI末日情景是,前沿AI的所有巨大力量最终落入一个强大的专有提供商手中。“噩梦情景,AI的末日情景,就是只有一家公司,”他说。“它拥有最好的资本渠道。它拥有最好的AI研究人员。它一路领先,突然之间就出现了一家铁板一块的公司。那将会很糟糕。”