研究表明,人工智能模型在展示能力之前就已经掌握了能力

来源 Cryptopolitan

研究表明人工智能模型内化概念

哈佛大学和密歇根大学并不是第一个尝试了解人工智能模型功能的大学,Anthropic 的研究人员发表了一篇题为“字典学习”的论文。论文讨论了如何将克劳德语言中的联系与它理解的特定概念联系起来。虽然这些研究大多采取不同的角度,但主要是为了理解人工智能模型。

Anthropic 透露,它发现了可能与不同可解释概念相关的特征。研究显示:“我们发现了数百万个特征,这些特征似乎与可解释的概念相对应,从人物、国家和著名建筑等具体物体到情感、写作风格和推理步骤等trac。”

在研究过程中,研究人员使用扩散模型(最流行的人工智能架构之一)进行了多项实验。在实验过程中,他们意识到这些模型有不同的方式来操纵基本概念。这些模式是一致的,因为人工智能模型在不同阶段显示了新能力,并且在获得新能力时发出了尖锐的转变点信号。

在训练过程中,模型显示他们比标准测试检测到的时间早了大约 2,000 步掌握了概念。tron概念出现在 6,000 步左右,较弱概念出现在 20,000 步左右。调整概念信号后,他们发现与学习速度直接相关。

研究人员揭示了访问隐藏功能的方法

研究人员使用替代提示方法来揭示隐藏的能力,然后再在标准测试中展示它们。隐性涌现的猖獗影响着人工智能的评估和安全。例如,传统的基准测试可能会错过人工智能模型的某些功能,从而错过有益的和相关的功能。

在研究过程中,团队找到了访问人工智能模型隐藏功能的某些方法。该研究将这些方法称为线性潜在干预和过度提示,因为研究人员使模型在标准测试中表现出复杂的行为。研究人员还发现,人工智能模型在通过标准提示显示某些复杂特征之前就对其进行了操纵。

例如,可以提示模型成功生成“微笑的女性”或“戴帽子的男性”,然后再要求将它们组合起来。然而,研究表明他们很早就学会了如何将其结合起来,但无法通过传统的提示来展示它。模型展示的能力可以说是令人惊叹,模型在经过长时间的训练后表现出完美的测试性能。然而,研究人员表示,两者之间存在关键差异。

虽然摸索是在几次培训课程之后发生的,并且涉及改进相同数据集的几种分布,但研究表明这些能力是在主动学习过程中出现的。研究人员指出,这些模型找到了通过阶段变化来操纵概念的新方法,而不是逐步改进摸索中的表征。

研究表明,人工智能模型知道这些概念,但无法展示它们。这类似于人们观看和理解外国电影但不会说外国语言。这表明大多数模型所具有的能力比它们所显示的要多,也表明了理解和控制其能力的难度。

从零到 Web3 Pro:您的 90 天职业启动计划

免责声明:仅供参考。 过去的表现并不预示未来的结果。
placeholder
辉达(NVDA)股票介绍 | NVIDIA股价走势分析及如何投资?根据最新的营收数据,全球前十大的IC设计公司中仍然有过半为美国公司。前5名分别为高通(QUALCOMM)、辉达(NVIDIA)、博通(BROADCOM)、超微(AMD)与联发科(MTK)。
作者  Mitrade 分析师
2023 年 6 月 09 日
根据最新的营收数据,全球前十大的IC设计公司中仍然有过半为美国公司。前5名分别为高通(QUALCOMM)、辉达(NVIDIA)、博通(BROADCOM)、超微(AMD)与联发科(MTK)。
placeholder
中央经济工作会议部署2025中国经济,一览核心要点和解读!继中共中央政治局会议预先打响宽松政策第二枪后,12月11日至12日在北京举行的中央经济工作会议部署2025年经济工作,定调明年适度宽松的货币政策。
作者  Esteban Ma
2024 年 12 月 13 日
继中共中央政治局会议预先打响宽松政策第二枪后,12月11日至12日在北京举行的中央经济工作会议部署2025年经济工作,定调明年适度宽松的货币政策。
placeholder
美股年度展望:2024四起三落,2025特朗普领导标普历史级长牛?回顾2024年美股,标普指数四起三落,预计继2023年涨24%后将连续2年涨幅超20%。展望2025年,标普超标6000点后,特朗普2.0时代突破7000点不在话下?
作者  Esteban Ma
2024 年 12 月 17 日
回顾2024年美股,标普指数四起三落,预计继2023年涨24%后将连续2年涨幅超20%。展望2025年,标普超标6000点后,特朗普2.0时代突破7000点不在话下?
placeholder
4月25日财经早餐:美联储“松口”!黄金、美股、美债齐涨,MOVE指数三连跌两大经济体贸易谈判仍存不确定性,但美联储“松口”稳定市场,释放6月降息信号,美债收益率全线下挫,MOVE指数连续三日下跌至110下方。欧美股市全线上涨,道指升1.23%;标指涨2.03%,反弹逼近5500点;纳指升2.74%,连续三日上涨;反映中国概念股表现的金龙指数反弹0.68%。热门股方面,英伟达(Nvidia)、特斯拉(Tesla)、Netflix及微软升幅介乎3.5%至4.5%,宝洁(P&G)股价重挫3.8%。
作者  Insights
昨日 00: 27
两大经济体贸易谈判仍存不确定性,但美联储“松口”稳定市场,释放6月降息信号,美债收益率全线下挫,MOVE指数连续三日下跌至110下方。欧美股市全线上涨,道指升1.23%;标指涨2.03%,反弹逼近5500点;纳指升2.74%,连续三日上涨;反映中国概念股表现的金龙指数反弹0.68%。热门股方面,英伟达(Nvidia)、特斯拉(Tesla)、Netflix及微软升幅介乎3.5%至4.5%,宝洁(P&G)股价重挫3.8%。
placeholder
【今日市场前瞻】金价跌破3300美元!谷歌绩后大涨5%中美局势缓解,美元反弹,金价跌破3300美元!谷歌绩后涨超5%,英特尔跌5%;比特币震荡>>
作者  Alison Ho
19 小时前
中美局势缓解,美元反弹,金价跌破3300美元!谷歌绩后涨超5%,英特尔跌5%;比特币震荡>>
goTop
quote