研究表明,人工智能模型在展示能力之前就已经掌握了能力

来源 Cryptopolitan

研究表明人工智能模型内化概念

哈佛大学和密歇根大学并不是第一个尝试了解人工智能模型功能的大学,Anthropic 的研究人员发表了一篇题为“字典学习”的论文。论文讨论了如何将克劳德语言中的联系与它理解的特定概念联系起来。虽然这些研究大多采取不同的角度,但主要是为了理解人工智能模型。

Anthropic 透露,它发现了可能与不同可解释概念相关的特征。研究显示:“我们发现了数百万个特征,这些特征似乎与可解释的概念相对应,从人物、国家和著名建筑等具体物体到情感、写作风格和推理步骤等trac。”

在研究过程中,研究人员使用扩散模型(最流行的人工智能架构之一)进行了多项实验。在实验过程中,他们意识到这些模型有不同的方式来操纵基本概念。这些模式是一致的,因为人工智能模型在不同阶段显示了新能力,并且在获得新能力时发出了尖锐的转变点信号。

在训练过程中,模型显示他们比标准测试检测到的时间早了大约 2,000 步掌握了概念。tron概念出现在 6,000 步左右,较弱概念出现在 20,000 步左右。调整概念信号后,他们发现与学习速度直接相关。

研究人员揭示了访问隐藏功能的方法

研究人员使用替代提示方法来揭示隐藏的能力,然后再在标准测试中展示它们。隐性涌现的猖獗影响着人工智能的评估和安全。例如,传统的基准测试可能会错过人工智能模型的某些功能,从而错过有益的和相关的功能。

在研究过程中,团队找到了访问人工智能模型隐藏功能的某些方法。该研究将这些方法称为线性潜在干预和过度提示,因为研究人员使模型在标准测试中表现出复杂的行为。研究人员还发现,人工智能模型在通过标准提示显示某些复杂特征之前就对其进行了操纵。

例如,可以提示模型成功生成“微笑的女性”或“戴帽子的男性”,然后再要求将它们组合起来。然而,研究表明他们很早就学会了如何将其结合起来,但无法通过传统的提示来展示它。模型展示的能力可以说是令人惊叹,模型在经过长时间的训练后表现出完美的测试性能。然而,研究人员表示,两者之间存在关键差异。

虽然摸索是在几次培训课程之后发生的,并且涉及改进相同数据集的几种分布,但研究表明这些能力是在主动学习过程中出现的。研究人员指出,这些模型找到了通过阶段变化来操纵概念的新方法,而不是逐步改进摸索中的表征。

研究表明,人工智能模型知道这些概念,但无法展示它们。这类似于人们观看和理解外国电影但不会说外国语言。这表明大多数模型所具有的能力比它们所显示的要多,也表明了理解和控制其能力的难度。

从零到 Web3 Pro:您的 90 天职业启动计划

免责声明:仅供参考。 过去的表现并不预示未来的结果。
placeholder
中国允许2025人民币贬值?特朗普关税担忧,人民币或贬至7.5特朗普2.0政策的威胁正在影响中国当局2025年经济政策动向。继释放第二轮更激进和宽松信号后,有消息称中国将允许人民币贬值,人民币汇率应声跳水。
作者  Esteban Ma
2024 年 12 月 11 日
特朗普2.0政策的威胁正在影响中国当局2025年经济政策动向。继释放第二轮更激进和宽松信号后,有消息称中国将允许人民币贬值,人民币汇率应声跳水。
placeholder
美股年度展望:2024四起三落,2025特朗普领导标普历史级长牛?回顾2024年美股,标普指数四起三落,预计继2023年涨24%后将连续2年涨幅超20%。展望2025年,标普超标6000点后,特朗普2.0时代突破7000点不在话下?
作者  Esteban Ma
2024 年 12 月 17 日
回顾2024年美股,标普指数四起三落,预计继2023年涨24%后将连续2年涨幅超20%。展望2025年,标普超标6000点后,特朗普2.0时代突破7000点不在话下?
placeholder
大行2025年日元汇率预测:升贬分歧加剧,回不去1302024年日元汇率不升反降,华尔街机构对日本央行加息给疲软日元带来转机的预期落空。展望2025年日元走势,各大行的汇市观点分歧明显,散落在138至160区间。
作者  Esteban Ma
2024 年 12 月 18 日
2024年日元汇率不升反降,华尔街机构对日本央行加息给疲软日元带来转机的预期落空。展望2025年日元走势,各大行的汇市观点分歧明显,散落在138至160区间。
placeholder
2025开年英镑汇率大跳水!未来会反弹吗?英镑兑美元(GBP/USD)在2025年一季度可能会继续下跌,之后反弹回升。
作者  Alison Ho
1 月 03 日 周五
英镑兑美元(GBP/USD)在2025年一季度可能会继续下跌,之后反弹回升。
placeholder
欧元汇率大涨创三个月新高!德国开动印钞机,有何影响?在美元走弱的背景下,欧元有望继续上涨,德意志银行给予目标价为1.10。
作者  Alison Ho
3 月 05 日 周三
在美元走弱的背景下,欧元有望继续上涨,德意志银行给予目标价为1.10。
goTop
quote