研究表明,人工智能模型在展示能力之前就已经掌握了能力

来源 Cryptopolitan

研究表明人工智能模型内化概念

哈佛大学和密歇根大学并不是第一个尝试了解人工智能模型功能的大学,Anthropic 的研究人员发表了一篇题为“字典学习”的论文。论文讨论了如何将克劳德语言中的联系与它理解的特定概念联系起来。虽然这些研究大多采取不同的角度,但主要是为了理解人工智能模型。

Anthropic 透露,它发现了可能与不同可解释概念相关的特征。研究显示:“我们发现了数百万个特征,这些特征似乎与可解释的概念相对应,从人物、国家和著名建筑等具体物体到情感、写作风格和推理步骤等trac。”

在研究过程中,研究人员使用扩散模型(最流行的人工智能架构之一)进行了多项实验。在实验过程中,他们意识到这些模型有不同的方式来操纵基本概念。这些模式是一致的,因为人工智能模型在不同阶段显示了新能力,并且在获得新能力时发出了尖锐的转变点信号。

在训练过程中,模型显示他们比标准测试检测到的时间早了大约 2,000 步掌握了概念。tron概念出现在 6,000 步左右,较弱概念出现在 20,000 步左右。调整概念信号后,他们发现与学习速度直接相关。

研究人员揭示了访问隐藏功能的方法

研究人员使用替代提示方法来揭示隐藏的能力,然后再在标准测试中展示它们。隐性涌现的猖獗影响着人工智能的评估和安全。例如,传统的基准测试可能会错过人工智能模型的某些功能,从而错过有益的和相关的功能。

在研究过程中,团队找到了访问人工智能模型隐藏功能的某些方法。该研究将这些方法称为线性潜在干预和过度提示,因为研究人员使模型在标准测试中表现出复杂的行为。研究人员还发现,人工智能模型在通过标准提示显示某些复杂特征之前就对其进行了操纵。

例如,可以提示模型成功生成“微笑的女性”或“戴帽子的男性”,然后再要求将它们组合起来。然而,研究表明他们很早就学会了如何将其结合起来,但无法通过传统的提示来展示它。模型展示的能力可以说是令人惊叹,模型在经过长时间的训练后表现出完美的测试性能。然而,研究人员表示,两者之间存在关键差异。

虽然摸索是在几次培训课程之后发生的,并且涉及改进相同数据集的几种分布,但研究表明这些能力是在主动学习过程中出现的。研究人员指出,这些模型找到了通过阶段变化来操纵概念的新方法,而不是逐步改进摸索中的表征。

研究表明,人工智能模型知道这些概念,但无法展示它们。这类似于人们观看和理解外国电影但不会说外国语言。这表明大多数模型所具有的能力比它们所显示的要多,也表明了理解和控制其能力的难度。

从零到 Web3 Pro:您的 90 天职业启动计划

免责声明:仅供参考。 过去的表现并不预示未来的结果。
placeholder
今年美股吸金规模有望达4480亿美元,或创历史记录!英为财情Investing.com - 美国银行预计,美国股票基金今年将迎来创纪录的资金流入,年化总额有望达到4480亿美元,彰显了投资者对美股市场的信心,也反映了全球资本流动的新趋势。
作者  Investing.com
11 月 22 日 周五
英为财情Investing.com - 美国银行预计,美国股票基金今年将迎来创纪录的资金流入,年化总额有望达到4480亿美元,彰显了投资者对美股市场的信心,也反映了全球资本流动的新趋势。
placeholder
苹果、华为动作频频,这些概念股也频频异动!11月22日,港股的果链概念集体异动,其中,瑞声科技(02018.HK)涨7.87%,丘钛科技(01478.HK)涨超4%,舜宇光学科技(02382.HK)亦上涨。A股的歌尔股份(002241.SZ)、领益智造(002600.SZ)早盘强势上涨,尾盘随大盘回落。
作者  财华社
11 月 22 日 周五
11月22日,港股的果链概念集体异动,其中,瑞声科技(02018.HK)涨7.87%,丘钛科技(01478.HK)涨超4%,舜宇光学科技(02382.HK)亦上涨。A股的歌尔股份(002241.SZ)、领益智造(002600.SZ)早盘强势上涨,尾盘随大盘回落。
placeholder
英伟达股票遭罕见降级,原因不是因为财报英为财情Investing.com - 英伟达 (NASDAQ:NVDA)遭遇华尔街分析师罕见降级。Phillip Securities分析师Yik Ban Chong将英伟达的股票评级从「买入(Buy)」下调至「逐步增持(Accumulate)」,这一调整是基于近期的价格走势。
作者  Investing.com
11 月 22 日 周五
英为财情Investing.com - 英伟达 (NASDAQ:NVDA)遭遇华尔街分析师罕见降级。Phillip Securities分析师Yik Ban Chong将英伟达的股票评级从「买入(Buy)」下调至「逐步增持(Accumulate)」,这一调整是基于近期的价格走势。
placeholder
科技股业绩疲软,中国股市暴跌,大摩下调评级!因科技股收益令人失望叠加对中美紧张局势可能升级的担忧加剧市场看空情绪,中国股市周五抛售加剧。
作者  Penny Pan
11 月 22 日 周五
因科技股收益令人失望叠加对中美紧张局势可能升级的担忧加剧市场看空情绪,中国股市周五抛售加剧。
placeholder
拆解MicroStrategy:加强版Grayscale + Luna在本轮加密牛市中,加密代币分化严重,其中表现最亮眼的两个板块是比特币和Solana。Solana的上涨主要来自加密玩家涌入Meme的驱动,而比特币的上涨,买入资金主要来自美国比特币ETF和一些上市公司尤其是MicroStrategy。本文我们主要关注MicroStrategy。
作者  金色财经
11 月 22 日 周五
在本轮加密牛市中,加密代币分化严重,其中表现最亮眼的两个板块是比特币和Solana。Solana的上涨主要来自加密玩家涌入Meme的驱动,而比特币的上涨,买入资金主要来自美国比特币ETF和一些上市公司尤其是MicroStrategy。本文我们主要关注MicroStrategy。
goTop
quote