近期,关于人工智能大模型核心理论“Scaling Law”的起源引发了国际讨论,有观点认为中国科技巨头百度可能比OpenAI更早实现了这一理论的突破。
“Scaling Law”是AI大模型发展的核心原则,主张模型的智能能力随着训练数据和模型参数的增加而增强。这一理论普遍被认为是OpenAI在2020年的论文中提出的,但最新讨论显示,中国在这一领域的探索可能更早。
《南华早报》报道指出,Dario Amodei,OpenAI论文的合著者,透露他在2014年与吴恩达在百度研究AI时,就已发现Scaling Law现象。他提到,随着数据量的增加、模型规模的扩大和训练时间的延长,模型性能显著提升,这一观察后来在OpenAI的GPT-1模型中得到验证。
此外,行业人士指出,Scaling Law的原始研究实际上来自百度。Meta研究员Jack Morris引用了百度硅谷人工智能实验室2017年发布的论文,该论文详细讨论了机器翻译、语言建模等领域的Scaling现象。然而,OpenAI在2020年的研究中引用了百度2019年的论文,却忽略了2017年的研究,后者被认为是Scaling Law概念的真正原始来源。
研究者表示,百度的早期研究为AI大模型发展奠定了理论基础,并在2019年发布了第一代文心大模型。《南华早报》报道,百度在上海举行的百度世界大会2024上宣布了新技术,用以减轻图像生成中的幻觉问题,并透露百度文心大模型的日均调用量已达到15亿次,较一年前增长约30倍。
随着AI技术的不断进步,中国在全球AI领域的影响力和领导地位日益凸显。这一辩论不仅重新审视了AI大模型理论的起源,也突显了中国在全球AI竞赛中的重要作用。
消息,麻吉黄立成在HyperLiquid平台新开BTC多单13枚,开仓价为78,157.00美元,当前币价为78,209.99美...
2 鲸鱼和机构恐慌性抛售ETH,过去一小时转消息,据Lookonchain数据显示,鲸鱼和机构正在恐慌性抛售以太坊。在过去一小时内,两个钱包向...
3 黎巴嫩冲突造成2969人丧生消息,黎巴嫩卫生部在5月16日发表声明称,自3月2日以来,以色列对黎巴嫩的袭击已造成2969人...
4 GitHub推出Copilot独立桌面端,支持多Agent并消息,GitHub宣布推出Copilot桌面端技术预览版,借此从单一的编辑器辅助工具转变为专为智能体...
5 ZEC最大空头:BTC空单减持33.33枚,当前盈消息,BTC空单减持33.33枚,约合2,638,686.25美元。当前持仓规模为10,851,801.01美元,均价为80,486....
6 ZEC最大空头:BTC空单减持24.04枚,当前盈消息,BTC空单减持24.04枚,约合2,034,060.12美元。当前持仓规模为13,490,487.26美元,均价为80,486....
7 Grayscale:美国通胀加速,美联储降息空间消息,吴说获悉,Grayscale Research发文称,美国通胀正在加速,美联储降息空间受限,市场目前...
8 美以或最早下周恢复对伊朗军事行动消息,美国消息人士称,五角大楼正在为恢复对伊朗的军事行动做准备,美国和以色列最早可...
9 我国科研团队成功制备200微米高质量单晶消息,近日,我国科研团队依托2030新一代人工智能国家科技重大专项,联合苏州国家实验室、...
10 不丹主权财富基金否认大举抛售比特币传消息,不丹主权财富基金否认了有关其大举抛售比特币的传闻。Arkham数据显示,过去一年,被...
成都来彰科技 蜀ICP备2025134723号-1
资讯来源互联网,如有版权问题请联系管理员删除。