• 首页
  • 粮食
  • 蔬菜
  • 果品
  • 水产
  • 酒水
  • 饮料
  • 茶叶
  • 畜禽
  • 食用油
  • 资讯
logo
  • 首页>
  • 食用油 >
  • 正文

环球快看点丨谷歌内部文件显示:鹬蚌相争,开源得利

2023-05-05 18:16:29 来源:DoNews快讯

DoNews5月5日消息,曾几何时,谷歌一度被业界认定为 AI 行业的领先者,其2017 年率先发布 Transformer 奠定了 大语言模型 LLM 的基石,2021 年聊天机器人 LaMDA 的亮相更是一度惊艳圈内。

不曾想,最终抢得先机的却是 OpenAI 这匹“黑马”,而谷歌反倒从 AI 领域的“老大哥”沦为了被动的“追赶者”。究竟谁会最终赢得这场 AI 大战,是谷歌还是OpenAI?


(资料图)

近来在 Discord 群组由匿名人士泄露的一份谷歌内部文件给出了第三个可能:“我们没有赢得这场竞争,OpenAI 也没有。当我们还在争吵时,第三个方已经悄悄地抢了我们的饭碗——开源。”

据CSDN报道,开源正在超越谷歌和 OpenAI,这两家所认为的“主要开放问题”如今已经解决,并已投入使用。虽然两家的模型当下在质量方面仍略胜一筹,但差距正在惊人地缩小。开源模型更快、更可定制、更私密,能力也更强大。

开源能用 100 美元和 13B 参数做到谷歌和 OpenAI 花费 1000 万美元和 540B 参数都难以达成的事情。而且只需要几周就能完成任务,而不是几个月。

当免费、无限制的替代品在质量上相当时,人们不会为一个受限制的模式付费。谷歌应该考虑自己的附加值究竟在哪里。

从长远来看,最好的模型是可以快速迭代改进的模型。现在,既然知道了 20B 参数范围内可能实现什么,小变体就不应再被视为事后补救措施了。

3月初,开源社区得到了他们的第一个真正有能力的基础模型——Meta 的 LLaMA 模型被意外泄露了。它没有指令或对话调整,也没有 RLHF (人类反馈强化学习)。

随后,巨大的创新涌现出来,在短短不到一个月的时间里,已经出现了具备指令调整、量化、质量改进、人类评估、多模态和 RLHF 等变体,其中许多都是相互建立的。

最重要的是,开源社区解决了扩展问题,在一定程度上任何人都可以进行实验。许多新想法来自普通人,培训和实验门槛从主要研究机构总产出降至一个人、一个晚上和一台强大的笔记本电脑。

据了解,目前开源 LLM 的复兴是紧随图像生成的复兴而来的,许多人称其为 LLM 的“Stable Diffusion(开源文本生成图像模型) 时刻”。

在两种情况下,低成本公共参与得以实现,原因是有了名为低秩适应(LoRA)的大幅度降价机制,并结合规模上的重大突破。在这两种情况下,获得足够高质量模型启动了世界各地个人和机构涌现出一系列想法和迭代。

这些贡献在图像生成领域非常关键,使 Stable Diffusion 走上了与 Dall-E (OpenAI基于Transformer的语言模型,可根据文本生成图像)不同的道路,使其拥有一个开放的模式,导致了产品整合、市场、用户界面和创新,而这些都是 Dall-E 没有的。

其效果可想而知:文化影响力迅速占据主导地位,OpenAI 解决方案变得越来越无关紧要。同样的事情是否会发生在 LLM 上还有待观察,但广泛的结构元素是相同的。

LoRA 更新非常便宜(约 100 美元),这意味着几乎任何有想法的人都可以生成并分发一个。训练时间少于一天是正常的,在这种速度下,所有这些微调的累积效应不需要很长时间就可以克服开始时的劣势。

事实上,就工程师时间而言,这些模型的改进速度远远超过了谷歌所能做到的,而且最好的模型已经与 ChatGPT 基本没有区别了。专注于维护全球一些最大规模的模型实际上会使谷歌处于不利地位。

对此,得克萨斯大学奥斯汀分校教授Alex Dimakis认为,开源 AI 正在取得胜利,对于全世界来说这是件好事,对于构建一个有竞争力的生态系统来说也是好事。

关键词:

    为您推荐

  • 环球快看点丨谷歌内部文件显示:鹬蚌相争,开源得利

    食用油2023-05-05
  • 五菱宝骏悦也 或10万左右 它会是“平替”版的吉姆尼吗?

    食用油2023-05-05
  • 合富新材2022年亏损3519.12万同比亏损增加 人工费用成本增加

    食用油2023-05-05
  • 世界即时:易航科技2022年净利7146.39万同比扭亏为盈 管理费用同比减少

    食用油2023-05-05
  • 中国银行合肥分行:相伴科创企业成长路助力实现大发展-全球播报

    食用油2023-05-05
  • 环球今亮点!中铁装配(300374)5月5日主力资金净买入1633.61万元

    食用油2023-05-05
  • 绵阳市积极探索构建森林草原初期火情早发现早处置联动机制

    食用油2023-05-05
  • “误”上公路的鹰嘴龟 抚州警民接力回归大自然 全球简讯

    食用油2023-05-05
  • 创维汽车黄宏生:盈亏平衡点是卖10万辆 明年实现

    食用油2023-05-05
  • 新宙邦:波兰锂离子电池电解液等项目将于二季度投产 天天热资讯

    食用油2023-05-05
  • 涨价!特斯拉Model S及Model X全系普涨1.9万元

    食用油2023-05-05
  • 特斯拉再涨价部分车型上涨1.9万元 特斯拉ModelY配备比亚迪刀片电池

    食用油2023-05-05
  • 太平洋保险金佑人生2014可靠吗?有什么优点?

    食用油2023-05-05
  • 汽车大灯调节位置示意图 大灯高度调节多少合适? 全球热讯

    食用油2023-05-05
  • 万事利:5月4日融资买入904.84万元,融资融券余额4467.13万元

    食用油2023-05-05
  • “医美”属于医疗活动 无证不得开展|实时焦点

    食用油2023-05-05
  • 女子称在蜜雪冰城中喝到大蟑螂,店家:正在核查,后续会给顾客交代 要闻速递

    食用油2023-05-05
  • 最新资讯:南天信息:5月4日获融资买入1182.33万元

    食用油2023-05-05
  • 泰安9项科技创新成果亮相第37届山东省青少年科技创新大赛决赛 新动态

    食用油2023-05-05
  • 南财研选快讯|中信建投:白酒景气度有望持续向上 |环球今日讯

    食用油2023-05-05

果品

  • 北京2022年冬奥会、冬残奥会奖牌“同心”正式发布
  • 冬奥故事会丨一图了解冬奥会历届奖牌
  • 冰雪之约 中国之邀 | 9种语言祝福冬奥倒计时100天
  • 同心筑梦向未来——写在北京冬奥会开幕倒计时100天之际
  • 外交部:美国针对亚裔仇恨犯罪数字令人痛心

蔬菜

  • 说好“一梯一户”却成了“两梯两户”,买方能否解除合同?
  • 更高水平开放合作助力中国东盟经贸发展迎新机遇
  • 9被告人犯侵犯著作权罪被判刑罚
  • 玉渊谭天丨中美再通话,“建设性”很重要
  • 环球时报社评:中美经贸需要建设性对话
  • 俄媒:莫斯科扩大新冠感染新疗法试点范围
  • 冰雪之约 中国之邀 | 追赶的勇气
  • 中国第20批赴黎维和建筑工兵分队完成“VA-2”道路排水系统修缮任务
  • 中国常驻联合国代表团举办恢复联合国合法席位50周年图片展
  • 美专家认为三大原因导致美国供应链危机

Copyright   2015-2022 中公食品网 版权所有  备案号:沪ICP备2022005074号-18   联系邮箱:5855973@qq.com