网易首页 > 网易号 > 正文 申请入驻

Google炸场!最强轻量级、开放模型Gemma发布,个人PC就能用,内部员工:强是强,但名字取得让我混乱!

0
分享至


整理 | 屠敏

出品 | CSDN(ID:CSDNnews)

不同于 OpenAI 的闭源大模型,Google、Meta 等科技巨头正在发力开放模型来实现弯道超车。

2 月 21 日,Google 推出新一代开放 AI 模型——Gemma(https://ai.google.dev/gemma),这是一个轻量级的模型,比肩 Meta 的。

仅是从名称上来看,最新推出的 Gemma 和此前 Google 的 Gemini 还有点傻傻分不清。对此,Google 也在官宣公告中解释称,Gemma 设计的灵感就是来源于 Gemini,拉丁语 Gemma,有“宝石”之意。二者之间稍有不同的是:

  • 可以将 Gemma 视为 Gemini 的更小、更轻的版本。

  • Gemma 的设计目的是让开发人员和研究人员更容易访问和使用,而 Gemini 的设计目的是用于更复杂的任务。

  • 两种型号均可免费使用,但 Gemma 的免费套餐更为有限。

更为重要的是,Gemma 模型可以在台式机或者笔记本电脑上本地运行



Gemma 是什么?

整体来看,Gemma 是由 Google DeepMind 和其他 Google AI 团队共同开发而成,采用与 Gemini 模型相同的研究和技术,建立在序列模型、Transformer、基于神经网络的深度学习方法和分布式系统上大规模训练技术至上。模型训练的上下文长度为 8192 个 token。


这款最新的模型有两种尺寸,一个是 Gemma 2B(20 亿参数),另一个是 Gemma 7B(70 亿参数)。每种尺寸都发布了预训练和指令调整变体。


模型权重将以许可商业授权的方式发布,同时 Google 也会发布一个新的负责任的生成式人工智能工具包,指导开发者、研究人员负责任地使用 Gemma 模型。

在 AI 中,参数是神经网络中确定 AI 模型行为的值,权重是存储在文件中的这些参数的子集。

Gemma 的发布,也是 Google 自 2022 年 OpenAI 推出 ChatGPT 以来发布的首个开放式 LLM,但这并不是 Google 对开放式 AI 研究的第一个贡献。在官方博客中,Google AI 团队表示, 其在过去带来了 Transformers、TensorFlow、BERT、T5、JAX、AlphaFold 和 AlphaCode 等重要的 AI 架构和工具集。

所以这一次,其也为所有主要框架提供推理和监督微调 (SFT) 工具链:JAX、PyTorch 和 TensorFlow(通过本地 Keras 3.0)。

还有随时可用的 Colab 和 Kaggle 笔记本,以及与 Hugging Face、MaxText 和 NVIDIA NeMo 和 TensorRT-LLM 等流行工具进行了集成,方便开发者更容易上手使用 Gemma。

经过预训练和指令调整的 Gemma 模型可在笔记本电脑、工作站或 Google Cloud 上运行,并能够部署在 Vertex AI 和谷歌 Kubernetes Engine 上。

除此之外,英伟达在今天宣布与 Google 合作,在包括本地 RTX AI PC 在内的所有英伟达 AI 平台上启动优化,用来加速 Gemma 的性能。


同尺寸下,最先进的性能

当然新模型的发布,难免要和业界已存在的大模型一较高下。Google 在发布一份 16 页的 Gemma 技术报告时,将其与 Meta 的 LLaMA 2(7B)、LLaMA 2(13B),以及 Mistral(7B)进行了性能对比。

Google 表示,“Gemma 2B 和 7B 与其他开放式模型相比,在其规模上实现了同类最佳的性能。”

Gemma 技术报告评测结果如下:


从学术基准角度来看,Gemma 7B 在数学、Python 代码生成、常识和常识推理任务的几个基准测试中,优于 Meta 的 Llama 2 7B 和 13B 模型。

详细来看,在 MMLU 基准测试中,Gemma 7B 模型不仅超过了所有规模相同或更小的开源模型,还超过了一些更大的模型,包括 Llama 2 13B。



Google:Gemma 是负责任的设计

对于 AI 模型的发布,Google 一直采取比较谨慎的态度。

这一次,Google 也特别强调,「Gemma 的设计是将 AI 原则放在首位。为了使 Gemma 预训练模型安全可靠,Google 使用自动化技术从训练集中过滤掉某些个人信息和其他敏感数据。此外,他们还使用了大量的微调和人类反馈强化学习(RLHF),使指令调整模型与负责任的行为保持一致。为了了解并降低 Gemma 模型的风险,我们进行了严格的评估,包括人工红队、自动对抗测试和危险活动模型能力评估。」

此外,Google 还与 Gemma 一起发布了新的《负责任的生成式人工智能工具包》(https://ai.google.dev/responsible),以帮助开发人员和研究人员优先构建安全、负责任的人工智能应用。该工具包包括:

  • 安全分类:发布 codelab(https://codelabs.developers.google.com/codelabs/responsible-ai/agile-classifiers),可使用最少的示例构建稳健的安全分类器。

  • 调试:带来最新的模型调试工具 LIT(https://codelabs.developers.google.com/codelabs/responsible-ai/lit-gemma#0),可帮助开发者调查 Gemma 的行为并解决潜在问题。

  • 指导:你可以根据 Google 在开发和部署大型语言模型方面的经验,获取模型构建者的最佳实践。


开放模型并不是指开源

最后,在很多专家学者来看,开源和开放权重的人工智能模型是确保聊天机器人透明度和隐私的重要步骤。

不过在发布 Gemma 之际,Google 特别强调了开源和开放模型的区别。其表示,“开放源代码的一个好处是,一旦发布,许可证就赋予用户完全的创作自主权。这为开发人员和最终用户获取技术提供了有力保障。另一个好处是,开放源码技术可以不受限制地进行修改,以适应最终用户的独特使用情况。”

但是 Gemma 遵循的规则是「开放模型」而非开源。开放模型的特点是可以免费获取模型权重,但使用、再分发和变体所有权的条款根据模型的具体使用条款而有所不同,这些条款可能不是基于开源许可证。

Gemma 模型的使用条款规定,个人开发者、研究人员和商业用户均可自由访问和重新分配这些模型。用户还可自由创建和发布模型变体。在使用 Gemma 模型时,开发者同意避免有害使用,这体现了 Google 对负责任地开发人工智能的承诺,同时也增加了对这项技术的使用。

之所以不用开源一词来形容 Gemma 的属性,在 Google 看来,现有的开源概念并不总能直接应用于 AI 系统,这就提出了如何在人工智能中使用开源许可证的问题。Google 所需要做的是,要澄清开源 AI 的概念,并解决衍生作品和作者归属等概念。


Gemma 这个名字,让你感到混乱吗?

Gemma 一经发布,便受到了不少 AI 从业者的关注,也有不少的媒体将其解读为 Google 正面叫板 Meta 的 LLama。

从体验上来看,网友在 X 社交平台上分享了其用 ollama 在 Macbook Pro M1 Max 32G 上安装了 Google 刚刚开源的 LLM gemma-7b,并直言“gemma-7b 的速度好过 Llama 13 B”。

以下是他的一个测试示例:

对 Gemma 感兴趣的小伙伴,现在可以直接通过 Gemma(https://ai.google.dev/gemma)上手体验。

最后,鉴于过去的三个月里,Google 先是推出了 ,而后干掉了 Bard 品牌名并将其改名为 Gemini,进而推出了更好的版本 Gemini Advanced(可以看做是 ChatGPT Plus 的付费服务;不要与 Gemini Ultra 混淆,这一模型可以视为对标 OpenAI 的 GPT-4)。

不久之后,Google 又推出了另一个改进版本 Gemini 1.5,带来了 Gemini for Workspace。也有媒体报道,Google 内部还开发了一款“Gemini 的后代”——Goose,仅供内部使用,帮助员工更快地编写代码。

面对层出不穷 G 打头阵的名字,据 Business Insider 报道,就连 Google 内部员工都已被“逼疯”,各种内部员工吐槽的表情包涌现出来,发出“哪位 VP 的 OKRs 是以 Al 产品名称的数量来衡量的?”的质疑:





至此,你能准确分得清 Google 的各种模型吗?对最新发布的开放模型 Gemma 又有何看法?欢迎留言分享。

  • Google Gemma 官方博客:https://blog.google/technology/developers/gemma-open-models/

  • 技术报告:https://storage.googleapis.com/deepmind-media/gemma/gemma-report.pdf

  • 使用地址:https://ai.google.dev/gemma

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
尴尬!切尔西重金引援几乎全失败,轻易放走的瑰宝本赛季26球11助

尴尬!切尔西重金引援几乎全失败,轻易放走的瑰宝本赛季26球11助

星耀国际足坛
2024-04-29 23:57:03
大S出门啦!湾网友拍到具俊晔与大S聚餐,正穿着大S发图里的衣服

大S出门啦!湾网友拍到具俊晔与大S聚餐,正穿着大S发图里的衣服

娱乐圈酸柠檬
2024-04-28 22:19:27
英国估计,约有45万名俄罗斯军人伤亡,俄罗斯获胜的看法正在减弱

英国估计,约有45万名俄罗斯军人伤亡,俄罗斯获胜的看法正在减弱

山河路口
2024-04-27 22:55:32
92年组建消防大队,公安局没人愿意去,退役老兵被调去结局如何

92年组建消防大队,公安局没人愿意去,退役老兵被调去结局如何

伊河生活
2024-04-30 05:05:16
4月30日00时国内金价大幅下跌!今日金价!各大金店价格!

4月30日00时国内金价大幅下跌!今日金价!各大金店价格!

叮当当科技
2024-04-30 11:08:42
张馨予和老公游云南,洱海拍照美爆了,36岁何捷真人太帅气

张馨予和老公游云南,洱海拍照美爆了,36岁何捷真人太帅气

吃瓜局
2024-04-29 15:00:25
差点开火!央视曝光:我两架歼11被锁定!四架美军战机冲来缠斗!

差点开火!央视曝光:我两架歼11被锁定!四架美军战机冲来缠斗!

明日之家
2024-04-30 13:47:04
东风着陆场准备就绪!神舟十七号即将返航:已经飞行超过6个月

东风着陆场准备就绪!神舟十七号即将返航:已经飞行超过6个月

夏天使娱乐
2024-04-30 09:43:09
“23条立法不额外限制媒体批评政府自由,无论有多尖锐”

“23条立法不额外限制媒体批评政府自由,无论有多尖锐”

观察者网
2024-04-30 10:28:26
Shams:有球员暗示哈姆缺乏准备 并称赞对方教练和对手的调整

Shams:有球员暗示哈姆缺乏准备 并称赞对方教练和对手的调整

直播吧
2024-04-30 15:30:10
“913事件”后,叶剑英给毛主席写信:臣之壮犹,不如人,今老矣

“913事件”后,叶剑英给毛主席写信:臣之壮犹,不如人,今老矣

历史龙元阁
2024-04-29 15:15:48
噩耗再传,华北剩余4500万吨粮,没戏了?

噩耗再传,华北剩余4500万吨粮,没戏了?

蓝色海边
2024-04-30 06:16:14
华为“赌赢了”!拜登做梦都想不到,中国“制裁”竟来得如此之快

华为“赌赢了”!拜登做梦都想不到,中国“制裁”竟来得如此之快

爱看剧的阿峰
2024-04-30 07:35:17
省委书记、省长带领多位董事长赴京,出席特殊活动

省委书记、省长带领多位董事长赴京,出席特殊活动

政知新媒体
2024-04-29 19:33:00
关于广东的奇怪现象,一个比一个怪

关于广东的奇怪现象,一个比一个怪

王姐懒人家常菜
2024-04-30 07:30:25
今天是湖人生涯谢幕战?詹姆斯:额!我不回答这问题!谢谢!

今天是湖人生涯谢幕战?詹姆斯:额!我不回答这问题!谢谢!

直播吧
2024-04-30 13:34:03
赵本山黑脸巡视儿子公司!生意冷清亏损严重,砸钱数亿或血本无归

赵本山黑脸巡视儿子公司!生意冷清亏损严重,砸钱数亿或血本无归

清欢渡语
2024-04-28 22:38:17
民间故事:丑女爬山迷路,在河边被58岁老汉拽进屋,她放出了蝰蛇

民间故事:丑女爬山迷路,在河边被58岁老汉拽进屋,她放出了蝰蛇

老赵讲故事
2024-04-29 14:29:38
字节员工:大厂5年存了90万,考公三年上岸。月薪从3万降到4000多

字节员工:大厂5年存了90万,考公三年上岸。月薪从3万降到4000多

蚂蚁大喇叭
2024-04-29 10:04:32
1931年特科科长奉命杀顾顺章全家后,要求归队,周恩来说不动如山

1931年特科科长奉命杀顾顺章全家后,要求归队,周恩来说不动如山

干史人
2024-04-28 08:00:10
2024-04-30 16:06:44
CSDN
CSDN
成就一亿技术人
24610文章数 241796关注度
往期回顾 全部

科技要闻

特斯拉和百度独家深度定制车道级高辅地图

头条要闻

女子万元买的衬衣手洗完现划痕 商家拒退货:不能水洗

头条要闻

女子万元买的衬衣手洗完现划痕 商家拒退货:不能水洗

体育要闻

哈姆关键挑战又成败笔 詹姆斯黑脸离场

娱乐要闻

黄子韬被曝求婚徐艺洋 大量亲密照曝光

财经要闻

查道炯:中国经济的外部挑战与应对思考

汽车要闻

越野老炮最爱 哈弗新H9新增2.4T柴油机

态度原创

本地
旅游
教育
房产
数码

本地新闻

食味印象 | 潍坊:碳水脑袋的人间乐园

旅游要闻

五一大雨,浇灭了多少旅游城市的心气?

教育要闻

小长假逆袭计划:玩得高兴,学得开心,成绩蹭蹭涨

房产要闻

刺激!市区惊现1.1w/㎡新房+现房!海口楼市,五一打响价格战!

数码要闻

LG 45GS95QE 带鱼屏显示器上架:44.5 英寸 OLED 240Hz,9999 元

无障碍浏览 进入关怀版