首页 > 生活分享 > 免费教学 > 90/270亿参数,谷歌发布Gemma 2 AI大语言模型

90/270亿参数,谷歌发布Gemma 2 AI大语言模型

发布时间:2024-06-28 22:52:09

 6 月 28 日消息,谷歌公司昨日发布新闻稿,面向全球研究人员和开发人员发布 Gemma 2 大语言模型,共有 90 亿参数(9B)和 270 亿参数(27B)两种大小。

Gemma 2 大语言模型相比较第一代,推理性能更高、效率更高,并在安全性方面取得了重大进步。

谷歌在新闻稿中表示,Gemma 2-27B 模型的性能媲美两倍规模的主流模型,而且只需要一片英伟达 H100 ensor Core GPU 或 TPU 主机就能实现这种性能,从而大大降低了部署成本。

Gemma 2-9B 模型优于 Llama 3 8B 和其他类似规模的开源模型。谷歌还计划在未来几个月发布参数为 26 亿的 Gemma 2 模型,更适合智能手机的人工智能应用场景。

谷歌表示为 Gemma 2 重新设计了整体架构,实现卓越的性能和推理效率。IT之家附上 Gemma 2 主要特点如下:

性能优异:

27B 版本在同规模级别中性能最佳,甚至比两倍于其尺寸的机型更具竞争力。9B 版本的性能在同类产品中也处于领先地位,超过了 Llama 3 8B 和其他同规模的开放模型。

效率和成本:

27B Gemma 2 模型可在单个谷歌云 TPU 主机、英伟达 A100 80GB Tensor Core GPU 或英伟达 H100 Tensor Core GPU 上以全精度高效运行推理,在保持高性能的同时大幅降低成本。这使得人工智能部署更容易实现,预算也更合理。

跨硬件快速推理

Gemma 2 经过优化,可在各种硬件(从功能强大的游戏笔记本电脑和高端台式机到基于云的设置)上以惊人的速度运行。

在 Google AI Studio 中尝试全精度的 Gemma 2,在 CPU 上使用 Gemma.cpp 的量化版本解锁本地性能,或通过 Hugging Face Transformers 在配备 NVIDIA RTX 或 GeForce RTX 的家用电脑上进行尝试。

免费教学更多>>

保时捷纯电卡宴内饰曝光:4块大屏加持,仅有少量实体按键 上汽奥迪A5L预售价公布 价格诱人配置还超出想象? 小鹏G7起售价比Model Y便宜6.77万 中大型SUV迎来颠覆者 东风本田上半年稳健领航,CR-V再树合资SUV标杆 杀疯了,吉利半年狂卖140.9万辆,比亚迪还坐得住吗? 率先落地舱驾融合 高通在平衡远景和现实的解题思路 第三代UNI-V:年轻人的“跑车梦想制造机”,全方位升级焕新体验 20万级首个百万销量!汉L直接让超跑车主沉默... 吐槽小米纸巾盒贵的,都是不懂用户的! 别被骗了!大学生买电脑从哪几个方面选? 10多万买电车,要续航、还要智能,选小鹏M03,还是等零跑B01? 小鹏汽车AI天玑系统7月OTA开启首批推送, 特斯拉逆势涨价,底气何来? 美女亲自下场告诉你 零跑C11纯电版能带来哪些情绪价值? 27个月狂卖100万辆,这款纯电小车凭什么? 一车打天下,油电随便选!这SUV太懂事了 荣耀Magic V5上手评测:满血骁龙8 Elite 轻薄体验再升级 盘点那些年曾用过的手机,有你用过的吗? 传音海外推出Infinix Hot 60i手机:支持无网通话功能 中兴通讯亮相2025中国国际金融展 小米16 Ultra系列手机型号曝光,预估会有Ultra Max版 华为广汽疑有大动作!任正非亲自出马,新车即将横空出世? 双车焕新、13款新车剧透、联手OPPO,MG开启炽热夏季模式 超过1000匹马力?兰博基尼Fenomeno将限量发售29台? 专车专用气动避震,MINI改装精准实现低趴与灵活平衡 雷克萨斯全新一代ES首次户外亮相 MPV迎来大洗牌!最新周销量榜:赛那夺冠,腾势D9季军,夏排名13 2025 年最畅销的 5 款 SUV 和最容易长期滞销的 5 款 SUV 2024级宁德时代订单班选拔圆满完成——校企携手共育新能源产业技能精英 4.4T V8,626马力,750牛·米,全黑大路虎可太帅了!