侧边栏壁纸
博主头像
我爱神卡

官方微信公众号:神卡申请助手
本站实时发布最新的超值手机卡套餐、无限流量卡、钉钉卡、神卡、校园卡,政企卡、包年卡、靓号、生日号等,更新各个省份的神卡套餐信息。

  • 累计撰写 30,826 篇文章
  • 累计创建 13 个标签
  • 累计收到 7 条评论

目 录CONTENT

文章目录

OPPO Find X7系列手机首搭70亿参数AndesGPT端侧大模型,小布助手全新升级 - 通信终端

我爱神卡
2023-12-28 / 0 评论 / 0 点赞 / 109 阅读 / 550 字

在今日下午的 OPPO Find X7 系列产品技术沟通会上,OPPO 公布了安第斯大模型 AndesGPT 的全新升级。

安第斯大模型将分成 1800 亿参数、700 亿参数、70 亿参数三种体量,支持端云协同部署,根据不同场景的用户需求实现智能调度。

 

 

OPPO 表示,AndesGPT 大模型通过强大的知识、记忆和工具能力,为小布助手带来广阔的知识面,以及个性专属的智慧服务能力。通过独创的 SwappedAttention 技术,AndesGPT 还解决了长期记忆带来首字推理延迟的问题。

 

 

 

 

从技术沟通会获悉,通过 4bit 量化的模型压缩,OPPO 的 Al Boost 推理引擎优化,以及与芯片厂家联合深度优化等多项举措,OPPO 在 Find X7 系列上首次实际端侧应用 70 亿参数的大模型。

 

 

据介绍,在 AndesGPT 大模型 70 亿参数大语言支持下,OPPO 端侧具备超快的首字响应速度,在文本内容摘要的场景下,200 字的首字生成仅需 0.2s,领先友商 20 倍;2000 字首字生成仅需 2.9s,领先友商 2.5 倍;摘要字数上限可达 14000 字,可以轻松输入一篇常见期刊论文,领先友商模型能力 3.5 倍。

 

 

相比 10 亿参数大模型,AndesGPT 70 亿参数语言模型号称在带来更有“智商”的理解能力。以通话摘要功能举例,AndesGPT 可以帮助用户梳理通话内容的要点,并准确地输出带有主题、要点,以及待办事项的通话内容摘要,精准程度“明显优于 10 亿级别的端侧模型”。

 

更多资讯请关注微信公众号:神卡申请助手 选靓号、办大流量手机卡就找微信公众号:神卡申请助手点我挑选靓号点我选套餐
0

评论区