高通:OpenAI 最小开源模型 gpt-oss-20b 可在『骁龙』终端运行(高通rgi)

8 月 11 日消息,OpenAI 于 8 月 6 日推出了其最小开源模型 gpt-oss-20b,在常见基准测试中与 OpenAI o3‑mini 模型取得类似结果。高通今日宣布,这是其首个可在搭载『骁龙』平台的终端侧运行的开源推理模型。

从官方新闻稿获悉,高通称 gpt-oss-20b 思维链推理模型可直接在搭载『骁龙』旗舰处理器的终端上运行。此前 OpenAI 的复杂模型仅限云端部署,这是 OpenAI 首次实现模型支持终端侧推理。通过提前获取模型,并结合高通 ® AI 引擎和 Qualcomm® AI Stack 进行集成测试,我们发现这款 200 亿参数的模型表现极为出色,能够完全在终端侧进行思维链推理。

高通认为这是一个关键转折点:预示着 AI 的未来方向,即丰富复杂的助手式推理也将在本地实现。这也展现了 AI 生态系统的成熟性,合作伙伴和开发者可以利用『骁龙』处理器,实时采用 OpenAI 等领军企业的开源创新成果。OpenAI 的 gpt-oss-20b 将助力终端设备利用终端侧推理,带来隐私保护和时延方面的优势,同时通过 AI 智能体为云端解决方案提供支持。

高通称,通过提前获取 gpt-oss-20b 模型,并结合 Qualcomm AI Stack 进行集成测试,见证了该模型的卓越能力,它能完全在终端侧进行复杂推理。开发者将可通过 Hugging Face 和 Ollama 等主流平台获取该模型,并在搭载『骁龙』平台的终端上发挥其性能。更多部署详情即将在 Qualcomm AI Hub 上公布。

将 Ollama 的轻量级的开源 LLM 服务框架和强大的『骁龙』平台集成,开发者和企业不仅可以直接在搭载『骁龙』计算平台的终端上运行 gpt-oss-20b 模型,还能够进行网页搜索等多个默认特性,无需额外配置。用户也可以在 Ollama 上尝试 Turbo 模式,以探索该模型的更多功能。

特别声明:[高通:OpenAI 最小开源模型 gpt-oss-20b 可在『骁龙』终端运行(高通rgi)] 该文观点仅代表作者本人,今日霍州系信息发布平台,霍州网仅提供信息存储空间服务。

猜你喜欢

『娱乐圈』️ “潜伏” 13 载,提名最佳男配的他,竟是潜逃的罪犯?

交友要谨慎的口号可不是说说而已,吉士光在“大哥”的影响下,竟也走上了违法道路。第三次的时候他们碰到了杨琳和他的妻子,最终除了他,剩下两人都被缉拿。 其中就有一个在横店工作的,一次闲聊的时候,吉士光也对做演…

『娱乐圈』️ “潜伏” 13 载,提名最佳男配的他,竟是潜逃的罪犯?

中国电信为守护通信“生命线”提供硬核支撑(中国电信维护)

在北京密云等地的抗灾实战中,ZT-120V无人机成功实现了灾区视频回传与稳定通信,为救援决策提供了至关重要的“空中视角”。 在无人机应用方面,中国电信持续深耕,自主研发“运输+通信”双能力系统,多机协同实现…

中国电信为守护通信“生命线”提供硬核支撑(中国电信维护)

杭州高强纸管,厚纸管批发(杭州纸管企业名单)

在纺织行业,纱线在生产、存储和运输过程中,需要借助纸管进行缠绕收纳,杭州高强纸管能够稳定地承载纱线,防止纱线在缠绕过程中出现松散、断裂等问题,保障纺织生产的顺利进行;在包装行业,薄膜类产品的包装和运输离不开纸…

杭州高强纸管,厚纸管批发(杭州纸管企业名单)

扬电科技总经理杨萍,副总经理陈波辞职(扬电科技总股本)

时代财经AI快讯,12月18日,扬电科技(301012.SZ)发布公告,公司董事会近日收到公司总经理杨萍女士、副总经理陈波先生提交的书面辞职报告,因工作调整,杨萍女士辞去公司总经理职务,陈波先生辞去公司副总经…

扬电科技总经理杨萍,副总经理陈波辞职(扬电科技总股本)

全票通过!海尔生物细胞制备技术问鼎全国颠覆性技术大赛最高奖(海尔抢半价名单什么时候公布)

12月12日,在第十四届中国创新创业大赛颠覆性技术创新大赛总决赛中,海尔生物凭借“细胞高质高效制备关键技术研发及装备产业化”从全国891个前沿科技项目的评选中,以全票通过评审,问鼎大赛最高奖项——优胜奖。 尤…

全票通过!海尔生物细胞制备技术问鼎全国颠覆性技术大赛最高奖(海尔抢半价名单什么时候公布)