Arm 公司7月10日发布博文，为了满足未来生成式 AI 的需求，扩展提供更多先进智能功能，推出了可以加速 AI 工作负载的可扩展矩阵扩展 2（SME2）技术，开发者无需修改代码，即可集成至现有模型和应用中。
该公司指出，在移动设备上的生成式 AI 应用不再局限于传统的聊天机器人和虚拟助手，而是逐渐发展到生成文本、声音、图像和视频，执行数学推理、以及群聊摘要等诸多高级智能功能。
SME 最初出现在 Armv9 架构中，是一组可选的高级 CPU 架构扩展，专门设计用于加速矩阵数学运算。
SME2 在 2022 年底首次亮相，在此基础上增加了新功能，据 Arm 称，它能够实现实时的移动端推理任务，涵盖生成图片、自然语言处理任务等。
Arm 还分享了一些数据，这些数据确实让 SME2 看起来非常可靠。根据 Arm 的说法，Google 的 Gemma 3 模型在 SME2 增强的硬件上，比没有 SME2 的硬件快 6 倍。
它可以在单个 CPU 核心上不到一秒钟内运行 800 字的文本摘要，IT之家注：这里 Arm 所指的 CPU 型号尚不清楚。
对于消费者来说，公告中的关键部分是，未来安卓手机即将具备 SME2 硬件能力。
到目前为止，SME 主要保留给服务器和工作站级处理器，因为其要求较高。然而，SME2 被设计为更加可扩展，能够部署在笔记本电脑、平板电脑，以及高端智能手机上。
重要的是，安卓已经准备好支持 SME2。SME2 在 Google 的 XNNPACK 库中启用，并支持 llama.cpp、阿里巴巴的 MNN 和微软的 ONNX 等框架。(故渊)
转自：C114通信网
【版权及免责声明】凡本网所属版权作品，转载时须获得授权并注明来源“中国产业经济信息网”，违者本网将保留追究其相关法律责任的权力。凡转载文章及企业宣传资讯，仅代表作者个人观点，不代表本网观点和立场。版权事宜请联系：010-65363056。
延伸阅读
