意法半导体发布集成npu加速器的新一代微助力边缘人工智能发展
“服务多重电子应用领域、全球排名前列的半导体公司意法半导体 (stmicroelectronics,简称st;纽约证券交易所代码:stm) 推出了首个集成机器学习 (ml) 加速器的新系列微,让嵌入式人工智能 (ai) 真正地发挥作用,让注重成本和功耗的消费电子和工业产品能够运行计算机视觉、音频处理、声音分析等算法,提供以往小型嵌入式系统无法实现的高性能的功能。
”• 新的机器学习功能让网络边缘设备可以运行计算机视觉、音频处理、声音分析以及更多的消费级和工业级应用
• stm32n6 mcu系列是 stm32产品家族中算力最强的微,也是首款采用意法半导体自研的嵌入式推理专用neural-art accelerator™ npu的产品
• 软件配合工具生态系统,不断降低开发人员利用ai加速性能开发实时操作系统应用的门槛
服务多重电子应用领域、全球排名前列的半导体公司意法半导体 (stmicroelectronics,简称st;纽约证券交易所代码:stm) 推出了首个集成机器学习 (ml) 加速器的新系列微,让嵌入式人工智能 (ai) 真正地发挥作用,让注重成本和功耗的消费电子和工业产品能够运行计算机视觉、音频处理、声音分析等算法,提供以往小型嵌入式系统无法实现的高性能的功能。
stm32n6系列微 (mcu)是意法半导体迄今为止处理性能最强的产品,也是首款嵌入意法半导体自研神经网络处理单元 (npu) neural-art accelerator的微,机器学习处理性能是stm32 mcu现有高端产品的600 倍。从2023 年 10 月开始,stm32n6向指定客户供货,现已准备好在大众市场上铺货。
意法半导体微、数字 ic 和射频产品部 (mdrf) 总裁 remi el-ouazzane 表示:“微型边缘设备市场将迎来一场巨变,越来越多的设备采用 ai 模型来提高主的性能或接替主的工作。这些模型目前用于分割、分类和识别等任务,未来将进入尚未开发的新应用领域。stm32n6 是首款采用意法半导体自研的neural-art accelerator npu 的 stm32 产品,我们自主开发的ai 软件生态系统包的最新版本将支持stm32n6,这是带有ai 硬件加速器的 stm32的漫长发展之路的开端,它将实现任何其他嵌入式处理凯发k8娱乐官网入口的解决方案都无法实现的应用产品创新。”
yole group存储器和计算部首席分析师 tom hackenberg 表示: “以前人们普遍认为ai 就是一个大数据中心,是一种非常耗电的应用。现在,这种观点再也站不住脚了。今天的物联网边缘应用迫切需要 ai的分析能力,整合微的高能效处理能力与 ai 分析能力是一个新趋势,stm32n6 是代表这种趋势的一个很好的例子,能够处理计算机视觉和大量传感器驱动的应用,同时让用户产品具备低功耗和低成本。” (1)
抢鲜使用stm32n6的客户评价
lg 是一家跨国公司,以电子产品、化学品和电信产品而闻名遐迩,主营产品包括智能手机、家用电器和电视。
“stm32n6的 ai处理性能和灵活性非常出色,紧凑的封装非常适合嵌入式系统和穿戴设备。具有突破性的 neural-art accelerator让这款微的推理速度超出了我们的预期,同时 st 的开发者友好型软件工具让我们能够将ai 模型无缝集成到 mcu 内。”
——yehan ahn,lg 电子 cto 部门研发任务负责人
联想研究院是联想的创新和研究部门,专注于开发人工智能、大数据、云计算和智能设备等尖端技术和凯发k8娱乐官网入口的解决方案。
“我们在实验室对st 的最新微 stm32n6进行了严苛测评,注意到这款产品的神经网络处理性能和能效都非常出色。这款微代表着一个新时代的开始,加快了我们的 ‘万物人工智能’边缘技术的研究。”
——川野诚一,联想研究院首席研究员
阿尔派是一家生产电子设备、汽车信息娱乐系统和通信设备的跨国公司。
“stm32n6新系列微非常适用于我们的骑行装备创新产品。neural-art accelerator的速度和能效,加上广泛的外围设备可扩展性,让我们能够开发可以执行许多基于传感器的 ai 推理的紧凑型设备,并提供多样化和更好的用户体验。”
——fuchs,alps alpine高级项目负责人
carlo gavazzi 为全球建筑和工业自动化市场设计和制造电子控制组件。
“stm32n6 是我们最新传感器项目中一个缺失的元件。在看到neural-art accelerator后,我们想到,可以用 ai 来解决一些在概念化阶段不可能解决的挑战。这款产品还有许多其他强大的功能,包括 mipi-csi raw12 接口和 arm cortex-m55 内核,这两个功能配合可以提供其他值得信赖的品牌无法提供的摄像头功能和响应时间。这项最新的高质量技术对于我们开发未来的高性能工业传感器至关重要。”
——allan skou thomsen,carlo gavazzi 研发项目负责人
莫界 (meta-bounds) 是消费级 ar 眼镜行业一家前沿的创新公司。
“stm32n6 具有高性能、高能效和先进功能,是一款非常适合我们产品的突破性微。嵌入式 neural-art accelerator、增强型摄像头接口和专用图像信号处理器 (isp)让我们能够为市场带来重量轻、尺寸紧凑、功能吸引人的产品,提升用户体验的同时还不影响电池续航时间。意法半导体的凯发k8娱乐官网入口的技术支持让我们的开发过程非常顺利,对于像我们这样希望通过尖端 ai 和图形功能来增强可穿戴技术价值的公司来说,这是非常重要的。”
——周兴博士,meta-bounds 创始合伙人
autotrak为汽车市场提供一流的车队管理和失窃车辆追回凯发k8娱乐官网入口的解决方案。
“在南非的卡车运输行业,约 60% 的致命事故归咎于司机疲劳驾驶。stm32n6可以改变这些数字。通过在车辆内实现快速高效的 ai 推理,我们可以向驾驶员发出实时声音警告,预防事故,挽救生命。”
——gavin leask,autotrak 工程总监
stm32n6为人工智能开发提供技术特性和支持
• 机器学习处理性能是高端 stm32 mcu的600 倍:st 的 neural-art accelerator包含近 300 个可配置的乘法累加单元,运算速度高达每秒600 千兆次运算 (gops)。
• 当今算力最强的 stm32:stm32n6搭载一颗 800 mhz arm® cortex®-m55 内核,coremark测试成绩达到前所未有的 3,360分。这款 mcu 还提供没有 neural-art 加速器的版本,适用于需要 stm32n6 的所有性能、接口和功能,但无需集成高级 ai 算法的应用。
• 4.2 mb ram,stm32 上存储容量最大的 ram:为支持数据密集型 ai 和多媒体处理提供充裕的存储空间。两个 64 位 axi 接口为维持最高计算速率和释放 neural-art accelerator的全部功能提供高带宽。
• 首次出现在 mcu 上的st 先进图像信号处理器 (isp):stm32n6 集成了一个可以直接处理图像信号的 isp单元,准许应用使用简单且经济实惠的图像传感器。可使用 st 的免费 isp iqtune 软件 (stm32-isp-iqtune) 配置isp。该软件是一款先进工具,允许自定义曝光时间、对比度或色彩平衡等图像信号处理参数。
• 意法半导体的edge ai suite套件:为开发边缘机器学习应用提供全套软件工具,包括导入开发者自己开发的tensorflow lite、keras、onnx等格式的模型
• 新系列微现支持的ai 模型库越来越大,为各种应用带来更强的性能和多功能性。用户可以探索不断扩展的 ai 模型库,提升项目质量,取得更好的成果,缩短上市时间。
更多技术详情请访问 /stm32n6。
* stm32 是意法半导体国际有限公司( stmicroelectronics international nv)或其关联公司在欧盟和/或其他地方的注册和/或未注册商标。特别是,stm32 已在美国专利商标局注册。
关于意法半导体
意法半导体拥有5万名半导体技术的创造者和创新者,掌握半导体供应链和先进的制造设备。作为一家半导体垂直整合制造商(idm),意法半导体与二十多万家客户、成千上万名凯发k8娱乐官网入口的合作伙伴一起研发产品和凯发k8娱乐官网入口的解决方案,共同构建生态系统,帮助他们更好地应对各种挑战和新机遇,满足世界对可持续发展的更高需求。意法半导体的技术让人们的出行更智能,让电源和能源管理更高效,让云连接的自主化设备应用更广泛。意法半导体承诺将于2027年实现碳中和(在范围1和2内完全实现碳中和,在范围3内部分实现碳中和)。详情请浏览意法半导体公司网站:.cn。