×
嵌入式 > 嵌入式开发 > 详情

NXP推出集成NPU的i.MX 8M Plus

发布时间:2021-01-20 发布时间:
|

NXP日前推出i.MX 8M Plus应用处理器,这是首个集成专用神经处理单元(NPU)的i.MX系列产品,可在工业和物联网(IoT)边缘进行高级机器学习推理,该产品也扩展了其EdgeVerse产品组合。

i.MX 8M Plus的NPU提供2.3 TOPS的算力,内部包括最高2GHz的四核Arm Cortex-A53内核,以及800MHz Cortex-M7实时处理器,此外还包括 800 MHz音频DSP用于语音和自然语言处理,双摄像头图像信号处理器(ISP)和3D GPU。通过将Cortex-A53内核和NPU结合使用,边缘设备将能够通过学习和推断输入而在本地进行决策,而无需人工干预。i.MX 8M Plus使得各种应用成为可能,涵盖了人和物体的识别,包括公共安全,工业机器视觉,机器人技术,手势和带有自然语言处理的情感检测,可实现人与设备的无缝交互。

具有沉浸式多媒体功能的边缘设备

恩智浦i.MX 8M Plus采用先进的14nm LPC FinFET工艺技术,可以同时执行多个神经网络,例如多对象识别,40,000多个英语单词的语音识别以及医学成像识别。NPU能够以每秒超过500张图像的速度处理Mobilenet——这是一种流行的图像分类网络。

开发人员可以将机器学习推理功能转移到NPU上,从而使Cortex-A和Cortex-M内核,DSP和GPU能够执行其他系统级或用户应用程序任务。视觉处理由双重集成的ISP固定,后者支持两个用于实时立体声视觉的高清摄像机或一个12 MPixel分辨率的摄像机,并包括高动态范围(HDR)和鱼眼镜头校正。这些功能可启用实时图像处理应用程序,例如监视,智能零售应用程序,机器人视觉和家庭健康监视器。

为了实现语音应用,i.MX 8M Plus集成了HiFi 4 DSP,该模块通过对语音流进行预处理和后处理来增强自然语言处理能力。功能强大的Cortex-M7内核可用于运行实时系统,即便应用程序处理器执行复杂的非实时应用程序时,也可以通过以通过关闭应用程序处理器域而仅保留Cortex来降低整体系统级功耗,比如在执行唤醒词检测等功能时。

i.MX 8M Plus扩展了高级多媒体和视频处理系统,该系统可以使用H.265或H.264 HD视频编码器和解码器压缩多个视频源,以进行云流传输或本地存储,并通过3D实现丰富的用户体验带有Dolby Atmos和DTS:X的/ 2D图形和Immersiv3D音频。

为工业物联网赋能智能

i.MX 8M Plus可以检查,测量,精确识别物体并通过准确检测机器运行中的异常情况来进行维护,从而提高了工业生产率和自动化程度。此外,通过将准确的面部识别与语音/命令识别甚至手势识别相结合,可以使工厂人机界面更加直观和安全。支持工业4.0 IT/OT融合,i.MX 8M Plus将千兆以太网与时间敏感网络(TSN)集成在一起,并与Arm Cortex M7实时处理相结合,提供了有线网络连接和处理能力。

为了满足工业应用所需的质量和可靠性标准,i.MX 8M Plus具有用于内部存储器和ECC奇偶校验。该系列产品有望满足严格的工业温度范围(环境温度-40C至105C),开机曲线(100%开机)的要求,并包括15年工作周期的承诺。

技术指标

•计算核心:最高2.0GHz的四核Arm Cortex-A53和最高800MHz的Cortex-M7
•机器学习:神经处理单元(NPU)最高可达2.3 TOPS
•音频和语音处理:以800 MHz运行的低功率Tensilica HiFi4 DSP
•双图像信号处理器(ISP):分辨率高达12MP,2个MIPI-CSI摄像机接口
•视频处理:1080p视频编码/解码,包括H.265和H.264
•GPU:支持OpenGL ES 3.1,Vulkan,Open CL 1.2 FP和OpenVG™1.1的3D / 2D
•内存支持:内部存储器和DDR总线上的错误校正码(ECC),高达4.0GT / s的32/16位DDR3L,DDR4和LPDDR4
•多个音频接口:TDM,DSD512,S / PDIF,PDM麦克风输入,eARC和ASRC。
•显示:HDMI 2.0b Tx,MIPI DSI,LVDS(4/8通道)Tx
•有线连接:2个具有AVB,IEEE 1588,EEE的千兆以太网和1个具有TSN的千兆以太网,2个CAN-FD,2个具有PHY C型和PCIe Gen3的USB 3.0 / 2.0 OTG
•NXP系统PMIC(PCA9450C)的电源管理解决方案,针对i.MX 8M Plus应用处理器进行了量身定制和优化。



『本文转载自网络,版权归原作者所有,如有侵权请联系删除』

热门文章 更多
ARM入门篇之(一)概念