基于NXP i.MX RT117H智能人机界面方案

sunsili

基于NXP i.MX RT117H智能人机界面方案

本文导读

NXP推出基于i.MX RT117H的智能人机界面（SMHMI）解决方案，该方案提供完整的硬件参考设计，集成面部识别和手势识别的机器学习算法、远场语音控制、2D图形用户界面。

NXP MCU级别的智能人机界面方案利用i.MX RT117H的高性能和丰富的接口特点，使开发人员能够快速轻松地在其产品中实现多模式、智能、免提功能，包括用于面部和手势识别的机器学习（ML）视觉、远场语音控制和2D图形用户界面（GUI）。这些功能可以混合搭配，仅使用这款恩智浦高性能MCU即可简化整体系统设计。该解决方案的开发套件SLN-TLHMI-IOT具有多种功能，有助于最大限度地缩短上市时间、风险和开发工作，包括完全集成的交钥匙软件、硬件参考设计和恩智浦一站式支持，可实现快速开箱即用的操作。得益于 I.MX RT117H，面部/手势识别和语音控制完全离线执行，消除了对云的需求以及随之而来的隐私和延迟问题。


i.MX RT117H是 i.MX RT1170系列跨界MCU的边沿计算平台成员，面向嵌入式智能HMI应用。它采用恩智浦先进的Arm® Cortex-M7内核（运行速度高达1 GHz）和高能效Cortex-M4®内核（高达400 MHz），可提供高性能和实时响应。除了交钥匙的视觉/语音算法和图形用户界面功能外，得益于其抢占式多任务处理和双核架构下的软件框架，i.MX RT117H还拥有强大的CPU、内存资源和丰富的外设供客户使用。这些功能为客户提供了最大的灵活性，可以在不同的用例中定制和定义其产品。i.MX RT117H MCU被授权运行恩智浦的面部/手势识别库、音频前端库和ML语音引擎库，其中包括：

• 摄像头驱动、图像捕获和预处理
• 面部/手势检测、对齐和识别（具有量化结果和置性度测量）
• 麦克风驱动和音频捕获
• MQS驱动程序和音频播放（省去片外音频I²S Codec）
• 适用于全双工免提通话的音频对话软件
• VIT或第三方的自动语音识别（唤醒词和命令）
• 显示驱动、2D图形加速，支持LVGL
• 内置安全引导加载代码和应用程序验证功能
• 无线驱动程序，包括低功耗蓝牙、Wi-Fi
• USB大容量存储设备更新
• 支持无线连接进行安全固件更新
• 工厂自动化脚本
• 支持 MCUXpresso SDK、IDE、配置工具和 GUI向导
  

I.MX RT117H 方案关键价值体现

1、i.MX RT117H属于RT1170系列 (Arm Cortex-M7 1GHz，Cortex-M4 400MHz，片上2MB SRAM)

• 包含恩智浦的面部/手势识别、音频前端和自动语音识别软件
• 离线识别消除了云成本，延迟和隐私性问题
  

2、高集成度和低复杂度

• 单个MCU上本地启用具有ML/AI 视觉（面部/手势识别）、远场语音和图形 UI 功能的智能 HMI，以简化整体系统设计和优化的系统BOM
• 可供客户使用的 CPU 带宽和 RAM，平衡运算时间与 CPU 负载的能力
  

3、灵活可配的方案

• 软件框架，支持视觉和语音功能的灵活设计定制，以及功能组合，支持多种用例
• 可灵活更换外部器件
  

4、NXP交钥匙方案，最大限度地缩短上市时间，降低系统设计风险和投入

• 包含源代码和库的软件包、带有开箱即用体验演示的解决方案套件、带有原理图、布局和BOM的硬件参考设计、恩智浦一站式支持和许可
• 从设计到上市只需短短4个月
  
  

硬件框架

软件框架

面容/语音识别

行业应用

• 智能家电
• 白色家电（冰箱、空调、烤箱、洗衣房等）
• 台式家电（咖啡机、净化器）
• 智能家居
• 报警和智能家居控制面板
• 温控器、通用遥控器
• 家庭娱乐中心、教育机器人
• 智能建筑、智能工业
• 电梯、门禁访问和识别
• 工业人机界面
• 智能玩具
• 教育玩具，游戏等