精彩问答_大大通/世平/NXP 在线研讨会_恩智浦i.MX RT106S HMI+本地语音识别二合一方案 _2022.2.17



全屋智能是目前的一个市场趋势,未来五年中国智能家居设备市场出货量将以 21.4% 的复合增长率持续增长,2025 年市场出货量将接近 5.4 亿台,全屋智能解决方案在消费市场的推广将成为市场增长的重要动力之一。

全屋智能与家电的智能息息相关,语音识别则是可以实现智能的技术之一,而提升用户的体验感则离不开 HMI。

 

在 2/17 由 WPI 联合 NXP 举办的《 恩智浦i.MX RT106S HMI+本地语音识别二合一方案 》线上研讨会已经圆满结束咯,虎年的第一场大家已经激动不已,直播当天共有四百多位观众参加了直播,跟着我们主讲的步伐一起领略了 i.MX RT 系列产品尤其是主打的 i.MX RT106S,及其产品应用方案。 i.MX RT106S 的方案可以实现本地语音识别 + HMI 功能,可应用在智能家居、智能家电、楼宇自动化等需要显示触控界面或者语音识别功能的产品。

相信在 辛经理 和 Mia 详细的讲解下,大家对于 NXP i.MX RT 系列的产品和应用有了很大的信心,我们也将本场线上的问答进行了分享,大家快来看看有没有解决自己的疑问哦!


视频回放+课件下载 + 中奖名单   >>>由此去


  恩智浦i.MX RT106S HMI+本地语音识别二合一方案有哪些优势特点 ?
  这个方案只要 2 个mic就能做语音,外设简单,成本低等优势。另外这是 MCU base 的芯片,开发起来很简单 。

 

 i.MX RT106S的LCD接口走的是MIPI总线么 ?

   LCD 接的 RGB 接口,RT106s 没有 MIPI 接口 。

   NXP的RT106S的工作温度范围是多少 ?
   工业级 -40-105° 消费级 0-80°。

   i.MX RT106S支持哪些软件集成开发环境(IDE)?
   Keil 、IAR、 MCUXpresso 都可以,本方案是在 MCUXpresso 下开发的。

   跨界MCU是什么意思?
   所谓“跨界”,是指它自身的定位既非传统的应用处理器也非传统的微控制器。i.MX RT 系列芯片集成了两者的优点,它基于应用处理器的芯片架构,采用了微控制器的内核 Cortex-M7,从而具有应用处理器的高性能及丰富的功能,又具备传统微控制器的易用、实时及低功耗的特性 。

   语音库在本地吗 ?
   是的,语音库在本地。

   请问内存多大?支持离在线?离线多少命令词 ?
   对于双 MIC 的设计,RAM:英文 480K,中文 570K 左右。支持离线本地的识别。命令词可以任意加 。

   语音助手软件解决方案是不是都要授权 ?
   软件是 Cyberon DSMT 工具,可以申请软件的账号免费使用,有需要请联系 mia.pan@wpi-group.com

   本地语音识别, 需要调适及Training ?
   我们有专门的语音识别软件,DSMT,输入文字即可生成命令。

   本地语音识别,有支援几种语言 ?
   4种语言,中 英 德 法 。

   MCU与MPU有何差异 ?
 
   微控制器(MCU)与微处理器(MPU)是不同的两种器件,微控制器完成“控制”相关的任务,根据外界信号刺激产生反应,微处理器主要执行处理功能,对数据处理和计算能力的要求较高 。

 

 支援什么通信介面 ?

   WIFI 蓝牙都可以的 。

   在嘈杂环境中进行识别的准确性怎么样 ?
   语音识别里都有消噪处理,目前还是推荐在合理的场景里使用语音识别功能,人机交互效果会更好,譬如室内,电梯内 。

   语音识别消耗的 RAM 如何 ?
   对于双 MIC 的设计,英文 480K,中文 570K 左右 。

   语音 识别时占的 CPU 资源如何 ?
   识别一种语言时,占 65% 左右 。

   本地语音库可以扩展么?
   可以的。

    语音识别支持多少种语言和命令词 ?
   最多可以同时支持4种语言,命令词基本上没有限制,理论上只要空间够,都可以支持 。

   支持 WIFI 和蓝牙吗 ? 
   可以支持,我们有CYW43438 的参考设计 。

   mipi接口是给显示用的吗 ?
   显示接口是 LCD RGB,RT106s 没有 MIPI 接口 。

   这个 HMI 屏支持分辨率是多少?能不能播放动画 ?
   RT106S 显示支持最高分辨率 1280*800 ,可以支持播放动画 。

 

 训练命令模型的软件叫什么?可以免费用吗 ?

   软件是 Cyberon DSMT 工具,可以申请软件的账号免费使用,有需要请联系 mia.pan@wpi-group.com

   RT106S 语言识别率怎么样 ?
   90% 以上 。

   辨识距离多远 ?
   最远大概可以达到 5-6 m 。

   恩智浦i.MX RT106S有哪些系统移值案例 ?
   FreeRTOS 。

   这个方案是 local 语音识别的?有什么优势 ?
   是 local 的语音识别,该方案是基于 MCU base 去做的,比 MPU 方案成本更低,更容易开发,这是一个 Turnkey solution ,可以通过输入文字的方式修改命令词并且不需要额外的 NRE 费用 。

   唤醒和指令可以一句话输出吗 ?
   不可以哦,需要先唤醒再输出命令词 。

   除了 Local Voice 之外,NXP 是否有在线语音方案 ?
   在线语音,需要有语音云服务,目前我们和AWS,科大讯飞都有合作。我们自己也有RetuneDSP可以提供,可以联系我们 。

   恩智浦i.MX RT106S HMI 能运行哪种OS ?
   FreeRTOS 。

   请问此产品的通讯支持那些方式?WIFI是采用WIFI6吗 ?
   支持WIFI和蓝牙,WIFI6暂不支持,具体基于你选择的模块是否支持,我们的SDIO/SPI接口都可以接入。

   mcu update fw from USB or Pin header ?
 
   OTA,USB都支持,NXP MCU内置bootloader 。

 

 板上的USB是2.0还是3.0 ?

   USB 2.0 。

   实现本地语音识别,有哪些技术实现 ?
   语音识别软件已经集成在芯片上,提供相关的API,您只需要关心产品应用方面就可以了 。

   无线信号干扰问题有什们处理方法 ?
   有参考设计,需要的请联系mia.pan@wpi-group.com 。

   本地库大概占多大空间 ?
   单语言大概480KB SRAM 。

   i.MX RT106S目前供货情况如何 ?
   供货具体情况请联系 mia.pan@wpi-group.com

   芯片支持5V供电不,codec内置不 ?
   RT106s 3.3V 供电,不支持 5V,无内置 Codec 。

   这个库是付费用的吗 ? 
   免费试用 。

   请问开发软件有中文化介面吗 ?
   必须有,最后的Demo Video已经就是中文的了 。

   恩智浦i.MX RT106S HMI+本地语音识别二合一方案,多人情况能识别吗 ?
   能识别,但是效果会有影响 。

 

 支持 LVGL 最新 release 版本的软件移植吗 ?

   支持 。

   codec内置不 ?
   codec 是外挂的,无内置 。

   和 IMXRT106F 相比,优势在哪儿 ?
   RT106F 做的是人脸识别,RT106s 做的是语音识别 。

   单火面板能做不 ?
   BGA 封装的用单层板不太现实 。

   请问有 wifi / bt module 的 avl 吗 ?
   暂时没有 。

   可以做为串口工控屏方案么?有相关的方案么 ?
   可以的,详情请联系 mia.pan@wpi-group.com

   是否支持Teams或者Zooms认证啊 ?
   这个暂时没有做 。

   2层BGA方案有官方样板吗 ?
   是的,i.MX RT1040在二季度发布,会同时提供相关的资料 。

   本地语音识别与普通识别话是否可以同时区别 ?
   支持本地的普通话语音识别 。

   本地语音识别采用什么算法 ?
 
   算法由第三方提供 。

 

 提示话,可以各别设定吗?例如:你好 XXX ?

   可以自定义命令词 。

   请问语音识别适用在车用和 5G 应用吗 ?
   这颗不是车规级 MCU 。

   i.MX RT106S的LCD接口支持哪些显示协议 ?
   支持 RGB 的接口 。

   i.MX RT106S适合搭配哪些 Touch 芯片 ?
   Touch 芯片一般在屏内部自带。

   环境噪声抑制有硬件方案吗 ?
   不需要额外的硬件,只需要2个或者3个麦克风即可,软件有相关的算法了 。

   LCD初始化代码要自己写么 ?
   NXP 有 SDK 软件开发包,包含各种外设的底层驱动及示例 。

   语音识别要先训练吗?会不会有辨识上的困扰 ? 
   用工具直接输入你需要的命令的文字即可生成,不需要训练 。

   i.MX RT106S是否提供各外设的参考驱动程序源代码,或者支持配置生成各外设的参考驱动程序源代码 ?
   有的,请联系 mia.pan@wpi-group.com

   有哪些对标竞品.比如ESP32~S3 ?
   据了解,你提到的应该不能同时支持语音和显示 。

 

 双麦克风的设计有什么优势吗 ?

   可进行回声降噪 。

   PC端工具需要收费吗 ?
   不收费 。

   HMI这块支持哪些GUI工具?除LVGL 是否还有别的推荐呢 ?
   收费的 QT 等都是支持 。

   有 ANC 功能 ?
   此方案没有 ANC 。

   目前和科大讯飞有哪些合作的 ?
   这个方案用到的算法不是和科大合作的 。

   3mic的消噪是采用什们演算法 ?
   第三方的算法,如需了解具体的请联系 mia.pan@wpi-group.com

   有ANC/ENC 吗 ?
   没有 。

   语音模块可以做到防水吗 ?
   本方案不防水 。

   这本地语音产品发布后可学习吗?还是发布后就固定了 ?
   可以通过更新 FW 的方式增加新的命令,可以灵活控制 。


相关视频

2022/2/17 大大通研讨会回放_恩智浦 i.MX RT106S HMI+本地语音识别二合一方案 线上研讨会

研讨会主要内容:

1. 介绍产品是恩智浦的跨界 MCU - i.MX RT106S

 

2. i.MX RT106S 的方案,该产品可以实现本地语音识别,恩智浦原厂有本地语音识别模组的方案,

    另外因为 i.MX RT106S 有 LCD 的接口,可以同时实现 HMI + 本地语音识别。

 

3. 产品、方案应用方向:应用在家电,可作为显示交互,语音交互,外加一颗 Touch 芯片,还可以实现触控交互;

    产品可应用于智能家居、智能家电、楼宇自动化等需要显示触控界面,或者语音识别功能的产品。


中奖名单 & 资料下载 & 精彩问答 已经上线,大家可以通过以下链接获取哦~

中奖名单 + 资料下载 链接:https://www.wpgdadatong.com/blog/detail?BID=BB4315

精彩问答 链接:https://www.wpgdadatong.com/blog/detail?BID=B4316

★博文内容均由个人提供,与平台无关,如有违法或侵权,请与网站管理员联系。

★文明上网,请理性发言。内容一周内被举报5次,发文人进小黑屋喔~

评论