博客專欄

EEPW首頁(yè) > 博客 > 人臉/手勢(shì)識(shí)別、本地語(yǔ)音控制、2D圖形顯示…恩智浦全包式HMI方案,輕松幫你搞定!

人臉/手勢(shì)識(shí)別、本地語(yǔ)音控制、2D圖形顯示…恩智浦全包式HMI方案,輕松幫你搞定!

發(fā)布人:12345zhi 時(shí)間:2022-12-23 來(lái)源:工程師 發(fā)布文章

人機(jī)界面(HMI)技術(shù)正在迅速迭代發(fā)展,讓我們能夠以更智能、更輕松、更直觀的方式與家庭和工作場(chǎng)所中的許多互聯(lián)物聯(lián)網(wǎng)終端設(shè)備和家用電器進(jìn)行交互。按鈕、滑塊和撥號(hào)盤現(xiàn)在可稱為“老古董”,甚至觸摸面板也在被語(yǔ)音控制和其他免接觸式HMI技術(shù)增強(qiáng)和取代。近年來(lái)智能揚(yáng)聲器和語(yǔ)音助手呈爆炸式發(fā)展,我們擁抱并享受了語(yǔ)音控制帶來(lái)的便利性。而這僅僅只是開始。

芯片、軟件和機(jī)器學(xué)習(xí)(ML)技術(shù)不斷推陳出新,正在用各種HMI可能性為更加智能的世界賦能。支持語(yǔ)音、人臉和手勢(shì)識(shí)別的ML賦能的邊緣設(shè)備層出不窮,極大地簡(jiǎn)化了我們控制日益智能化的物聯(lián)網(wǎng)設(shè)備以及與其進(jìn)行交互的方式。歡迎來(lái)到智能人機(jī)界面(Smart HMI)的世界。 

Smart HMI解決方案

為了加快HMI的大規(guī)模轉(zhuǎn)型,恩智浦推出了一款Smart HMI解決方案,助力您以更低的成本、更簡(jiǎn)便地將本地語(yǔ)音控制、語(yǔ)音識(shí)別、人臉和手勢(shì)識(shí)別添加到各種智能家居產(chǎn)品、白色家電、小家電、樓宇自動(dòng)化設(shè)備和工業(yè)物聯(lián)網(wǎng)應(yīng)用中。在恩智浦EdgeReady Smart HMI解決方案的加持下,OEM現(xiàn)在可以通過(guò)新的智能界面功能使其物聯(lián)網(wǎng)產(chǎn)品獲得差異化優(yōu)勢(shì),同時(shí)加快產(chǎn)品上市速度。 

想象一下:冰箱、烤箱、洗衣機(jī)和烘干機(jī)、立式空調(diào)、恒溫器、通用遙控器、家庭娛樂(lè)系統(tǒng),以及從咖啡機(jī)到食品加工機(jī)的臺(tái)面電器——所有這些都能通過(guò)直觀的語(yǔ)音指令、手勢(shì)和人臉識(shí)別綜合功能進(jìn)行控制。Smart HMI技術(shù)還可以為電梯、醫(yī)療設(shè)備、繳費(fèi)終端、門鎖和其他樓宇門禁啟用免接觸式界面。 

傳統(tǒng)上,自己動(dòng)手開發(fā)高級(jí)HMI具有挑戰(zhàn)性且比較復(fù)雜,通常需要漫長(zhǎng)的學(xué)習(xí)過(guò)程,或者需要了解ML/AI、機(jī)器視覺(jué)和語(yǔ)音識(shí)別技術(shù)等方面的專業(yè)知識(shí)。對(duì)于希望向其物聯(lián)網(wǎng)產(chǎn)品添加語(yǔ)音和視覺(jué)技術(shù)的主流嵌入式開發(fā)人員而言,恩智浦EdgeReady Smart HMI解決方案是游戲規(guī)則改變者。它以恩智浦的端到端支持為后盾,為各種技能級(jí)別的開發(fā)人員提供了一款全包式HMI解決方案,涵蓋多種硬件、軟件、工具和示例,讓他們?cè)诙潭處讉€(gè)月內(nèi)便可完成從概念到量產(chǎn)的過(guò)程。 

Smart HMI技術(shù)詳情

Smart HMI解決方案的核心是SLN-TLHMI-IoT開發(fā)套件,它搭載了恩智浦的i.MX RT117H微控制器(MCU)。作為i.MX RT1170系列跨界MCU中的一員,i.MX RT117H以成本敏感的HMI應(yīng)用案例為目標(biāo)。MCU的雙核架構(gòu)采用恩智浦的先進(jìn)技術(shù),搭載工作頻率高達(dá)1GHz的Arm Cortex-M7內(nèi)核,以及高能效的400MHz Cortex-M4內(nèi)核,為邊緣ML和HMI多任務(wù)處理提供了充足的性能和實(shí)時(shí)響應(yīng)能力。

i.MX RT117H獲得了相應(yīng)的許可,能夠運(yùn)行恩智浦的人臉生物特征驗(yàn)證、音頻前端實(shí)時(shí)運(yùn)行庫(kù)和ML語(yǔ)音引擎。MCU具有全包式視覺(jué)/語(yǔ)音算法、圖形顯示UI功能、內(nèi)存資源和片上外設(shè),使開發(fā)人員能夠靈活地根據(jù)不同的HMI用例來(lái)定義和定制其產(chǎn)品。 

SLN-TLHMI-IoT開發(fā)套件附帶完全集成的量產(chǎn)級(jí)軟件和恩智浦的一站式支持,可最大限度地加快產(chǎn)品上市速度、降低風(fēng)險(xiǎn)和減少開發(fā)工作量。該套件采用多功能、跨平臺(tái)框架,支持人臉和手勢(shì)識(shí)別、遠(yuǎn)場(chǎng)語(yǔ)音識(shí)別,以及優(yōu)質(zhì)2D圖形顯示。開發(fā)人員可以自定義這些HMI組件,滿足各種智能電器、智能家居、智能建筑和工業(yè)物聯(lián)網(wǎng)應(yīng)用的需求。該套件能夠在i.MX RT117H MCU上本地和完全離線地執(zhí)行人臉/手勢(shì)識(shí)別和語(yǔ)音控制,最大限度地減少與基于云的實(shí)現(xiàn)有關(guān)的用戶隱私、安全性和延遲問(wèn)題。 

Smart HMI開發(fā)套件集恩智浦和領(lǐng)先第三方合作伙伴提供的芯片、軟件和IP于一身。該套件的量產(chǎn)級(jí)硬件經(jīng)過(guò)了優(yōu)化,外形小巧,可降低成本,并預(yù)集成了經(jīng)過(guò)充分測(cè)試的軟件和無(wú)線、顯示屏及攝像頭驅(qū)動(dòng)程序。該綜合套件包含帶示意圖的設(shè)計(jì)文件、物料清單(BOM)、布板和文檔,并受恩智浦主流MCUXpresso SDK的支持。智能咖啡機(jī)、電梯控制器和智能家居面板應(yīng)用演示可提供開箱即用的快速體驗(yàn),助力您加快開發(fā)速度。恩智浦為客戶支持提供單點(diǎn)聯(lián)系人,簡(jiǎn)化了所有恩智浦和第三方軟件的許可,還簡(jiǎn)化了恩智浦零部件的采購(gòu)。 

賦能新一代物聯(lián)網(wǎng)產(chǎn)品

現(xiàn)在我們可以輕松地將機(jī)器視覺(jué)、人臉/手勢(shì)識(shí)別和本地語(yǔ)音控制功能添加到物聯(lián)網(wǎng)應(yīng)用,比過(guò)去任何時(shí)候都更加便捷、更具成本效益。

本文作者

林明,恩智浦半導(dǎo)體邊緣處理事業(yè)部產(chǎn)品總監(jiān)。林明領(lǐng)導(dǎo)恩智浦邊緣處理事業(yè)部解決方案和創(chuàng)新團(tuán)隊(duì),推動(dòng)解決方案定義、開發(fā)和上市戰(zhàn)略,專注于AI/ML視覺(jué)和語(yǔ)音、安全和連接技術(shù)。2013年,林明加入飛思卡爾,擔(dān)任Kinetis L的產(chǎn)品線經(jīng)理,后來(lái)?yè)?dān)任i.MX 6UL應(yīng)用處理器的產(chǎn)品經(jīng)理。2020年,他再次加入恩智浦并服務(wù)于邊緣處理事業(yè)部解決方案創(chuàng)新團(tuán)隊(duì)。林明在MCU、MPU和無(wú)線連接產(chǎn)品方面擁有20多年的工程和營(yíng)銷經(jīng)驗(yàn)。

*博客內(nèi)容為網(wǎng)友個(gè)人發(fā)布,僅代表博主個(gè)人觀點(diǎn),如有侵權(quán)請(qǐng)聯(lián)系工作人員刪除。




相關(guān)推薦

技術(shù)專區(qū)

關(guān)閉