中國上?!?021年11月18日——萊迪思半導(dǎo)體公司(NASDAQ:LSCC),,低功耗可編程器件的領(lǐng)先供應(yīng)商,,今日宣布其低功耗,、AI/ML解決方案的最新路線圖,,這些解決方案可以幫助客戶端計算設(shè)備等網(wǎng)絡(luò)邊緣應(yīng)用延長電池壽命,,帶來創(chuàng)新的用戶體驗,。它們采用屢獲殊榮的Lattice sensAITM解決方案集合構(gòu)建,,在Lattice Nexus? FPGA上運行,,可以幫助OEM廠商開發(fā)智能,、實時在線、具有低功耗和硬件加速AI功能的設(shè)備,,這些設(shè)備還能現(xiàn)場進行升級,,支持未來更多的AI算法。
客戶端計算設(shè)備越來越需要快速響應(yīng)和情景感知式的用戶體驗,、高質(zhì)量視頻會議和協(xié)作式應(yīng)用,。萊迪思Nexus FPGA和sensAI解決方案集合是開發(fā)計算機視覺和傳感器融合應(yīng)用的理想平臺,可以提升用戶的參與和協(xié)作,,保護用戶隱私,。例如,客戶端設(shè)備可以分析攝像頭采集的圖像數(shù)據(jù),,確定后方人員是否離用戶過于靠近,,還可以在用戶的注意力轉(zhuǎn)移到別處時,模糊屏幕,,保護隱私,,或者調(diào)暗屏幕,延長電池使用時間,。
萊迪思市場和業(yè)務(wù)發(fā)展副總裁Matt Dobrodziej表示:“基于視覺,、聲音和其他傳感器的AI應(yīng)用將革新客戶端計算體驗。我們的sensAI支持各類網(wǎng)絡(luò)邊緣AI解決方案,,賦予客戶端設(shè)備情境感知能力,,讓它們知道自身在何時、何地,、以何種方式被使用,。我們的Nexus FPGA則以行業(yè)領(lǐng)先的低功耗來實現(xiàn)這一功能。”
與使用CPU來驅(qū)動AI應(yīng)用的設(shè)備相比,,采用sensAI開發(fā),,并在萊迪思FPGA上運行的AI計算設(shè)備的電池使用時間延長了28%。sensAI還支持現(xiàn)場軟件更新,,從而保持AI算法的演進,,還能讓OEM廠商靈活選擇不同的傳感器和SoC技術(shù)來適配他們的設(shè)備。
萊迪思正與領(lǐng)先的AI生態(tài)系統(tǒng)伙伴合作,,制定萊迪思客戶端計算AI體驗的發(fā)展路線圖,。
Mirametrix副總裁Stephen Morganstein表示:“我們的Glance by Mirametrix注意力感應(yīng)軟件可以捕捉用戶的面部、眼睛和凝視動作,,從而了解用戶的意識和注意力,。這項獨特的技術(shù)開發(fā)的智能設(shè)備能提供更自然和沉浸式的用戶體驗和設(shè)備交互。萊迪思的sensAI解決方案集合和低功耗FPGA可幫助開發(fā)人員實現(xiàn)新穎的AI功能,,提高設(shè)備的電池壽命,。”
sensAI解決方案集合的最新版本(v4.1)現(xiàn)已發(fā)布,,支持萊迪思基于AI的應(yīng)用路線圖,,其增強特性和新特性包括:
客戶端計算AI體驗參考設(shè)計
o用戶檢測:用戶接近或離開設(shè)備時會自動啟動或關(guān)閉客戶端設(shè)備
o注意力追蹤:當用戶的注意力不在屏幕上時,降低設(shè)備的屏幕亮度,,節(jié)約電量,,延長使用時間
o面部取景:在視頻會議應(yīng)用中提升視頻體驗
o旁邊者檢測:檢測站在設(shè)備后面潛在的窺視者,模糊屏幕以保障數(shù)據(jù)隱私
更多應(yīng)用支持——sensAI 4.1版本在性能和準確度方面的提升有助于拓展其目標應(yīng)用,,包括自動化工業(yè)系統(tǒng)中使用的高精度目標檢測和瑕疵檢測等應(yīng)用,。該解決方案集合擁有全新硬件平臺,包括板載圖像傳感器,、兩個I2S麥克風(fēng)和用于添加更多傳感器的擴展連接器,,助力基于語音和視覺的機器學(xué)習(xí)應(yīng)用的開發(fā)。
易于使用的工具——sensAI還更新了神經(jīng)網(wǎng)絡(luò)編譯器,,支持Lattice sensAI Studio,,這是一款基于GUI的工具,擁有AI模型庫,,經(jīng)過配置和訓(xùn)練可適用于各類主流應(yīng)用場景,。sensAI Studio現(xiàn)支持AutoML功能,能根據(jù)應(yīng)用和數(shù)據(jù)集目標來創(chuàng)建機器學(xué)習(xí)模塊,。一些基于Mobilenet機器學(xué)習(xí)推理訓(xùn)練平臺的模型專為最新的Nexus系列產(chǎn)品——Lattice CertusPro?-NX進行了優(yōu)化,。sensAI還兼容其他廣泛使用的機器學(xué)習(xí)平臺,包括最新版本的Caffe,、Keras,、TensorFlow和TensorFlow Lite,。