2023年6月15日,,致力于亞太地區(qū)市場(chǎng)的國(guó)際領(lǐng)先半導(dǎo)體元器件分銷商---大聯(lián)大控股宣布,其旗下世平推出基于耐能(Kneron)KL630系列芯片的AI相機(jī)方案,。
圖示1-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的展示板圖
AI技術(shù)的不斷成熟讓AI相機(jī)的應(yīng)用得到了快速發(fā)展,。當(dāng)下,,雖然AI相機(jī)的應(yīng)用逐漸從安防監(jiān)控?cái)U(kuò)展到智能家居、醫(yī)療,、物流,、無(wú)人駕駛等應(yīng)用中,為人們提供更便捷,、高效,、安全的生活體驗(yàn)。但在攝像機(jī)和AI相機(jī)的開發(fā)過程中,,仍有算法優(yōu)化效率慢,、視頻形成質(zhì)量低、數(shù)據(jù)響應(yīng)延遲等諸多問題,。為此,,大聯(lián)大世平基于Kneron KL630系列芯片推出了AI相機(jī)方案。
圖示2-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的場(chǎng)景應(yīng)用圖
本方案所采用的Kneron KL630系列是專為各種專業(yè)和消費(fèi)IP攝像機(jī)設(shè)計(jì)的新一代SoC,,包含了KLM5301S3,、KLM550S3、KLM5502S3等產(chǎn)品,,可廣泛用于安防,、家用以及其他AI相機(jī)的設(shè)計(jì)與制造。
KL630系列采用TSMC 28nm先進(jìn)制造工藝,,支持快速開發(fā)高質(zhì)量和多鏡頭相機(jī)應(yīng)用程序,,提供多達(dá)4通道視頻輸入、獨(dú)立的高級(jí)多ISP管道(包括多曝光高動(dòng)態(tài)范圍融合)以及專門的視頻質(zhì)量增強(qiáng)功能,,適用于多個(gè)寬-角度鏡頭和傳感器,,加上片上去扭曲、拼接和混合,,所有這些都用于高質(zhì)量的實(shí)時(shí)全景攝像機(jī)視頻處理,。其中還內(nèi)嵌Kneron第三代神經(jīng)網(wǎng)絡(luò)架構(gòu)內(nèi)核,能及時(shí)反應(yīng)并分辨特定物件,,降低誤判率,。
圖示3-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的方塊圖
Kneron的可重構(gòu)NPU,使本方案支持同時(shí)運(yùn)行CNN和Transformer網(wǎng)絡(luò),,既可做機(jī)器視覺,,也可運(yùn)行語(yǔ)義分析,且運(yùn)算能效優(yōu)異,。與僅面向特定應(yīng)用的普通AI模型不同,,Kneron的可重構(gòu)人工神經(jīng)網(wǎng)絡(luò)(RANN)技術(shù)更加靈活,可滿足不同應(yīng)用需求并適應(yīng)各種計(jì)算體系架構(gòu),。并且搭載輕量級(jí)圖像識(shí)別算法,,可輕松實(shí)現(xiàn)人臉識(shí)別,、身體與手勢(shì)識(shí)別、物體與場(chǎng)景識(shí)別等,。不僅如此,,第五代ISP技術(shù)可以記錄具有細(xì)節(jié)感知、真實(shí)色調(diào)層次和更低噪聲的圖像和視頻,。在系統(tǒng)中搭載的智能HEVC編碼器能顯著減少無(wú)用的數(shù)據(jù),,并在不中斷網(wǎng)絡(luò)帶寬的情況下保持高質(zhì)量視頻。不僅如此,,支持180°/360°多通道魚眼去扭曲引擎,,結(jié)合了高性能硬件加速魚眼去扭曲器,允許實(shí)時(shí)去扭曲過程以顯著節(jié)省CPU負(fù)載,,并靈活支持各種魚眼的幾何校正/廣角鏡頭提供業(yè)界領(lǐng)先的全景視頻形成質(zhì)量,。此外,該方案同步提供AP函數(shù),,方便客戶快速上手,,另外根據(jù)影像的位置可以進(jìn)行不同的配置調(diào)整。
通過這些優(yōu)勢(shì),,本方案能夠?yàn)榻K端用戶提供更高性能,、低功耗以及高性價(jià)比特點(diǎn),以卓越成像品質(zhì)賦能AI相機(jī)應(yīng)用,。
核心技術(shù)優(yōu)勢(shì):
可重構(gòu)NPU,;
影像辨別軟件;
第五代ISP可以記錄具有可感知細(xì)節(jié),、真實(shí)色調(diào)層次和更低噪聲的圖像和視頻,;
智能HEVC編碼器盡可能顯著減少無(wú)用或不重要的數(shù)據(jù),并在不中斷網(wǎng)絡(luò)帶寬的情況下保持高質(zhì)量的視頻,;
魚眼引擎去扭曲,、拼接、混合,;
智能視頻分析,;
音頻增強(qiáng)和智能;
高效能的應(yīng)用工具PQ Tool跟Fisheye Correction Tool,。
方案規(guī)格:
KL630系列之AI相機(jī)KLR5S3 Series(Car DVR),、KLI5S3 Series(Industrial Cam),。
更多精彩內(nèi)容歡迎點(diǎn)擊==>>電子技術(shù)應(yīng)用-AET<<