2021年11月3日,，致力于亞太地區(qū)市場的領(lǐng)先半導(dǎo)體元器件分銷商---大聯(lián)大控股宣布,，其旗下友尚推出基于英特爾（Intel）NCS2神經(jīng)計算棒的視覺系統(tǒng)方案，適用于智能機械手臂,?！ ?/p>
圖示1-大聯(lián)大友尚基于Intel產(chǎn)品的智能機械手臂視覺系統(tǒng)方案的展示板圖
機械手臂是一種能夠靈活代替人類手和臂工作的機器,，通常用以按固定程序抓取、搬運物件或操作工具的自動操作裝置,。隨著機器視覺,、AI等技術(shù)的不斷突破，智能機械手臂的發(fā)展也日益壯大,。大聯(lián)大友尚基于Intel NCS2神經(jīng)計算棒的視覺系統(tǒng)方案,，應(yīng)用于機械手臂中,，可精準(zhǔn)識別物體，讓抓取,、搬用等過程更加智能,。
圖示2-大聯(lián)大友尚基于Intel產(chǎn)品的智能機械手臂視覺系統(tǒng)方案的場景應(yīng)用圖
本方案的核心原理是利用D435識別到彩色影像結(jié)合深度學(xué)習(xí)的物件定位算法YOLOv3找到物品位置（X，Y）,。當(dāng)CPU算力不足時,，可使用Intel GPU或VPU（NCS2）加速計算，再通過D435識別到深度影像所對應(yīng)位置的深度（Z）信息,，即可實現(xiàn)讓機械手臂正確地伸到正確的空間位置（XYZ）夾取并抓取物品?！ ?/p>
圖示3-大聯(lián)大友尚基于Intel產(chǎn)品的智能機械手臂視覺系統(tǒng)方案的方塊圖
Intel NCS2是一款具有神經(jīng)計算引擎的VPU（視覺處理單元）,，可提供比前一代產(chǎn)品高出八倍的性能。諸如Caffe,，Tensor Flow或MXNet等深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)可以直接與NCS2上的OpenVINO工具包集成,。并且這些機器學(xué)習(xí)框架還針對全新的深度神經(jīng)網(wǎng)絡(luò)（DNN）推理引擎進行優(yōu)化。借助電腦和Intel NCS2,，開發(fā)人員可以快速啟動AI和計算機視覺應(yīng)用的開發(fā),。
NCS2可在USB 3.0上運行，不需要其他硬件,，從而使用戶能夠?qū)⑵湓陔娔X上訓(xùn)練好的模型,，無縫部署到各種邊緣設(shè)備而不需連網(wǎng)或連云。無論是開發(fā)智能相機,，具有手勢識別功能的無人機,，工業(yè)機器人，還是下一代智能家居設(shè)備,，NCS2都能為開發(fā)人員提供快速原型所需的功能,。
核心技術(shù)優(yōu)勢：
Intel RealSense D435 camera：
低成本的3D雙目深度相機；
提供完整SDK可以快速與系統(tǒng)整合,；
可快速掃瞄,，提供點云資訊；
可透過ROS整合開發(fā)自主創(chuàng)新功能,；
智能化3D物件辨識,。
Intel OpenVino Toolkit：
可最佳化訓(xùn)練好的模型；
支援業(yè)界,、學(xué)界常用的訓(xùn)練框架,；
可快速部屬到Intel的硬體平臺如CPU、GPU,、VPU,、FPGA,；
提供常用的預(yù)訓(xùn)練模型如SSD、YOLO等,；
提供C++與Python的應(yīng)用范例,，縮短程式開發(fā)周期。
Intel Neural Compute Stick 2（Intel? NCS2）：
在英特爾Movidius Myriad X視覺處理單元（VPU）上提供卓越的每瓦每美元效能進行構(gòu)建和擴展,；
支援Windows 10,，Ubuntu*或macOS*上快速開發(fā)；
在通用框架和開箱即用的范例應(yīng)用程式上進行開發(fā),；
在不需連云情況下進行操作,；
在低成本的邊緣設(shè)備（例如Raspberry Pi*3和其他ARM*主機設(shè)備）端開發(fā)原型。
方案規(guī)格：
3D相機：Intel RealSense D435 Camera,；
作業(yè)系統(tǒng)：Windows 10,；
Intel NUC Rugged Board with Core i3/i5 Processor；
AI推論套件：Intel OpenVino Toolkit 2020.03,；
內(nèi)存：4GB以上,；
傳輸界面：USB 3.0；
神經(jīng)計算棒：Intel Neural Compute Stick 2 （Intel NCS2）,。
