2021年6月2日,,致力于亞太地區(qū)市場的領(lǐng)先半導(dǎo)體元器件分銷商---大聯(lián)大控股宣布,,其旗下友尚推出基于英特爾(Intel)OpenVino與Realsense Camera的3D物體夾取系統(tǒng)解決方案。
圖示1-大聯(lián)大友尚推出基于Intel產(chǎn)品的3D物體夾取系統(tǒng)解決方案的展示板圖
在制造業(yè),、金屬加工業(yè),、食品業(yè)產(chǎn)線上仍然有許多上下料工作依賴人工進行,,但是由于缺工情況日益嚴(yán)重,機器人進行自動化上下料需求逐漸浮現(xiàn),。實現(xiàn)自動化上下料的難題之一是許多場景下如零組件,、金屬粗胚,、食品包裝等工件散亂堆放于容器內(nèi)。相比人類,,實現(xiàn)機器人從容器中取出隨機擺放的零件,,再將其精確放入機器中的過程困難重重。大聯(lián)大友尚推出的3D物體夾取系統(tǒng)解決方案,,通過一系列先進的技術(shù)創(chuàng)新可實現(xiàn)精準(zhǔn)的物體夾取,,有效解決了上述問題。
圖示2-大聯(lián)大友尚推出基于Intel產(chǎn)品的3D物體夾取系統(tǒng)解決方案場景應(yīng)用圖
該方案通過Intel Realsense D415 Camera錄制物體的3D影像資料,,并通過USB將影像資料送到Edge AI System,,內(nèi)置Intel OpenVino工具包的Edge AI System通過影像分析與深度學(xué)習(xí)算法識別物體位置、姿態(tài)的相關(guān)信息(X,,Y,,Z,Rx,,Ry,,Rz),該AI系統(tǒng)也可以將識別到的物體種類,、狀況等信息上傳到云端或本地端并通過儀表盤顯示物體的信息,。機械臂與Edge AI System通過TCP/IP協(xié)議互相溝通,執(zhí)行獲得的物體位置,、姿態(tài)信息(X,,Y,Z,,Rx,,Ry,Rz),,實現(xiàn)夾取物體,,可實現(xiàn)AI識別方案快速部署。
圖示3-大聯(lián)大友尚推出基于Intel產(chǎn)品的3D物體夾取系統(tǒng)解決方案方塊圖
核心技術(shù)優(yōu)勢:
1.Intel RealSense D415 camera
· 低成本的3D雙目深度相機,;
· 提供完整SDK可以快速與系統(tǒng)整合,;
· 可快速掃描,提供點云信息,;
· 可通過ROS整合開發(fā)自主創(chuàng)新功能,;
· 智能化3D物體識別。
2.Intel OpenVino Toolkit
· 可最佳化訓(xùn)練好的模型,;
· 支持業(yè)界,、學(xué)界常用的訓(xùn)練框架,;
· 可快速部屬到Intel的硬件平臺如CPU,、GPU,、VPU、FPGA,;
· 提供常用的預(yù)訓(xùn)練模型如SSD,、YOLO等;
· 提供C++與Python的應(yīng)用范例,,縮短程式開發(fā)周期,。
3.3D物體夾取系統(tǒng)方案
· 可自動夾取與放置物體;
· 定制化的物體識別(可依客戶需求再訓(xùn)練模型),;
· 通過標(biāo)準(zhǔn)TCP/IP界面?zhèn)鬏斘矬w夾取信息,。
方案規(guī)格:
· 3D相機:Intel RealSense D415 Camera;
· 操作系統(tǒng):UBuntu 16.04,;
· Intel NUC Rugged Board with Core i3/i5 Processor,;
· AI推理套件:Intel OpenVino Toolkit 2020.03;
· 內(nèi)存:4GB以上,;
· 傳輸界面:USB 3.0 and TCP/IP 界面,;
· 機器手臂:6軸手臂、4軸手臂 with TCP/IP 界面,;
· 加速卡:Intel? Movidius? Myriad? X Edge AI Module VEGA-320-01A1,。