在第二屆拯救者杯OPENAIGC開(kāi)發(fā)者大賽中，涌現(xiàn)出一批技術(shù)突出、創(chuàng)意卓越的作品。為了讓這些優(yōu)秀項(xiàng)目被更多人看到，我們特意開(kāi)設(shè)了優(yōu)秀作品報(bào)道專欄，旨在展示其獨(dú)特之處和開(kāi)發(fā)者的精彩故事。

無(wú)論您是技術(shù)專家還是愛(ài)好者，希望能帶給您不一樣的知識(shí)和啟發(fā)。讓我們一起探索AIGC的無(wú)限可能，見(jiàn)證科技與創(chuàng)意的完美融合！

創(chuàng)未來(lái)AI應(yīng)用賽-高校組AI創(chuàng)作力獎(jiǎng)

作品名稱：智視臂傳-AI視覺(jué)觸感未來(lái)

參賽團(tuán)隊(duì)：海南科技職業(yè)大學(xué)AI正當(dāng)時(shí)

作品簡(jiǎn)介

團(tuán)隊(duì)打造一款基于語(yǔ)音+AI智慧視覺(jué)的智能機(jī)械臂，該機(jī)械臂具有語(yǔ)音控制，多終端操作，視覺(jué)識(shí)別等功能，實(shí)現(xiàn)了高精度控制，操縱簡(jiǎn)單，靈敏度高，準(zhǔn)度高的特點(diǎn)。這樣使得機(jī)械臂的應(yīng)用范圍大大增加。機(jī)械臂在多種使用場(chǎng)景進(jìn)行控制操作，視覺(jué)AI算法為我們《智視臂傳》主要項(xiàng)目?jī)?yōu)勢(shì)。

技術(shù)架構(gòu)

機(jī)械臂運(yùn)動(dòng)學(xué)研究的是機(jī)械臂運(yùn)動(dòng)，而不考慮產(chǎn)生運(yùn)動(dòng)的力.本節(jié)僅考慮機(jī)械臂在靜止的狀態(tài)下的位姿關(guān)系。

典型的機(jī)械臂是由一些串行連接的關(guān)節(jié)和連桿組成。每個(gè)關(guān)節(jié)具有一個(gè)自由度，平移或旋轉(zhuǎn)。對(duì)于具有n個(gè)關(guān)節(jié)的機(jī)械臂，關(guān)節(jié)的編號(hào)從1到n，有n+1個(gè)連桿，編號(hào)從0到n。連桿0是機(jī)械臂的基礎(chǔ)，一般是固定的，連桿n上帶有末端執(zhí)行器。關(guān)節(jié)i連接連桿i和連桿i-1。一個(gè)連桿可以被視為一個(gè)剛體，確定與它相鄰的兩個(gè)關(guān)節(jié)軸之間的相對(duì)位置。一個(gè)連桿可以用兩個(gè)參數(shù)描述，連桿長(zhǎng)度和連桿扭矩，這兩個(gè)量定義了與它相關(guān)的兩個(gè)坐標(biāo)軸在空間的相對(duì)位置。

系統(tǒng)架構(gòu)

主要是采用智能高清攝像機(jī)，配合前置的邊緣計(jì)算終端，利用計(jì)算機(jī)視覺(jué)的方法，對(duì)圖像序列進(jìn)行自動(dòng)分析，具有對(duì)動(dòng)態(tài)場(chǎng)景中目標(biāo)定位（骨骼打點(diǎn)）、識(shí)別（識(shí)別手部動(dòng)作）和跟蹤、接入AI模型分析和判斷目標(biāo)的行為，并給與機(jī)械反饋。

應(yīng)用實(shí)現(xiàn)成效

判斷人體姿態(tài)：自動(dòng)實(shí)現(xiàn)對(duì)人進(jìn)行姿態(tài)識(shí)別，并輸入數(shù)據(jù)庫(kù)進(jìn)行機(jī)械學(xué)習(xí)；

OPENCV：對(duì)圖像進(jìn)行處理和分析，為系統(tǒng)提供準(zhǔn)確而高效的圖像分析能力；

卷積神經(jīng)網(wǎng)絡(luò)：卷積神經(jīng)網(wǎng)絡(luò)對(duì)圖像進(jìn)行特征值的分析，通過(guò)卷積、池化、再進(jìn)入CNN神經(jīng)網(wǎng)絡(luò)；

AI視覺(jué)識(shí)別骨骼技術(shù)：通過(guò)攝像頭捕獲的圖像調(diào)用AI對(duì)骨骼進(jìn)行打點(diǎn)并識(shí)別；

三維重建：存儲(chǔ)和管理骨骼識(shí)別的相關(guān)信息，包括識(shí)別信息、三維重建；模擬學(xué)習(xí)運(yùn)動(dòng)；模擬學(xué)習(xí)后進(jìn)行編輯，并進(jìn)行零延遲操作反饋。

繼續(xù)閱讀：

未經(jīng)允許不得轉(zhuǎn)載：RPA中國(guó) | RPA全球生態(tài) | 數(shù)字化勞動(dòng)力 | RPA新聞 | 推動(dòng)中國(guó)RPA生態(tài)發(fā)展 | 流 > 智視臂傳-AI視覺(jué)觸感未來(lái)丨OPENAIGC開(kāi)發(fā)者大賽高校組AI創(chuàng)作力獎(jiǎng)