時(shí)間:2024-02-28 15:30:14來源: OFweek 機(jī)器人網(wǎng)
NVIDIA發(fā)布全新版本Isaac軟件開發(fā)套件(SDK),為機(jī)器人提供更新的AI感知和仿真功能。
NVIDIA創(chuàng)始人兼首席執(zhí)行官黃仁勛在NVIDIA最新的GPU技術(shù)會(huì)議(GTC CHINA 2019)上宣布了該消息。在建立統(tǒng)一的機(jī)器人開發(fā)平臺(tái)以實(shí)現(xiàn)AI、仿真和操控功能方面,Isaac SDK邁出了重要的里程碑。
Isaac SDK包括Isaac Robotics Engine(提供應(yīng)用程序框架),Isaac GEM(預(yù)先構(gòu)建的深度神經(jīng)網(wǎng)絡(luò)模型、算法、庫、驅(qū)動(dòng)程序和API),用于室內(nèi)物流的參考應(yīng)用程序以及Isaac Sim的第一個(gè)版本(提供導(dǎo)航功能)。
全新Isaac SDK可以大大加快研究人員、開發(fā)人員、初創(chuàng)企業(yè)和制造商開發(fā)和測試機(jī)器人的速度。它使機(jī)器人能夠通過仿真獲得由人工智能技術(shù)驅(qū)動(dòng)的感知和訓(xùn)練功能,從而可以在各種環(huán)境和情況下對(duì)機(jī)器人進(jìn)行測試和驗(yàn)證。
這樣一來,可以節(jié)省成本。
從基于AI的感知開始
每臺(tái)自主機(jī)器都始于感知。
為了加快AI機(jī)器人的開發(fā)速度,全新Isaac SDK包括各種基于攝像頭的感知深度神經(jīng)網(wǎng)絡(luò)。其中:
對(duì)象檢測——識(shí)別用于導(dǎo)航、交互或操控的對(duì)象
自由空間分割——檢測和分割外部世界,例如確定人行道在哪里,以及機(jī)器人可以在哪里行駛
3D姿態(tài)估計(jì)——了解目標(biāo)的位置和方向,從而實(shí)現(xiàn)諸如機(jī)械臂拾取物體的任務(wù)
2D人體姿態(tài)估計(jì)——將姿態(tài)估計(jì)應(yīng)用于人,這對(duì)于與人互動(dòng)的機(jī)器人(例如配送機(jī)器人)和協(xié)作機(jī)器人(專門設(shè)計(jì)用于與人合作)非常重要
該SDK的對(duì)象檢測也已通過ResNet深度神經(jīng)網(wǎng)絡(luò)進(jìn)行了更新,可以使用NVIDIA的遷移學(xué)習(xí)工具包對(duì)其進(jìn)行訓(xùn)練。這使得添加新對(duì)象進(jìn)行檢測和訓(xùn)練新模型變得更加容易,這些新模型可以以較高的準(zhǔn)確度啟動(dòng)并運(yùn)行。
推出Isaac Sim
新版本引入了一項(xiàng)重要功能——使用Isaac Sim訓(xùn)練機(jī)器人,并將所生成的軟件部署到在現(xiàn)實(shí)世界中運(yùn)行的真實(shí)機(jī)器人中。這有望大大加快機(jī)器人的開發(fā)速度,從而實(shí)現(xiàn)綜合數(shù)據(jù)的訓(xùn)練。
通過仿真,開發(fā)人員可以在極端情況下(即困難或異常情況下)對(duì)機(jī)器人進(jìn)行測試,以進(jìn)一步加強(qiáng)對(duì)它的訓(xùn)練。將這些結(jié)果輸入訓(xùn)練管道,使神經(jīng)網(wǎng)絡(luò)可以基于真實(shí)和模擬數(shù)據(jù)來提高準(zhǔn)確性。
多機(jī)器人Sim來了
全新SDK也提供了多機(jī)器人仿真。這使開發(fā)人員可以將多個(gè)機(jī)器人放入仿真環(huán)境中進(jìn)行測試,以便它們學(xué)會(huì)彼此相關(guān)的工作。各個(gè)機(jī)器人可以在共享的虛擬環(huán)境中移動(dòng)時(shí),運(yùn)行獨(dú)立版本的Isaac導(dǎo)航軟件堆棧。
因此,尋求在大型物流管理中運(yùn)行多個(gè)機(jī)器人的制造商,可以先測試機(jī)器人交互作用并調(diào)試問題,再將其部署到現(xiàn)實(shí)世界。
Isaac與DeepStream集成
全新SDK還集成了對(duì)NVIDIA DeepStream軟件的支持,該軟件廣泛用于處理分析功能。開發(fā)人員可以在支持機(jī)器人應(yīng)用程序的邊緣AI部署DeepStream和NVIDIA GPU,以實(shí)現(xiàn)對(duì)視頻流的處理。
開發(fā)人員現(xiàn)在可以構(gòu)建各種各樣的機(jī)器人,這些機(jī)器人需要對(duì)攝像頭視頻源進(jìn)行分析,既可以用于機(jī)載應(yīng)用,也可以用于遠(yuǎn)程定位。
使用Isaac SDK進(jìn)行編程
最后,對(duì)于已經(jīng)開發(fā)了自己代碼的機(jī)器人開發(fā)人員,全新SDK也能集成他們的工作,并添加了基于C編程語言的新API。
這使開發(fā)人員可以將自己的軟件堆棧連接到Isaac SDK,并最大程度地減少編程語言轉(zhuǎn)換——為用戶提供通過C API訪問路由的Isaac功能。
C-API訪問權(quán)限同時(shí)支持開發(fā)人員在其他編程語言中使用Isaac SDK。
中國傳動(dòng)網(wǎng)版權(quán)與免責(zé)聲明:凡本網(wǎng)注明[來源:中國傳動(dòng)網(wǎng)]的所有文字、圖片、音視和視頻文件,版權(quán)均為中國傳動(dòng)網(wǎng)(www.connectcrack.com)獨(dú)家所有。如需轉(zhuǎn)載請(qǐng)與0755-82949061聯(lián)系。任何媒體、網(wǎng)站或個(gè)人轉(zhuǎn)載使用時(shí)須注明來源“中國傳動(dòng)網(wǎng)”,違反者本網(wǎng)將追究其法律責(zé)任。
本網(wǎng)轉(zhuǎn)載并注明其他來源的稿件,均來自互聯(lián)網(wǎng)或業(yè)內(nèi)投稿人士,版權(quán)屬于原版權(quán)人。轉(zhuǎn)載請(qǐng)保留稿件來源及作者,禁止擅自篡改,違者自負(fù)版權(quán)法律責(zé)任。
產(chǎn)品新聞
更多>2025-04-30
性能躍升20%!維宏NK300CX Plus數(shù)控系統(tǒng)...
2025-04-11
rpi-image-gen:樹莓派軟件鏡像構(gòu)建的終...
2025-04-08
【產(chǎn)品解讀】全面提升精密制造檢測節(jié)拍...
2025-03-31
激光閃耀 智慧引領(lǐng) | WISE MASER 黑武士...
2025-03-20