NVIDIA開源了基于PyTorch的3D深度學(xué)習(xí)的綜合庫(kù)
點(diǎn)擊上方“小白學(xué)視覺”,選擇加"星標(biāo)"或“置頂”
重磅干貨,第一時(shí)間送達(dá)
由于大多數(shù)真實(shí)世界環(huán)境都是三維的,因此設(shè)計(jì)用于分析真實(shí)世界環(huán)境中的視頻或完整任務(wù)的深度學(xué)習(xí)模型也應(yīng)該合乎理想地是在三維數(shù)據(jù)上進(jìn)行訓(xùn)練。諸如機(jī)器人、自動(dòng)駕駛汽車、智能手機(jī)和其他設(shè)備之類的技術(shù)工具,目前正在生成越來(lái)越多的三維數(shù)據(jù),這些數(shù)據(jù)最終可能會(huì)被深度學(xué)習(xí)算法進(jìn)行處理。
但到目前為止,必要的工具和平臺(tái)只有一些人工智能研究人員才能使用,這使得在海量的三維數(shù)據(jù)上訓(xùn)練深度學(xué)習(xí)算法一直較為困難;為了解決缺乏現(xiàn)成工具的問(wèn)題,NVIDIA的一個(gè)研究團(tuán)隊(duì)最近創(chuàng)建了一個(gè)名為“高嶺土”(Kaolin)的PyTorch開源庫(kù),旨在推進(jìn)和促進(jìn)三維深度學(xué)習(xí)研究。

論文地址:https://arxiv.org/pdf/1911.05063.pdf
開展這項(xiàng)研究的一個(gè)研究人員說(shuō):“目前,還沒(méi)有一個(gè)單一的開源軟件庫(kù)能夠支持三維數(shù)據(jù)的多種表現(xiàn)形式、多種任務(wù)和評(píng)估標(biāo)準(zhǔn);我們決定通過(guò)創(chuàng)造Kaolin來(lái)彌補(bǔ)這一空白,這是第一個(gè)綜合性的三維深度學(xué)習(xí)庫(kù)?!?/span>
Kaolin包含各種構(gòu)造深度學(xué)習(xí)架構(gòu)的工具,可以分析三維數(shù)據(jù),且兼具有效性與易用性,允許研究人員在將其用于訓(xùn)練深度學(xué)習(xí)算法之前,加載、預(yù)處理和操縱三維數(shù)據(jù)。Kaolin還包含幾個(gè)圖形模塊來(lái)編輯三維圖像(如渲染、照明、陰影和視圖扭曲),且支持廣泛的損失函數(shù)和評(píng)估指標(biāo),使研究人員可以很容易地評(píng)估他們的深度學(xué)習(xí)算法。
無(wú)論是對(duì)于在開發(fā)深度學(xué)習(xí)模型方面經(jīng)驗(yàn)豐富的開發(fā)人員,還是對(duì)于剛剛起步的開發(fā)人員,Kaolin都是一個(gè)有價(jià)值的工具。實(shí)際上,開發(fā)人員在庫(kù)中還可以找到幾種最先進(jìn)的架構(gòu),他們可以將其作為自己模型的起點(diǎn)或靈感來(lái)源。雖然活躍的三維深度學(xué)習(xí)研究人員將Kaolin視為加快研究速度的一種有效手段,但進(jìn)入該領(lǐng)域的新手也正將Kaolin作為開始的起點(diǎn)。在將來(lái),Kaolin還能幫助開發(fā)人員加速三維深度學(xué)習(xí)研究,協(xié)助開發(fā)人員創(chuàng)建新的人工智能架構(gòu)以及對(duì)其進(jìn)行培訓(xùn)和評(píng)估。同時(shí),NVIDIA的研究人員還在計(jì)劃擴(kuò)展Kaolin并進(jìn)一步增強(qiáng)其功能,使Kaolin成為三維深度學(xué)習(xí)研究的一站式平臺(tái)。
好消息!
小白學(xué)視覺知識(shí)星球
開始面向外開放啦??????
下載1:OpenCV-Contrib擴(kuò)展模塊中文版教程 在「小白學(xué)視覺」公眾號(hào)后臺(tái)回復(fù):擴(kuò)展模塊中文教程,即可下載全網(wǎng)第一份OpenCV擴(kuò)展模塊教程中文版,涵蓋擴(kuò)展模塊安裝、SFM算法、立體視覺、目標(biāo)跟蹤、生物視覺、超分辨率處理等二十多章內(nèi)容。 下載2:Python視覺實(shí)戰(zhàn)項(xiàng)目52講 在「小白學(xué)視覺」公眾號(hào)后臺(tái)回復(fù):Python視覺實(shí)戰(zhàn)項(xiàng)目,即可下載包括圖像分割、口罩檢測(cè)、車道線檢測(cè)、車輛計(jì)數(shù)、添加眼線、車牌識(shí)別、字符識(shí)別、情緒檢測(cè)、文本內(nèi)容提取、面部識(shí)別等31個(gè)視覺實(shí)戰(zhàn)項(xiàng)目,助力快速學(xué)校計(jì)算機(jī)視覺。 下載3:OpenCV實(shí)戰(zhàn)項(xiàng)目20講 在「小白學(xué)視覺」公眾號(hào)后臺(tái)回復(fù):OpenCV實(shí)戰(zhàn)項(xiàng)目20講,即可下載含有20個(gè)基于OpenCV實(shí)現(xiàn)20個(gè)實(shí)戰(zhàn)項(xiàng)目,實(shí)現(xiàn)OpenCV學(xué)習(xí)進(jìn)階。 交流群
歡迎加入公眾號(hào)讀者群一起和同行交流,目前有SLAM、三維視覺、傳感器、自動(dòng)駕駛、計(jì)算攝影、檢測(cè)、分割、識(shí)別、醫(yī)學(xué)影像、GAN、算法競(jìng)賽等微信群(以后會(huì)逐漸細(xì)分),請(qǐng)掃描下面微信號(hào)加群,備注:”昵稱+學(xué)校/公司+研究方向“,例如:”張三 + 上海交大 + 視覺SLAM“。請(qǐng)按照格式備注,否則不予通過(guò)。添加成功后會(huì)根據(jù)研究方向邀請(qǐng)進(jìn)入相關(guān)微信群。請(qǐng)勿在群內(nèi)發(fā)送廣告,否則會(huì)請(qǐng)出群,謝謝理解~

