亞馬遜推出強(qiáng)化學(xué)習(xí)工具，管理機(jī)器人工作流程

技術(shù)編輯：芒果果丨發(fā)自 思否編輯部

近日亞馬推出了 SageMaker 強(qiáng)化學(xué)習(xí)組件工具包 Kubeflow Components，該工具包支持公司的 AWS RoboMaker 服務(wù)，用于協(xié)調(diào)機(jī)器人工作流。亞馬遜表示，其目標(biāo)是加快實(shí)驗(yàn)和管理從感知到控制和優(yōu)化的機(jī)器人工作負(fù)載，并創(chuàng)建端到端的解決方案，而不必每次都重新構(gòu)建它們。

機(jī)器人正被越來越廣泛地用于日益復(fù)雜的用途，比如組裝、和包裝、最后一英里運(yùn)輸、環(huán)境監(jiān)測(cè)、搜索和救援以及輔助手術(shù)。牛津經(jīng)濟(jì)研究院預(yù)計(jì)，在中國(guó)， 制造業(yè)將實(shí)現(xiàn) 1250 萬個(gè)自動(dòng)化工作崗位，而在美國(guó)，麥肯錫預(yù)計(jì)機(jī)器將占據(jù)這類崗位的 30% 以上。對(duì)于強(qiáng)化學(xué)習(xí)來說，這是一種新興的人工智能技術(shù)，可以幫助開發(fā)解決機(jī)器人技術(shù)中不斷出現(xiàn)的各種問題。

SageMaker RL 基于 Amazon 的 SageMaker 機(jī)器學(xué)習(xí)服務(wù)，添加了預(yù)先打包的工具包，旨在與仿真環(huán)境集成。根據(jù)亞馬遜的說法，有了 Kubernetes 的 SageMaker RL Components，客戶可以在他們的管道中使用 SageMaker RL Components 來調(diào)用和并行化 SageMaker 培訓(xùn)工作和 RoboMaker 模擬工作，作為其強(qiáng)化學(xué)習(xí)培訓(xùn)工作流程中的步驟，而不必?fù)?dān)心其在后臺(tái)運(yùn)行的情況。

運(yùn)行 SageMaker RL Kubeflow 組件需要一個(gè)現(xiàn)有的或新的 Kubernetes 集群。亞馬遜表示，客戶還必須在集群上安裝 Kubeflow pipeline，并為 SageMaker 和 RoboMaker 設(shè)置身份和訪問管理角色和權(quán)限。

Woodside Energy 將 RoboMaker 和 SageMaker Kubeflow 一起訓(xùn)練、調(diào)試和部署強(qiáng)化學(xué)習(xí)模型到他們的機(jī)器人身上，讓它們執(zhí)行重復(fù)而危險(xiǎn)的操作任務(wù)。

該公司聘請(qǐng)了總部設(shè)在澳大利亞的咨詢公司 Max Kelsen 協(xié)助 RoboMaker 組件的開發(fā)和貢獻(xiàn)。例如，由 Woodside 公司建造的機(jī)器人平臺(tái) Ripley 被訓(xùn)練執(zhí)行“雙阻塞和排放”，這是一種手動(dòng)關(guān)閉泵的程序，包括按順序轉(zhuǎn)動(dòng)多個(gè)閥門。由 RoboMaker 和 SageMaker 共同創(chuàng)造的強(qiáng)化學(xué)習(xí)/機(jī)器人模型使用關(guān)節(jié)狀態(tài)和攝像機(jī)視圖作為輸入，輸出閥門操作的最佳軌跡。

Woodside 機(jī)器人技術(shù)工程師 Kyle Saltmarsh 說：“我們的團(tuán)隊(duì)和我們的合作伙伴希望開始探索使用機(jī)器學(xué)習(xí)方法來進(jìn)行機(jī)器人操作。在我們能夠有效地做到這一點(diǎn)之前，我們需要一個(gè)框架，使我們能夠有效地培訓(xùn)、測(cè)試、調(diào)優(yōu)和部署這些模型。通過 SageMaker 和 RoboMaker 利用 Kubeflow 組件和管道為我們提供了這個(gè)框架，我們很高興能夠讓我們的機(jī)器人專家和數(shù)據(jù)科學(xué)家將他們的精力和時(shí)間集中在算法和實(shí)現(xiàn)上?！?/span>

內(nèi)容來源：

https://venturebeat.com/2021/03/03/amazon-launches-reinforcement-learning-tools-to-manage-robots-workflows/