↑ 點(diǎn)擊藍(lán)字?關(guān)注極市平臺(tái)

作者丨陳彩嫻

來(lái)源丨AI科技評(píng)論

編輯丨極市平臺(tái)

極市導(dǎo)讀

與國(guó)外相比，國(guó)內(nèi)大學(xué)的“Gap”文化并不流行。有人認(rèn)為這是浪費(fèi)時(shí)間，也有人逆流直上，利用一兩年的空檔找到未來(lái)的方向。顯然，方浩樹(shù)是后者。?>>年度盤(pán)點(diǎn)：極市計(jì)算機(jī)視覺(jué)資源匯總，頂會(huì)論文、技術(shù)視頻、數(shù)據(jù)集等（限時(shí)開(kāi)放下載）

在獲得2020年微軟學(xué)者獎(jiǎng)學(xué)金之前，方浩樹(shù)便已是國(guó)內(nèi)有名的AI科研學(xué)子之一。

他曾在本科期間發(fā)表4篇頂會(huì)一作，入讀上海交通大學(xué)吳文俊人工智能博士班之后，又相繼獲得2019年百度獎(jiǎng)學(xué)金、2019年度“中科視拓Seeta學(xué)術(shù)新銳獎(jiǎng)”，入選由上海 AI 青年科學(xué)家聯(lián)盟·梧桐匯發(fā)起的「A 班計(jì)劃」。

作為一名二年級(jí)在讀博士生，方浩樹(shù)的學(xué)術(shù)成就令人矚目。然而，盡管外界的關(guān)注與贊譽(yù)不斷，他對(duì)自己的定位與認(rèn)知卻十分清晰，將目前的學(xué)術(shù)成就首先歸因于“歷史的進(jìn)程”：“深度學(xué)習(xí)發(fā)展到現(xiàn)在，確實(shí)比較容易出成果。”

方浩樹(shù)的童年在潮汕度過(guò)，小學(xué)三年級(jí)隨父母移居深圳，求學(xué)均是名校：初中就讀于深圳市福田區(qū)石廈學(xué)校，高中就讀于深圳中學(xué)，本科就讀于上海交通大學(xué)電子信息與電氣工程學(xué)院，期間曾赴UCLA跟隨朱松純實(shí)習(xí)，2019年直博上海交通大學(xué)計(jì)算機(jī)系，成為吳文俊人工智能博士班的首批學(xué)員之一，師從盧策吾。

仔細(xì)回顧，方浩樹(shù)的“開(kāi)掛”人生，似乎是從他決定休學(xué)后開(kāi)始的。

1?學(xué)霸不走尋常路

談起當(dāng)年的高考成績(jī)，方浩樹(shù)記憶猶新：“這個(gè)我記得很清楚哈哈。當(dāng)時(shí)我考了680分，而那一年清華與北大在廣東省的招生分?jǐn)?shù)線(xiàn)都是681分。”

2010年，方浩樹(shù)進(jìn)入深圳中學(xué)標(biāo)準(zhǔn)班就讀。當(dāng)時(shí)，深圳中學(xué)的前任著名校長(zhǎng)王錚已調(diào)去北京大學(xué)附屬中學(xué)，但他任職期間的改革成果仍繼續(xù)影響著深中的文化氛圍：推崇自由與民主的治校精神，鼓勵(lì)學(xué)生的多元化發(fā)展。

比如，方浩樹(shù)記得，他在深圳中學(xué)讀高中時(shí)，如果學(xué)生覺(jué)得學(xué)校有某個(gè)地方做得不夠好，可以在學(xué)校校園里的大字報(bào)上提出來(lái)，讓學(xué)校去改善。在這個(gè)過(guò)程中，方浩樹(shù)逐漸培養(yǎng)了一種“think different”的思維方式，養(yǎng)成批判看待問(wèn)題、不斷嘗試尋找更好解決方法的習(xí)慣。

成長(zhǎng)于自由開(kāi)放的環(huán)境，個(gè)性張揚(yáng)并非必然。在方浩樹(shù)的身上，深圳與深圳中學(xué)的氛圍對(duì)他個(gè)人的影響更多是體現(xiàn)在追求創(chuàng)新的自我驅(qū)動(dòng)力，熱愛(ài)思考與自主探索便是其中的體現(xiàn)。方浩樹(shù)不喜歡隨波逐流，也不喜歡按部就班，而是更傾向于先尋找方向。只有確定了自己的目標(biāo)，他才會(huì)付出自己所有的時(shí)間與精力去努力。

因此，方浩樹(shù)并非一直是學(xué)霸。在剛上高中與剛上大學(xué)時(shí)，他的成績(jī)都排在全班/全系的中下游，因?yàn)樵谶@兩個(gè)時(shí)間段里，方浩樹(shù)花了更多時(shí)間去思考：“我是不是要把很多時(shí)間花在上課上？”相比一直埋頭苦讀，方浩樹(shù)認(rèn)為，這個(gè)問(wèn)題更值得他去思考。

只有等他想明白了，他才有可能專(zhuān)心起來(lái)。

在上大學(xué)后，方浩樹(shù)也經(jīng)過(guò)了大約兩年的探索與思考。在探索期間，他參加了許多社團(tuán)活動(dòng)，對(duì)自己的專(zhuān)業(yè)方向也感到迷茫：“我一直不太清楚自己想要做什么。這么多方向似乎都不是我真正喜歡的?！?/span>

甚至大二選專(zhuān)業(yè)時(shí)，方浩樹(shù)一開(kāi)始也沒(méi)想選擇計(jì)算機(jī)。他從小就有一個(gè)夢(mèng)想，就是當(dāng)一名科學(xué)家，而計(jì)算機(jī)似乎離這個(gè)目標(biāo)不是很近。后來(lái)，方浩樹(shù)了解到，其實(shí)學(xué)計(jì)算機(jī)，也可以選擇研究方法論，以后也是有成為科學(xué)家的潛力，所以才選擇了計(jì)算機(jī)。

圖注：探索期間，2014年夏天，方浩樹(shù)去烏克蘭參加了全球志愿者活動(dòng)

在大學(xué)的前兩年，由于沒(méi)把心思花在上課上，方浩樹(shù)的成績(jī)一直比較差。后來(lái)，方浩樹(shù)先給自己定了一個(gè)目標(biāo)：出國(guó)。如果要出國(guó)留學(xué)，那必然離不開(kāi)好的績(jī)點(diǎn)，于是他就思考：“自己是不是應(yīng)該好好學(xué)習(xí)？先把成績(jī)提上來(lái)，然后再做下一步的打算。”

確定了出國(guó)的目標(biāo)后，方浩樹(shù)開(kāi)始努力學(xué)習(xí)，把成績(jī)提高到了全系前10名。與此同時(shí)，他也開(kāi)始尋找加入實(shí)驗(yàn)室的機(jī)會(huì)。

當(dāng)時(shí)，方浩樹(shù)前后一共加入了三個(gè)實(shí)驗(yàn)室，一個(gè)是光量子方向，一個(gè)是網(wǎng)絡(luò)方向，一個(gè)是高性能計(jì)算方向。但似乎沒(méi)有找到入門(mén)的方法，“感覺(jué)做不動(dòng)”。

大三時(shí)期，方浩樹(shù)偶然了解到上海交通大學(xué)的本科生研究計(jì)劃（Participation in Research Program，簡(jiǎn)稱(chēng)PRP）。自2001年起，上海交大開(kāi)始實(shí)施PRP計(jì)劃，希望幫助對(duì)科研感興趣的本科生參與課外科研項(xiàng)目的研究工作。

沒(méi)有多想，方浩樹(shù)選擇參加PRP計(jì)劃，并加入了第四個(gè)實(shí)驗(yàn)室，跟隨自動(dòng)化系的閻威武教授學(xué)習(xí)機(jī)器學(xué)習(xí)的相關(guān)知識(shí)。在這個(gè)計(jì)劃中，方浩樹(shù)根據(jù)閻威武推薦的 ML 入門(mén)資料去摸索、自學(xué)，推導(dǎo)、鉆研邏輯回歸、支持向量機(jī)、MLP等新知識(shí)，“越學(xué)越覺(jué)得有意思。”

但深入學(xué)習(xí)一段時(shí)間后，方浩樹(shù)又開(kāi)始迷茫。同時(shí)，2015年那會(huì)，國(guó)內(nèi)有關(guān)神經(jīng)網(wǎng)絡(luò)、深度學(xué)習(xí)的研究還沒(méi)有火起來(lái)，網(wǎng)絡(luò)上的相關(guān)知識(shí)介紹十分有限。

“當(dāng)時(shí)閻老師主要研究方向不是計(jì)算機(jī)視覺(jué)，用到神經(jīng)網(wǎng)絡(luò)的地方比較少，沒(méi)有很合適的Topic給我做，我也不知道這個(gè)方向能做什么?！?/span>

盡管對(duì)神經(jīng)網(wǎng)絡(luò)與計(jì)算機(jī)視覺(jué)感興趣，但方浩樹(shù)沒(méi)有從事相關(guān)科研實(shí)踐的機(jī)會(huì)。

在大三的寒假，也就是2016年初，方浩樹(shù)在BBS上看到盧策吾的實(shí)習(xí)生招聘廣告。當(dāng)時(shí)，盧策吾還在斯坦福大學(xué)李飛飛實(shí)驗(yàn)室擔(dān)任博士后，第二年才回上海交大，但已經(jīng)開(kāi)始招實(shí)習(xí)生。方浩樹(shù)發(fā)現(xiàn)自己的興趣方向與盧策吾的研究很契合，于是便投遞了簡(jiǎn)歷。

“Human Understanding（人類(lèi)理解）從最底層像素級(jí)別到語(yǔ)義級(jí)別，逐層深入的理解使我更感興趣?！?/span>

在面試中，盧策吾主要了解了方浩樹(shù)在PRP計(jì)劃里所學(xué)習(xí)與收獲到的知識(shí)。其中，方浩樹(shù)提到自己有一定的機(jī)器學(xué)習(xí)與神經(jīng)網(wǎng)絡(luò)的知識(shí)基礎(chǔ)，于是便通過(guò)了面試。

如今回頭看，雖然當(dāng)年高考與清北失之交臂，但方浩樹(shù)覺(jué)得，自己在上海交大讀本科更好：“因?yàn)榕龅奖R策吾老師這一點(diǎn)很重要。如果去了清北就遇不到盧策吾老師了，這會(huì)很遺憾。”

預(yù)感于加入盧策吾團(tuán)隊(duì)做科研的機(jī)會(huì)難得，因此，2016年大三結(jié)束后，方浩樹(shù)毅然決定辦理休學(xué)，跟著盧策吾做研究。

“一兩年對(duì)漫長(zhǎng)的人生來(lái)說(shuō)可能不算什么。”

2?休學(xué)兩年：出了四篇頂會(huì)一作

休學(xué)的兩年，也是方浩樹(shù)的重要人生轉(zhuǎn)折點(diǎn)。在這兩年中，方浩樹(shù)發(fā)表了4篇頂會(huì)一作，并結(jié)緣了三位對(duì)他做科研影響較大的導(dǎo)師：盧策吾、戴宇榮與朱松純。

“我當(dāng)時(shí)是先休學(xué)一年。其實(shí)你想，如果在本科期間入伍，也要兩年；讀一個(gè)master（碩士），也要兩年，所以我覺(jué)得我當(dāng)時(shí)休學(xué)一年的影響也不是很大，而且我會(huì)覺(jué)得在盧策吾老師這邊可以學(xué)到很多東西?！?/span>

確定加入盧策吾老師的團(tuán)隊(duì)實(shí)習(xí)后，方浩樹(shù)在2016年3月開(kāi)始接觸課題，準(zhǔn)備前期工作，研究代碼，看論文等。當(dāng)時(shí)，方浩樹(shù)也申請(qǐng)了商湯科技的實(shí)習(xí)。因此，2016年6月辦完休學(xué)手續(xù)后，方浩樹(shù)一邊在商湯科技實(shí)習(xí)，一邊跟著盧策吾老師做實(shí)驗(yàn)。

本科期間，方浩樹(shù)主要專(zhuān)注于人類(lèi)行為理解的相關(guān)研究。

ICCV 2017

在盧策吾與騰訊優(yōu)圖實(shí)驗(yàn)室總監(jiān)戴宇榮的指導(dǎo)下，方浩樹(shù)與團(tuán)隊(duì)遠(yuǎn)程合作，研究多人場(chǎng)景姿態(tài)估計(jì)。多人場(chǎng)景姿態(tài)估計(jì)的目標(biāo)是在一個(gè)多人場(chǎng)景里識(shí)別每一個(gè)人，然后把每一個(gè)人的骨架同時(shí)抽取出來(lái)。與其余頂會(huì)論文的進(jìn)行相比，第一篇頂會(huì)論文的過(guò)程相對(duì)坎坷：

一開(kāi)始，實(shí)驗(yàn)分?jǐn)?shù)很難上去，方浩樹(shù)與團(tuán)隊(duì)成員花了很長(zhǎng)時(shí)間去摸索如何提分。好不容易，在花了很多時(shí)間調(diào)整、跑實(shí)驗(yàn)后，分?jǐn)?shù)終于超過(guò)了目標(biāo)分?jǐn)?shù)的一點(diǎn)點(diǎn)。方浩樹(shù)很開(kāi)心，以為這就結(jié)束了。沒(méi)想到盧策吾看到實(shí)驗(yàn)結(jié)果后，說(shuō)：“不錯(cuò)，但還可以更高。還可以高10個(gè)點(diǎn)。”

方浩樹(shù)與隊(duì)友聽(tīng)到，覺(jué)得有些夸張，可能性不大。但在后面的實(shí)驗(yàn)里，他們一條條地調(diào)整，最終結(jié)果真的比以前的文章提高了將近10個(gè)點(diǎn)。然后，他們開(kāi)始寫(xiě)paper、投頂會(huì)。

一開(kāi)始，他們將文章投到CVPR，結(jié)果反饋是兩個(gè)reviewer reject，一個(gè)reviewer accept。后來(lái)經(jīng)過(guò)Rebuttal，變成2、3、4，一個(gè)分?jǐn)?shù)變成了borderline，但最后還是被拒了。這讓方浩樹(shù)覺(jué)得很失落。

“不過(guò)盧老師當(dāng)時(shí)看的比較有遠(yuǎn)見(jiàn)。他說(shuō)我們要先把代碼都開(kāi)源，讓大家用起來(lái)?！?/span>當(dāng)時(shí)，開(kāi)源代碼AlphaPose人體姿態(tài)庫(kù)在GitHub獲得了超過(guò)3k star（目前已獲得4.7k），排名達(dá)到前萬(wàn)分之一。

之后便迎來(lái)了ICCV。由于第一次投稿被拒，方浩樹(shù)與隊(duì)友便思考，會(huì)不會(huì)是論文寫(xiě)作的英語(yǔ)表達(dá)不夠好。為此，方浩樹(shù)還在學(xué)校的路上“抓”了一個(gè)母語(yǔ)為英語(yǔ)的外國(guó)人，把他請(qǐng)到圖書(shū)館一起改論文，從頭到尾過(guò)一遍。

最后，這篇名為《RMPE: Regional Multi-person Pose Estimation》的論文被 ICCV 2017 接收。論文提出多人姿態(tài)估計(jì)的兩步法RMPE框架，著重解決在實(shí)際應(yīng)用中人體檢測(cè)不準(zhǔn)確的情況下的姿態(tài)估計(jì)問(wèn)題，在精度上比 ECCV 2016的圖優(yōu)化法高10mAP，在速度上快了600倍。

論文鏈接：https://arxiv.org/pdf/1612.00137.pdf

AAAI 2018

完成第一篇頂會(huì)一作后，方浩樹(shù)在盧策吾的指導(dǎo)下就人類(lèi)行為理解方向進(jìn)行新的探索。當(dāng)時(shí)，方浩樹(shù)覺(jué)得姿態(tài)和部位分割可以相互促進(jìn)，但實(shí)際上，pose和parsing在本質(zhì)上便不同：”pose需要忽略很多部位信息和像素級(jí)信息，只關(guān)注關(guān)鍵點(diǎn)；但是parsing正好相反，能夠捕捉到每個(gè)像素的信息?！?/span>

迫不得已，研究停滯半年之久，直到2017年暑假，方浩樹(shù)加入U(xiǎn)CLA的VCLA研究中心進(jìn)行研究實(shí)習(xí)，師從朱松純。

UCLA的暑研機(jī)會(huì)，也是得益于第一篇頂會(huì)論文：當(dāng)時(shí)，第一篇論文開(kāi)源后，一位在UCLA就讀的博士后用到了論文中的代碼，覺(jué)得很不錯(cuò)，于是便將方浩樹(shù)推薦到朱松純門(mén)下參加暑期實(shí)習(xí)。

在UCLA實(shí)習(xí)期間，方浩樹(shù)學(xué)到圖模型和圖像語(yǔ)法的知識(shí)，并將語(yǔ)法模型和神經(jīng)網(wǎng)絡(luò)結(jié)合起來(lái)。論文把人體三維模型看作語(yǔ)法，然后用它來(lái)幫助神經(jīng)網(wǎng)絡(luò)預(yù)測(cè)三維骨架。工作用到三個(gè)語(yǔ)法：人的姿態(tài)對(duì)稱(chēng)語(yǔ)法，運(yùn)動(dòng)學(xué)的語(yǔ)法，以及人的樹(shù)狀結(jié)構(gòu)語(yǔ)法。最終，文章《Learning pose grammar to encode human body configuration for 3d pose estimation》被 AAAI 2018 接收為Oral Paper。

論文鏈接：https://arxiv.org/pdf/1710.06513.pdf

CVPR 2018

在接觸新方向的過(guò)程中，方浩樹(shù)偶然讀到陳鑫磊的某篇論文，文中提到通過(guò)聚類(lèi)來(lái)做分割。這啟發(fā)了方浩樹(shù)：為何不通過(guò)pose來(lái)做聚類(lèi)，通過(guò)聚類(lèi)來(lái)幫助parsing呢？這個(gè)思路在試驗(yàn)中取得了極大進(jìn)展。

經(jīng)過(guò)三個(gè)多月的試驗(yàn)，論文初稿已成型。戴宇榮在改完論文摘要后，又提出：利用pose信息從數(shù)據(jù)庫(kù)里遷移已有的標(biāo)注數(shù)據(jù)，來(lái)達(dá)到知識(shí)遷移的目的。這又給了方浩樹(shù)創(chuàng)新算法方式的新靈感。

經(jīng)過(guò)新的試驗(yàn)，方浩樹(shù)與成員完成了論文《Weakly and Semi Supervised Human Body Part Parsing via Pose-Guided Knowledge Transfer》。論文提出了一種新的半監(jiān)督學(xué)習(xí)范式，通過(guò)人體的形態(tài)學(xué)相似性，利用大量易獲得的標(biāo)簽從少量的樣本中遷移標(biāo)注數(shù)據(jù)。這篇工作被CVPR 2018接收為“Spotlight Paper”。

論文鏈接：https://arxiv.org/pdf/1805.04310.pdf

ECCV 2018

在人類(lèi)行為識(shí)別的研究課題上，方浩樹(shù)與團(tuán)隊(duì)成員繼續(xù)深攻，提出在人與物體交互（HOI）識(shí)別中，人類(lèi)通常是通過(guò)使用身體的某個(gè)部位與物體進(jìn)行交互。

他們?cè)谡撐摹禤airwise Body-Part Attention for Recognizing Human-Object Interactions》中提出“成對(duì)身體部位注意力機(jī)制”，在模型中引入基于注意力的特征選擇方法與可以捕獲身體部位之間成對(duì)相關(guān)性的特征表示方案。

這篇文章將人與物體交互時(shí)，人體各部位之間的協(xié)同關(guān)系給挖掘出來(lái)，把人的肢體跟肢體間的高階關(guān)系進(jìn)行一個(gè)顯式建模。與HICO數(shù)據(jù)集上的結(jié)果相比，該論文實(shí)現(xiàn)了 10% 的性能改進(jìn)（36.1 mAP→39.9 mAP）。文章被ECCV 2018接收。

論文地址：https://openaccess.thecvf.com/content_ECCV_2018/papers/Haoshu_Fang_Pairwise_Body-Part_Attention_ECCV_2018_paper.pdf

連續(xù)發(fā)表四篇頂會(huì)一作后，2018年，方浩樹(shù)不僅拿到包括UCLA朱松純教授在內(nèi)的多個(gè)北美知名實(shí)驗(yàn)室的博士生offer，還被新華社列為國(guó)內(nèi)第四代人工智能研究代表進(jìn)行了專(zhuān)訪(fǎng)。

但方浩樹(shù)經(jīng)過(guò)綜合考慮后，還是決定在國(guó)內(nèi)直博，繼續(xù)留在盧策吾的團(tuán)隊(duì)。

3?放棄留美

在要不要去美國(guó)留學(xué)這件事上，方浩樹(shù)也有自己的思考。在美國(guó)實(shí)習(xí)期間，異國(guó)始終有種疏離感，“呆久了也沒(méi)有歸屬感”，同時(shí)，他對(duì)中國(guó)，上海，交大的實(shí)驗(yàn)室的未來(lái)十分樂(lè)觀。多重因素，最終讓他決定留在國(guó)內(nèi)讀博。

不過(guò)，雖然沒(méi)有來(lái)到朱松純老師門(mén)下繼續(xù)深造，他的精神卻也一直影響著方浩樹(shù)。

令方浩樹(shù)印象深刻的是，在UCLA進(jìn)行暑期實(shí)習(xí)期間，每次參加組會(huì)，朱松純都會(huì)與學(xué)生強(qiáng)調(diào)，現(xiàn)在是AI大一統(tǒng)的發(fā)展階段，不要局限在計(jì)算機(jī)視覺(jué)的小領(lǐng)域，而是要把學(xué)到的知識(shí)應(yīng)用到大的AI領(lǐng)域。

除了想法遠(yuǎn)大而全面，方浩樹(shù)也時(shí)常想起，有一次，朱松純請(qǐng)幾位暑期實(shí)習(xí)生吃飯，席間分享了他在中科大讀本科時(shí)如何想到做AI、如何一步步到美國(guó)從事AI研究的經(jīng)歷，并提出自己的疑惑：“為什么這么多優(yōu)秀的中國(guó)學(xué)生來(lái)到國(guó)外學(xué)習(xí)，后來(lái)學(xué)術(shù)界慢慢就聽(tīng)不見(jiàn)他們的聲音了？”朱松純覺(jué)得這很可惜。他希望實(shí)習(xí)生能堅(jiān)持對(duì)學(xué)術(shù)的追求與探索。

雖然暑期實(shí)習(xí)僅持續(xù)了三個(gè)月，但這席談話(huà)一直激勵(lì)方浩樹(shù)，要像朱松純一樣不斷地攀登學(xué)術(shù)的高峰，用創(chuàng)新去突破學(xué)術(shù)的上限。

而盧策吾，雖然資歷較輕，但也有自己的學(xué)術(shù)藍(lán)圖。每次做研究前，盧策吾都會(huì)先與學(xué)生分享一個(gè)大的藍(lán)圖，指出哪個(gè)板塊需要做哪些事情。

“盧策吾老師平時(shí)經(jīng)常會(huì)和我們聊一些遠(yuǎn)大的研究目標(biāo)，不局限于技術(shù)問(wèn)題，還有人生感悟、未來(lái)藍(lán)圖、學(xué)科前景等。我感覺(jué)他就像一個(gè)智者。無(wú)論問(wèn)他什么問(wèn)題，他都會(huì)有自己的思考，會(huì)給你娓娓道來(lái)?！狈胶茦?shù)說(shuō)道。

圖注：盧策吾（左）與方浩樹(shù)（右）

2019年，方浩樹(shù)選擇直博到吳文俊人工智能博士班，并開(kāi)始在盧策吾的MVIG實(shí)驗(yàn)室進(jìn)行機(jī)器人研究。

從人類(lèi)行為理解到機(jī)器人，跨度非常大。但實(shí)際上，方浩樹(shù)最早便是對(duì)機(jī)器人感興趣，只是到了攻讀博士階段，才有了成熟的研究時(shí)機(jī)。此外，方浩樹(shù)也受到了導(dǎo)師盧策吾的影響：

“盧老師經(jīng)常對(duì)我說(shuō)，我們做研究不應(yīng)該是為了個(gè)人的利益得失，而是應(yīng)該從整個(gè)社會(huì)出發(fā)，從全人類(lèi)的利益出發(fā)去從事科研。”

讀博后，除了人類(lèi)行為理解，方浩樹(shù)還從事機(jī)器人物體研究。他與團(tuán)隊(duì)成員提出 GraspNet-1Billion 標(biāo)準(zhǔn)數(shù)據(jù)集。該數(shù)據(jù)集規(guī)模大，標(biāo)注豐富，并帶有統(tǒng)一評(píng)測(cè)機(jī)器人抓取姿態(tài)的框架，著重于復(fù)雜場(chǎng)景的抓取姿態(tài)檢測(cè)，既可以提供大量真實(shí)的抓取數(shù)據(jù)，又能提供真實(shí)的視覺(jué)感知。

方浩樹(shù)認(rèn)為，與主要做信息抽取的圖像處理或語(yǔ)音識(shí)別相比，機(jī)器人是主動(dòng)與世界交互，此時(shí) AI 有“主觀能動(dòng)性”，能夠主動(dòng)服務(wù)人類(lèi)，同時(shí)，交互的過(guò)程也能為理解世界帶來(lái)更多的信息量。因此，方浩樹(shù)覺(jué)得，“通過(guò)機(jī)器人，我們更能接觸到AI的本質(zhì)?！?/span>

接下來(lái)，方浩樹(shù)將專(zhuān)注于研究機(jī)器人物體操作，讓機(jī)器人能夠通過(guò)操作，在一個(gè)特定的環(huán)境里完成某項(xiàng)任務(wù)。他希望機(jī)器人可以像人一樣自主學(xué)習(xí)。比如，看一段人做飯的視頻，或者觀察人類(lèi)做飯，就能將類(lèi)似的操作復(fù)現(xiàn)，自己學(xué)會(huì)做飯。

這個(gè)過(guò)程包含感知與控制，前者涉及到姿態(tài)估計(jì)、語(yǔ)義分割和三維視覺(jué)等知識(shí)，后者則包含基礎(chǔ)的抓取知識(shí)等。因此，方浩樹(shù)計(jì)劃逐漸將人類(lèi)行為理解與機(jī)器人物體抓取的知識(shí)結(jié)合起來(lái)。但如何表征知識(shí)，將知識(shí)引擎和推理系統(tǒng)應(yīng)用到機(jī)器人領(lǐng)域，還是一個(gè)困難且充滿(mǎn)挑戰(zhàn)的基礎(chǔ)問(wèn)題。

我們無(wú)法知道方浩樹(shù)選擇留美讀博后的學(xué)術(shù)生涯是什么模樣。但在盧策吾的團(tuán)隊(duì)中，方浩樹(shù)仍繼續(xù)突破自我，并攬獲多項(xiàng)大獎(jiǎng)。

比如，方浩樹(shù)入選 AI 青年科學(xué)家聯(lián)盟·梧桐匯發(fā)起的「A 班計(jì)劃」，獲得2019 年度CCF-CV“中科視拓Seeta學(xué)術(shù)新銳獎(jiǎng)”（獲獎(jiǎng)學(xué)生共3名，其余2名分別是來(lái)自清華大學(xué)的饒永銘與易冉），2019年百度獎(jiǎng)學(xué)金（每年僅評(píng)選10人，吳翼、吳佳俊等人也曾獲得該獎(jiǎng)項(xiàng)）。

圖注：2019年，方浩樹(shù)獲得百度獎(jiǎng)學(xué)金

2020年，方浩樹(shù)又獲得了微軟學(xué)者獎(jiǎng)學(xué)金，入選字節(jié)獎(jiǎng)學(xué)計(jì)劃。

從本科到博士，方浩樹(shù)的科研方向都十分清晰。除了歸功于“歷史的進(jìn)程”，方浩樹(shù)認(rèn)為，自己的運(yùn)氣也很好，遇到的導(dǎo)師對(duì)他的幫助都很大，成長(zhǎng)環(huán)境也是自由與包容。

雖然本科期間因?yàn)閷?zhuān)注于自我探索，沒(méi)有專(zhuān)心學(xué)習(xí)，沒(méi)有獲得過(guò)學(xué)業(yè)獎(jiǎng)學(xué)金，但方浩樹(shù)按照自己的方式獲得了現(xiàn)在的成就：在找到自己所感興趣的方向后，他幾乎每天都在科研上投入大約10個(gè)小時(shí)，科研也成了生活的重心。

但方浩樹(shù)對(duì)自己目前的生活很知足：“我一般不怎么出去玩，我本身也不喜歡打游戲之類(lèi)。而且對(duì)我來(lái)說(shuō)，搞科研是一件很快樂(lè)的事情。”

4?結(jié)語(yǔ)

目前，方浩樹(shù)是一名二年級(jí)博士在讀生，已發(fā)表頂會(huì)論文10篇。

在方浩樹(shù)的影響下，妹妹方曉霖也走上了AI科研之路。目前，方曉霖在MIT的CSAIL實(shí)驗(yàn)室攻讀博士學(xué)位，師從Leslie Kaelbling與Tomas Lozano-Perez教授，主要研究?jī)?nèi)容為機(jī)器人與計(jì)算機(jī)視覺(jué)。

圖注：妹妹方曉霖

談到父母對(duì)子女的培養(yǎng)方式，方浩樹(shù)認(rèn)為，可以概括為“有期望，但沒(méi)有約束”。

除了做科研，方浩樹(shù)最喜歡的就是做菜。在他看來(lái)，做菜與科研都是創(chuàng)造的過(guò)程，而方浩樹(shù)很喜歡創(chuàng)造帶來(lái)的快樂(lè)：

“我不太喜歡做重復(fù)的事情。我希望不斷嘗試新的方法與技巧，做出新的成果來(lái)?！?/span>

推薦閱讀

我的哥大計(jì)算機(jī)視覺(jué)讀博五年總結(jié)
我的第一篇學(xué)術(shù)論文誕生的故事
“你的論文充斥著垃圾，寫(xiě)作一塌糊涂，我讀著讀著都想撕了它”

極市&英特爾 OpenVINO?中級(jí)認(rèn)證，代碼均已內(nèi)置，助力快速完成~

添加極市小助手微信（ID : cvmart2），備注：姓名-學(xué)校/公司-研究方向-城市（如：小極-北大-目標(biāo)檢測(cè)-深圳），即可申請(qǐng)加入極市目標(biāo)檢測(cè)/圖像分割/工業(yè)檢測(cè)/人臉/醫(yī)學(xué)影像/3D/SLAM/自動(dòng)駕駛/超分辨率/姿態(tài)估計(jì)/ReID/GAN/圖像增強(qiáng)/OCR/視頻理解等技術(shù)交流群：每月大咖直播分享、真實(shí)項(xiàng)目需求對(duì)接、求職內(nèi)推、算法競(jìng)賽、干貨資訊匯總、與?10000+來(lái)自港科大、北大、清華、中科院、CMU、騰訊、百度等名校名企視覺(jué)開(kāi)發(fā)者互動(dòng)交流~

△長(zhǎng)按添加極市小助手

△長(zhǎng)按關(guān)注極市平臺(tái)，獲取最新CV干貨

覺(jué)得有用麻煩給個(gè)在看啦~??

方浩樹(shù)：本科Gap兩年，確定了未來(lái)的方向，還發(fā)表了四篇頂會(huì)一作

1?學(xué)霸不走尋常路

2?休學(xué)兩年：出了四篇頂會(huì)一作

3?放棄留美

4?結(jié)語(yǔ)

我的哥大計(jì)算機(jī)視覺(jué)讀博五年總結(jié)

我的第一篇學(xué)術(shù)論文誕生的故事

“你的論文充斥著垃圾，寫(xiě)作一塌糊涂，我讀著讀著都想撕了它”

方浩樹(shù)：本科Gap兩年，確定了未來(lái)的方向，還發(fā)表了四篇頂會(huì)一作

“你的論文充斥著垃圾，寫(xiě)作一塌糊涂，我讀著讀著都想撕了它”