曠視科技創(chuàng)始團(tuán)隊(duì)(曠視科技創(chuàng)始人 三人)

郭一璞假裝來自慕尼黑

量子比特報(bào)告|公眾號(hào)QbitAI即將滿7歲的曠視科技最近給自己送了一份生日禮物。他在四項(xiàng)頂級(jí)計(jì)算機(jī)視覺比賽中獲得冠軍：MSCOCO'sDetection（并列）、Panoptic、Keypoints和MapillaryPanoptic。繼去年奪得三冠一亞軍后，已連續(xù)兩年成為此項(xiàng)賽事全球表現(xiàn)最好的企業(yè)。

比賽結(jié)果出爐后，量子位采訪了曠視科技參加COCO比賽的團(tuán)隊(duì)。

今年COCO很艱難

今年參賽隊(duì)伍除曠視科技首席科學(xué)家、研究院院長孫健外，由去年冠軍領(lǐng)隊(duì)、曠視科技研究院檢測組組長余剛博士領(lǐng)銜，十多個(gè)同學(xué)。有些是實(shí)習(xí)生。

從5月中旬比賽開始到8月結(jié)束，曠視COCO團(tuán)隊(duì)用了三個(gè)月的時(shí)間確定團(tuán)隊(duì)分工，確定方向，并逐步優(yōu)化，再次奪得冠軍。

不過，在談起這四項(xiàng)冠軍的成績時(shí)，于剛博士似乎并沒有顯得特別興奮。他用兩個(gè)字來評(píng)價(jià)今年的比賽：難。

團(tuán)隊(duì)成員于長前，博士華中科技大學(xué)的學(xué)生說，難度很大，有時(shí)晚上十點(diǎn)就睡覺，兩三點(diǎn)就得下床再做一波實(shí)驗(yàn)。

不僅困難重重，曠視的遺憾之一就是算法沒有達(dá)到內(nèi)部設(shè)定的量化目標(biāo)。

這個(gè)場景很熟悉。這讓我想起了一個(gè)優(yōu)等生的故事，他聲稱自己考試不及格，但結(jié)果卻是年級(jí)第一。

去年奪冠后，曠視科技的目標(biāo)定得太高，在實(shí)際比賽中的表現(xiàn)并沒有達(dá)到預(yù)期。曠視COCO團(tuán)隊(duì)實(shí)習(xí)生、北航大二學(xué)生尹斌一告訴量子位，他參與的項(xiàng)目中，團(tuán)隊(duì)拆分驗(yàn)證集測試，得分超過80分，但實(shí)際挑戰(zhàn)集僅得分76分，讓大家都得努力把分?jǐn)?shù)提高0.1分、0.1分。

至于出現(xiàn)這樣困難的原因，一方面，COCO“已經(jīng)動(dòng)不了了”，已經(jīng)達(dá)到了飽和狀態(tài)；另一方面，算法方面還有很長的路要走，需要更極限的創(chuàng)新來突破現(xiàn)有的技術(shù)水平。

慶幸的是，雖然困難重重，但這并不妨礙他們在四項(xiàng)賽事中奪得冠軍。

自己的數(shù)據(jù)集

由于數(shù)據(jù)難度和標(biāo)注錯(cuò)誤，COCO數(shù)據(jù)集已經(jīng)變得越來越飽和。曠視內(nèi)部開始研究檢測任務(wù)的后續(xù)方向，建立了兩個(gè)內(nèi)部數(shù)據(jù)集。

于剛博士介紹了曠視科技的兩個(gè)COCO相關(guān)數(shù)據(jù)集：

第一個(gè)是CrowdHuman，它包含大量多人重疊的照片，專門用于檢測COCO比賽中的每個(gè)人。

該數(shù)據(jù)集已開源，需要的朋友可以獲取鏈接：

第二組數(shù)據(jù)仍在收集中。曠視的內(nèi)部名稱為COCO++，源于COCO“指鹿為馬”的現(xiàn)象。因?yàn)镃OCO只有80個(gè)標(biāo)簽，所以很難覆蓋世界上的所有東西，所以比如當(dāng)它看到一只鹿時(shí)，因?yàn)闆]有鹿的標(biāo)簽，所以它必須被標(biāo)簽為馬。因此，曠視科技正在準(zhǔn)備創(chuàng)建一個(gè)像COCO++這樣的數(shù)據(jù)集，希望能夠覆蓋世界上99%的物體，減少出現(xiàn)此類錯(cuò)誤的幾率。

COCO：中國隊(duì)對(duì)戰(zhàn)中國隊(duì)？

COCO的另一個(gè)話題是：包括曠視、商湯、北京郵電、滴滴等，冠軍都是中國團(tuán)隊(duì)，沒有谷歌、Facebook等美國大公司。

于剛博士覺得，這與國內(nèi)AI發(fā)展氛圍以及創(chuàng)業(yè)公司的特點(diǎn)密不可分。

一方面，國內(nèi)人工智能熱潮正處于風(fēng)口浪尖，發(fā)展氛圍較好，資源人力投入充足，政策扶持力度大。國內(nèi)對(duì)于人工智能研究的熱情空前高漲?！皬娜瞬艥摿砜矗袊粫?huì)比歐美差。我們需要更好的環(huán)境、更好的團(tuán)隊(duì)氛圍來釋放人才的潛力，這就是曠視技術(shù)研究院一直在做的事情?！?/p>

另一方面受益于國內(nèi)初創(chuàng)企業(yè)的資源傾斜。大公司的業(yè)務(wù)范圍很廣，涉及的東西也很多。COCO競賽等項(xiàng)目，單點(diǎn)投資不夠集中；而初創(chuàng)公司單點(diǎn)投資則較為集中。一旦決定參加COCO，團(tuán)隊(duì)就會(huì)齊心協(xié)力，比賽過程會(huì)更加高效，結(jié)果也會(huì)自然而然。會(huì)比大公司好。

得勝武器：人才培養(yǎng)

COCO這樣的比賽最重要的就是人才。

于剛博士也這么認(rèn)為。他將曠視科技今年的四次冠軍歸功于人才的培養(yǎng)。

一方面，曠視不斷在內(nèi)部培養(yǎng)新的人才，不斷釋放人才來支撐比賽陣容；

另一方面，曠視科技一直有著充足的技術(shù)積累。每天瀏覽arXiv分享高質(zhì)量論文是技術(shù)團(tuán)隊(duì)內(nèi)部的必修課，需要分析提煉論文中值得學(xué)習(xí)的內(nèi)容，而不是簡單地照搬別人的開源成果，讓團(tuán)隊(duì)作為整體也有所改善。

換句話說，COCO競賽對(duì)曠視科技的價(jià)值在于讓新人升級(jí)。

雖然去年的獲獎(jiǎng)神器Brain++已經(jīng)在內(nèi)部使用，但COCO的結(jié)果還沒有那么接近商業(yè)落地。因此，參與COCO的團(tuán)隊(duì)也以實(shí)習(xí)生為主。就像騰訊互娛新入職的新員工都會(huì)玩自己的小游戲一樣，比賽對(duì)曠視來說更重要的是人才培養(yǎng)，也是曠視人才戰(zhàn)略的一部分。

因此，在COCO比賽中，他們采取了以老帶新的培養(yǎng)隊(duì)伍的方式。經(jīng)驗(yàn)豐富的研究人員指導(dǎo)年輕研究人員并傳承他們的經(jīng)驗(yàn)；青少年也可以在比賽中獲得自己的經(jīng)驗(yàn)和認(rèn)識(shí)，提高知識(shí)和認(rèn)識(shí)，產(chǎn)出新的成果。

尹賓一同學(xué)對(duì)此深有體會(huì)。

上學(xué)時(shí)，尹彬一飽受學(xué)校計(jì)算、數(shù)據(jù)集等資源限制，渴望有一個(gè)更好的平臺(tái)。

COCO成立前兩個(gè)月，當(dāng)時(shí)還是北航研究生一年級(jí)的尹斌一剛剛來到曠視實(shí)習(xí)。當(dāng)時(shí)，他剛剛開始深度學(xué)習(xí)和計(jì)算機(jī)視覺領(lǐng)域的學(xué)術(shù)研究生涯。雖然他擅長編碼，但他也有本科學(xué)歷。在ACM地區(qū)比賽中獲得銀牌，但對(duì)算法一竅不通。

隨著曠視團(tuán)隊(duì)參與COCO，尹斌一逐漸了解了數(shù)據(jù)、模型、測試等流程，從頭到尾理解了整體方法邏輯?，F(xiàn)在，他已經(jīng)能夠獨(dú)立運(yùn)行程序、訓(xùn)練模型，完成整個(gè)過程。

另一位團(tuán)隊(duì)成員余長謙已經(jīng)在曠視實(shí)習(xí)一年多了。開學(xué)季的頭幾天，他剛剛開始在華中科技大學(xué)的博士生涯。

在COCO的工作室里，他不僅見到了心儀已久的大師RossGirshick和何愷明，還上臺(tái)演講。他被主辦方稱贊具有比人類標(biāo)準(zhǔn)更好的地面實(shí)況結(jié)果，并得到了來自世界各地參賽者的歡呼。

RossGirshick為曠視團(tuán)隊(duì)頒獎(jiǎng)

研究落地雙管齊下

在曠視內(nèi)部，研究和實(shí)施是同步進(jìn)行的。

實(shí)現(xiàn)是實(shí)用的，比如在手機(jī)上運(yùn)行AI程序，受限于手機(jī)的硬件水平，模型更小，對(duì)用戶體驗(yàn)的追求更高；

研究是關(guān)于探索物理極限，你可以使用盡可能大的模型和大量的硬件。

參加比賽是為了以舊帶新，盡快培養(yǎng)更多新秀做出產(chǎn)品；

專攻產(chǎn)品的人也必須參與研究，放眼長遠(yuǎn)，提高判斷能力，培養(yǎng)自己對(duì)技術(shù)方向的想法，而不僅僅局限于眼前的未來，這樣才能尋求更高的成長天花板。他們自己。

這是于剛博士所共有的人才觀。

這也體現(xiàn)在COCO團(tuán)隊(duì)的組建上。

曠視在組建COCO團(tuán)隊(duì)時(shí)，首先根據(jù)新人的興趣、愛好和特長進(jìn)行分組。如果人手不夠，他們就會(huì)和其他團(tuán)隊(duì)協(xié)調(diào)。未來，COCO的成果還將體現(xiàn)在商業(yè)落地上。去年的獲獎(jiǎng)秘方Brain++已經(jīng)在內(nèi)部使用。

能夠利用大量的商業(yè)資源來推動(dòng)研究，同時(shí)研究成果能夠快速反饋到實(shí)際應(yīng)用中。這確實(shí)是計(jì)算機(jī)科學(xué)家最好的時(shí)代。

實(shí)習(xí)生：博士，碩士，甚至高中生

曠視科技COCO團(tuán)隊(duì)成員余長謙、尹賓一均為實(shí)習(xí)生。

尹斌一之前也有過在其他科技公司實(shí)習(xí)的經(jīng)歷，但不是在研究部門，而是在實(shí)際的商業(yè)實(shí)施部門。他的主要工作是寫業(yè)務(wù)代碼，沒有機(jī)會(huì)做研究?！鞍岽u”的意思更強(qiáng)烈了。

在曠視，他可以享受充足的研究資源，隨時(shí)隨地請教專家，并在前輩的推動(dòng)下快速成長。這是他在其他地方無法獲得的巨大收獲。

時(shí)至今日，他已經(jīng)成為COCO冠軍隊(duì)的一員，在學(xué)校依然保持低調(diào)。他還沒有告訴他的導(dǎo)師和同學(xué)他在校外的成就。

于長謙已經(jīng)碩士畢業(yè)，對(duì)科學(xué)研究有了更深的認(rèn)識(shí)。他表示，曠視技術(shù)研究院滿足了他對(duì)理想研究院的所有期望：團(tuán)隊(duì)氛圍很好，周圍有很多優(yōu)秀的人，工作很自由。

而且，像曠視研究院這樣的企業(yè)研究院的方向與攻讀碩士、博士學(xué)位并不沖突：都是為了獲得優(yōu)秀的研究成果并公開發(fā)表，而且企業(yè)研究院也擁有更好的硬件和數(shù)據(jù)。資源。

前兩位是碩士和博士生，但毫不夸張地說，曠視目前在高中就讀的實(shí)習(xí)生不下十人。

第一個(gè)高中實(shí)習(xí)生的名字叫范浩強(qiáng)。他是中國人民大學(xué)附屬中學(xué)的一名高三學(xué)生。由于在信息學(xué)奧林匹克競賽中取得優(yōu)異成績，他被推薦到清華大學(xué)，當(dāng)時(shí)他的信息學(xué)教練是曠視科技CTO唐文斌。

唐文斌很欣賞范浩強(qiáng)的才華，向他發(fā)出了邀請：

“我要開一家公司，叫曠視科技，你要來嗎？”

就這樣，高中生范浩強(qiáng)成為曠視科技十大員工之一。清華大學(xué)畢業(yè)后，他終于成為一名全職員工。

有了范浩強(qiáng)，就會(huì)有更多的高中生來曠視實(shí)習(xí)，就像學(xué)長帶學(xué)弟一樣（可惜我還沒聽說有學(xué)弟學(xué)妹）。

于剛博士介紹，來到曠視實(shí)習(xí)的高中生來自全國各地。他們不需要參加高考，或者已經(jīng)參加過比賽并被推薦。高三與其無所事事，不如來學(xué)點(diǎn)東西；或者準(zhǔn)備申請國外本科課程，正在實(shí)習(xí)。如果你有研究成果，會(huì)更容易獲得國外大學(xué)的offer。

留在曠視的實(shí)習(xí)生轉(zhuǎn)化率非常高。如果他們繼續(xù)學(xué)習(xí)，大多數(shù)人都能進(jìn)入好學(xué)校。到目前為止，已有三名實(shí)習(xí)生前往斯坦福大學(xué)。

不過，雖然前述實(shí)習(xí)生均來自名校，但曠視科技并不只有名校學(xué)生。

于剛博士表示，主要是看候選人的閃光點(diǎn)，比如是否擅長編碼，是否有優(yōu)秀的學(xué)習(xí)新知識(shí)的能力。如果你有這些亮點(diǎn)，就值得培養(yǎng)。

OneMoreThing

于剛博士還透露，今年曠視冠軍模型將在遷移到TensorFlow后開源，預(yù)計(jì)在今年年底左右。

-超過-

歡迎大家關(guān)注我們的專欄：量子比特-知乎專欄

誠意招聘

Qubit正在招聘編輯/記者到北京中關(guān)村工作。我們期待有才華、有熱情的學(xué)子加入我們！相關(guān)詳情請?jiān)诹孔颖忍毓娞?hào)（QbitAI）對(duì)話界面回復(fù)“招聘”。

量子比特QbitAI·今日頭條簽約作者

追蹤AI技術(shù)和產(chǎn)品新進(jìn)展