【安防展覽網(wǎng) 訪談】編者按:“行人再識(shí)別(ReID)”可能成為繼人臉識(shí)別算法之后又一個(gè)“熱點(diǎn)”算法。(行人再識(shí)別又稱行人重識(shí)別)
隨著人臉識(shí)別技術(shù)在各場(chǎng)景的廣泛應(yīng)用,后者對(duì)人體特征和身份核準(zhǔn)的算法需求更為“理性”,對(duì)非人臉識(shí)別技術(shù)的剛性需求日益迫切。“行人再識(shí)別(ReID)”算法技術(shù)在這個(gè)時(shí)機(jī)點(diǎn)走進(jìn)了AI算法的時(shí)代視野。
當(dāng)前諸如曠視、依圖、商湯、云從等AI獨(dú)角獸企業(yè),剛剛將安防監(jiān)控調(diào)整為機(jī)器視覺(jué)的華為、視頻監(jiān)控巨頭???、大華等廠商都在各類學(xué)術(shù)期刊、科技媒體等渠道發(fā)表“行人ReID”相關(guān)技術(shù)論文和相關(guān)產(chǎn)品和應(yīng)用方案。
特別值得關(guān)注的是,2019年10月22日,由深圳市政府直接主辦的首屆全國(guó)人工智能大賽拉開(kāi)帷幕,大賽共兩大主題賽事,其中一項(xiàng)就是“行人重識(shí)別(ReID)”。
從相關(guān)學(xué)術(shù)論文資料了解,十年前清華大學(xué)媒體大數(shù)據(jù)認(rèn)知計(jì)算中心的科研團(tuán)隊(duì)就開(kāi)始了“行人再識(shí)別ReID”研究,2010年開(kāi)始獲得國(guó)家自然科學(xué)基金資助。多次獲得國(guó)內(nèi)優(yōu)秀論文和相關(guān)知識(shí)產(chǎn)權(quán)認(rèn)證。
適值清華大學(xué)109周年校慶之際,記者采訪了清華大學(xué)王生進(jìn)教授,走進(jìn)了 “行人再識(shí)別ReID”研究成果豐碩的研究室,走進(jìn)了清華人的AI算法世界。
組織創(chuàng)建了國(guó)內(nèi) “行人再識(shí)別(ReID)”測(cè)試數(shù)據(jù)集“Market-1501”———清華大學(xué)王生進(jìn)教授。
王生進(jìn)教授帶領(lǐng)的
清華AI團(tuán)隊(duì)的主要學(xué)術(shù)研究與成果
1985年,王生進(jìn)畢業(yè)于清華大學(xué)無(wú)線電電子學(xué)系,前往國(guó)外留學(xué)后,2003年回國(guó)到清華大學(xué)電子工程系從事人工智能、機(jī)器學(xué)習(xí)和圖像處理領(lǐng)域的科研和教學(xué)工作,先后參與了十多項(xiàng)國(guó)家縱向項(xiàng)目和數(shù)十項(xiàng)企業(yè)橫向項(xiàng)目的研究和開(kāi)發(fā)工作。
王生進(jìn)現(xiàn)任清華大學(xué)電子工程系博士導(dǎo)師,清華大學(xué)媒體大數(shù)據(jù)認(rèn)知計(jì)算研究中心主任,紫為云清華AI使能平臺(tái)科學(xué)家,北京信息科學(xué)與技術(shù)國(guó)家研究中心跨媒體智能創(chuàng)新團(tuán)隊(duì)負(fù)責(zé)人,危爆物品探測(cè)與掃描國(guó)家工程實(shí)驗(yàn)室副主任,中國(guó)圖像圖形學(xué)會(huì)視頻監(jiān)控與安全專委會(huì)主任。
他提出了基于深度網(wǎng)絡(luò)的特征空間正交優(yōu)化理論及深度特征學(xué)習(xí)方法,以解決深度特征冗余的問(wèn)題;
他*提出一種特征圖層配準(zhǔn)方法,有效解決了非剛體行人再識(shí)別中的特征配準(zhǔn)問(wèn)題;
他提出一種融合表觀與步態(tài)特征的基于選擇排序?qū)W習(xí)的行人再識(shí)別方法,有效利用時(shí)空信息融合提高了行人再識(shí)別性能;
他指導(dǎo)的博士生鄭良的博士論文獲得中國(guó)人工智能學(xué)會(huì)2017年優(yōu)秀博士論文,相關(guān)研究獲得了2018年模式識(shí)別學(xué)會(huì)ICPR2018論文獎(jiǎng)。
2019年10月,其主導(dǎo)研究的“跨視域行人再識(shí)別的特征學(xué)習(xí)理論與計(jì)算研究方法”還獲得“第九屆吳文俊人工智能科學(xué)技術(shù)自然科學(xué)二等獎(jiǎng)”,團(tuán)隊(duì)成員包括鄭良、田奇、李亞利、孫奕帆。
王生進(jìn)教授組織創(chuàng)建了國(guó)內(nèi)大型多鏡頭測(cè)試數(shù)據(jù)集和訓(xùn)練數(shù)據(jù)集Market-1501,所構(gòu)建和發(fā)表的該研究領(lǐng)域三個(gè)大型公開(kāi)數(shù)據(jù)集總下載量逾13600次,單篇論文谷歌學(xué)術(shù)引用超過(guò)1000次。
隨著行人再識(shí)別技術(shù)的不斷突破,跨視域攝像機(jī)行人目標(biāo)跟蹤的瓶頸問(wèn)題或能得以更好解決。
在2017年第十六屆中國(guó)公共安全博覽會(huì)(CPSE安博會(huì))政府管理論壇上,王生進(jìn)教授發(fā)表了題為《人像態(tài)視識(shí)別及其在智能視頻監(jiān)控中的應(yīng)用》的報(bào)告,提出了人像態(tài)視識(shí)別的概念,豐富了跨媒體智能理論框架,指導(dǎo)和推動(dòng)了跨媒體智能在公安警務(wù)、社會(huì)治理、AI醫(yī)療、智能制造、AI商業(yè)等領(lǐng)域的應(yīng)用。
王生進(jìn)教授獲得2019年第九屆吳文俊人工智能科學(xué)技術(shù)自然科學(xué)二等獎(jiǎng)
王生進(jìn)教授獲得2019年第九屆吳文俊人工智能科學(xué)技術(shù)自然科學(xué)二等獎(jiǎng)王生進(jìn)教授所帶領(lǐng)的清華AI算法團(tuán)隊(duì),致力于計(jì)算機(jī)視覺(jué)、智能視頻和生物特征識(shí)別理論、方法和技術(shù)的研究,在人臉識(shí)別和行人再識(shí)別ReID研究領(lǐng)域取得了多項(xiàng)前沿成果。
2006年、2008年,他們分別獲得了北京市科學(xué)技術(shù)獎(jiǎng)和國(guó)家科技進(jìn)步獎(jiǎng),參與制定了中華人民共和國(guó)公共安全行業(yè)標(biāo)準(zhǔn)《安全防范系統(tǒng)生物特征識(shí)別應(yīng)用術(shù)語(yǔ)》和國(guó)家標(biāo)準(zhǔn)《安全防范視頻監(jiān)控?cái)?shù)字視音頻編解碼技術(shù)要求(SVAC)》。
除人臉、行人再識(shí)別算法技術(shù)研究外,清華團(tuán)隊(duì)在車輛、場(chǎng)景與物體、掌紋生物特征識(shí)別,語(yǔ)音識(shí)別,文字識(shí)別,輔助駕駛,機(jī)器視覺(jué),工業(yè)智能等方面也有諸多的算法研究成果,建立了跨媒體的多維智能算法體系。
專訪實(shí)錄
記者:國(guó)內(nèi)這幾年出現(xiàn)的人工智能企業(yè),有一個(gè)相似的特點(diǎn):大多是從院校、實(shí)驗(yàn)室出來(lái)的學(xué)科帶頭人,他們?cè)诳蒲蟹矫娑甲龅搅耸澜缢剑谑袌?chǎng)實(shí)踐中都表現(xiàn)得差強(qiáng)人意。針對(duì)產(chǎn)業(yè)界與學(xué)術(shù)界的人工智能研究,作為清華AI科研人如何認(rèn)識(shí)和理解?
王生進(jìn)教授:學(xué)術(shù)研究側(cè)重理論,關(guān)注技術(shù)的前沿性探索,從研究中尋找并構(gòu)建相關(guān)的方向、方法與理論體系。產(chǎn)業(yè)研究側(cè)重應(yīng)用,依據(jù)相關(guān)技術(shù)理論實(shí)現(xiàn)產(chǎn)品化、應(yīng)用化落地的方法與流程體系,并且關(guān)注實(shí)現(xiàn)的成本。這兩種研究可理解成上下層的關(guān)系,也是各有所長(zhǎng),互為因果,相互促進(jìn)的關(guān)系。
對(duì)于做學(xué)術(shù)研究的人來(lái)說(shuō),大家的側(cè)重點(diǎn)是理論研究和技術(shù)研發(fā),所以在產(chǎn)品化、系統(tǒng)化、商業(yè)化方面,起初的關(guān)注度不會(huì)很強(qiáng),在實(shí)踐中邊學(xué)邊進(jìn)步,也算正常,流行說(shuō)法是新常態(tài)。
做產(chǎn)品和應(yīng)用系統(tǒng)研究的企業(yè)如果要持續(xù)發(fā)展,需要重視前沿理論和方法的支撐,需要投入一定的基礎(chǔ)研究,在關(guān)鍵技術(shù)突破的時(shí)候才能迅速抓住機(jī)會(huì)。
當(dāng)前,很多AI企業(yè)都是從院校實(shí)驗(yàn)室走向市場(chǎng)的,這是科技變革與社會(huì)進(jìn)步相結(jié)合的產(chǎn)物,他們當(dāng)前在市場(chǎng)中取得成就總體上還是很值得認(rèn)可的,推動(dòng)了AI技術(shù)的進(jìn)步,促進(jìn)了“智能+”產(chǎn)業(yè)的發(fā)展。
當(dāng)然,在發(fā)展過(guò)程中,會(huì)存在一些問(wèn)題或不足,剛開(kāi)始的進(jìn)展都很順利,自然會(huì)導(dǎo)致企業(yè)宣傳或市場(chǎng)行動(dòng)會(huì)“積極”些,使得大家的期望更高了些,就會(huì)給人有一種“差強(qiáng)人意”的感覺(jué)。
所以,在落地的環(huán)節(jié),我個(gè)人的認(rèn)識(shí)是“術(shù)業(yè)有專攻”,敬畏人性,尊重常識(shí),讓企業(yè)家或能夠成為企業(yè)家的人去做產(chǎn)業(yè)化。也正是因?yàn)檎J(rèn)識(shí)到這一點(diǎn),此前我也參與推動(dòng)了紫為云AI使能平臺(tái)。
記者:為什么要參與推動(dòng)紫為云AI使能平臺(tái)?為什么選擇這個(gè)時(shí)間點(diǎn)切入市場(chǎng)?近期獲得了什么成績(jī)?
王生進(jìn)教授:科學(xué)研究的目的,是為產(chǎn)業(yè)的發(fā)展服務(wù),也是為人類的美好生活服務(wù)。但科學(xué)理論的成果要與產(chǎn)業(yè)中的產(chǎn)品系統(tǒng)、應(yīng)用系統(tǒng)等研究結(jié)合在一起,才能實(shí)現(xiàn)它的重要價(jià)值。當(dāng)前國(guó)家大力推動(dòng)高等院??萍汲晒D(zhuǎn)化也正好印證了這一點(diǎn)。
紫為云·清華AI使能平臺(tái),就是讓AI領(lǐng)域的科學(xué)理論成果導(dǎo)入產(chǎn)品研發(fā)、應(yīng)用研發(fā)的平臺(tái),是推動(dòng)理論研究與產(chǎn)業(yè)落地上下層結(jié)合的使能者。
中國(guó)人工智能產(chǎn)業(yè)要取得大發(fā)展,終要靠應(yīng)用層的各類企業(yè)掌握相關(guān)的核心技術(shù),完成理論與應(yīng)用的結(jié)合,才能實(shí)現(xiàn)各類AI應(yīng)用的百花齊放效應(yīng)。
目前的現(xiàn)狀是人工智能產(chǎn)業(yè)鏈上應(yīng)用層的很多企業(yè)缺乏算法等核心技術(shù),這些企業(yè)對(duì)AI核心算法技術(shù)的強(qiáng)烈需要是紫為云AI使能平臺(tái)得以創(chuàng)建的前提。
2019年4月27日,紫為云*科學(xué)家王生進(jìn)宣布正式推動(dòng)紫為云AI使能平臺(tái)
作為清華人,肩負(fù)厚德載物校訓(xùn),如果能傾盡所學(xué)幫助企業(yè)打通AI算法技術(shù)瓶頸,構(gòu)建AI應(yīng)用創(chuàng)新的能力體系,實(shí)現(xiàn)各類企業(yè)在行業(yè)AI應(yīng)用創(chuàng)新的目標(biāo),進(jìn)而可以推動(dòng)中國(guó)AI應(yīng)用創(chuàng)新的全面發(fā)展,為國(guó)家“智能+”、新基建戰(zhàn)略的實(shí)現(xiàn)添磚加瓦。
這將是清華人做人工智能科研的大價(jià)值體現(xiàn),也是清華團(tuán)隊(duì)創(chuàng)建紫為云AI使能平臺(tái)的初衷。
近期,我們AI團(tuán)隊(duì)在廣東某社會(huì)治理項(xiàng)目中完成了日處理*人臉動(dòng)態(tài)聚類(含戴口罩人臉識(shí)別)的內(nèi)測(cè),取得了可圈可點(diǎn)的成績(jī)。
記者:視頻應(yīng)用從初關(guān)注視頻監(jiān)控圖像的清晰度,發(fā)展到人、車等AI識(shí)別,再到ReID等技術(shù),談?wù)勎磥?lái)AI產(chǎn)業(yè)(技術(shù))的變化趨勢(shì)?
王生進(jìn)教授:從圖像的角度,視頻監(jiān)控的圖像清晰度已發(fā)展到一個(gè)新階段,基于高清圖像通過(guò)AI算法技術(shù)做圖像識(shí)別,數(shù)據(jù)的智能處理,提取與應(yīng)用是技術(shù)發(fā)展的新維度,ReID等技術(shù)則是這個(gè)維度上的新分支。
例如,清華團(tuán)隊(duì)針對(duì)行人再識(shí)別研究領(lǐng)域中缺少符合實(shí)際場(chǎng)景需求的數(shù)據(jù)集的瓶頸問(wèn)題,組織構(gòu)建并發(fā)表了該領(lǐng)域大型多鏡頭測(cè)試數(shù)據(jù)集iLIDS-VID, Market-1501&MARS,成為該領(lǐng)域的典型標(biāo)準(zhǔn)測(cè)試數(shù)據(jù)集。
從安全的角度,
視頻監(jiān)控系統(tǒng)是各類用戶實(shí)現(xiàn)安全管理、效率管理、業(yè)務(wù)管理的技術(shù)保障基礎(chǔ)。同時(shí),安防系統(tǒng)自身也需要確保安全。
這種安全從初的硬件設(shè)備系統(tǒng)安全,軟件平臺(tái)系統(tǒng)安全,發(fā)展到系統(tǒng)的網(wǎng)絡(luò)安全。現(xiàn)在人工智能、大數(shù)據(jù)技術(shù)的逐步展開(kāi),對(duì)數(shù)據(jù)的
安全防護(hù)需求日益上升,尤其用戶對(duì)數(shù)據(jù)信用安全的需求將成為系統(tǒng)集成商的核心競(jìng)爭(zhēng)力之一。
從數(shù)據(jù)的角度,視頻圖像的數(shù)據(jù)化應(yīng)用,可以形成知識(shí)圖譜,可以協(xié)助用戶進(jìn)行決策推理,而隨著數(shù)據(jù)認(rèn)知能力的上升,將使系統(tǒng)具備一定能力的意識(shí)與靈感,這將促進(jìn)更多AI智慧應(yīng)用功能的實(shí)現(xiàn)。
記者:復(fù)盤(pán)當(dāng)前AI算法市場(chǎng)格局,為更好實(shí)現(xiàn)產(chǎn)品化并應(yīng)用落地,企業(yè)研發(fā)團(tuán)隊(duì)、市場(chǎng)團(tuán)隊(duì)?wèi)?yīng)該做些什么?
王生進(jìn)教授:基礎(chǔ)算法技術(shù)已經(jīng)有了很大的發(fā)展,目前更多在于推進(jìn)算法的落地應(yīng)用。
從分支發(fā)展看,各類算法團(tuán)隊(duì)在加強(qiáng)大數(shù)據(jù)量算法、小樣本算法、ReID等算法技術(shù)的研究,這是根據(jù)不同行業(yè)、不同場(chǎng)景的用戶需求,逐步進(jìn)行算法技術(shù)的細(xì)分研究。
這對(duì)算法團(tuán)隊(duì)數(shù)據(jù)量的積累,特定場(chǎng)景小樣本數(shù)據(jù)的研究能力,細(xì)節(jié)上的優(yōu)化能力等方面是一個(gè)考驗(yàn)。例如,清華團(tuán)隊(duì)圍繞特種人群的小樣本人臉識(shí)別研究成果已在廣州落地得到了應(yīng)用。
結(jié)合場(chǎng)景,不斷進(jìn)行技術(shù)創(chuàng)新。用戶場(chǎng)景下的數(shù)據(jù)往往是多維的(例如視頻、圖像、步態(tài)、行人、語(yǔ)音、文字等),這將考驗(yàn)團(tuán)隊(duì)跨媒體多維智能算法的研究能力,我之前在《人像態(tài)視識(shí)別及其在智能視頻監(jiān)控中的應(yīng)用》報(bào)告中提出的人像態(tài)視識(shí)別新概念,就屬于多維智能算法的應(yīng)用思路。
清華團(tuán)隊(duì)在跨媒體多維智能算法方面有著豐富的技術(shù)積累,不僅在人臉、行人、步態(tài)、車、場(chǎng)景與物體等方面的算法研究取得了諸多成果,還在掌紋
生物識(shí)別,語(yǔ)音識(shí)別,文字識(shí)別,輔助駕駛,機(jī)器視覺(jué),工業(yè)智能等方面有諸多的算法研究成果。
當(dāng)面向場(chǎng)景的智能機(jī)器人或智能交互應(yīng)用中AI算法不再單一被應(yīng)用,而是以“算法族”的模態(tài)被運(yùn)算,隨著場(chǎng)景應(yīng)用的復(fù)雜性,對(duì)于算法技術(shù)研究的要求會(huì)更多,其中的探索空間會(huì)更大。
這是研究的一個(gè)方向,也是未來(lái)應(yīng)用的方向。
需要指出的是,要實(shí)現(xiàn)從算法到應(yīng)用落地的過(guò)程,關(guān)鍵是人和“團(tuán)隊(duì)”。它需要一個(gè)能深度理解行業(yè)需要,客戶需求,并能有效推動(dòng)產(chǎn)業(yè)應(yīng)用落地的專業(yè)團(tuán)隊(duì),我們?cè)跇?gòu)建清華“紫為云?清華AI使能平臺(tái)”時(shí)就深刻認(rèn)識(shí)到了這一點(diǎn),認(rèn)識(shí)到“技術(shù)+市場(chǎng)+管理”的重要性。
“紫為云”的另一位聯(lián)合創(chuàng)始人是一位從事智能視頻監(jiān)控領(lǐng)域20年的業(yè)界資深人士,曾獲得過(guò)“40年改革開(kāi)放中國(guó)安防*人物獎(jiǎng)”,主要由他帶領(lǐng)團(tuán)隊(duì)來(lái)完成應(yīng)用落地的工作。
記者:新基建對(duì)AI應(yīng)用落地有著深遠(yuǎn)影響,AI企業(yè)在新基建中將擔(dān)當(dāng)重要角色,紫為云作為清華AI使能平臺(tái),如何看當(dāng)前的機(jī)遇與未來(lái)的挑戰(zhàn)。
王生進(jìn)教授:人工智能是一個(gè)系統(tǒng)工程,它的應(yīng)用領(lǐng)域特別多。
在2017年《新一代人工智能發(fā)展規(guī)劃》的政策基礎(chǔ)上,人工智能被列為國(guó)家新基建的重點(diǎn)工程推動(dòng),這意味著人工智能*,大規(guī)模應(yīng)用落地的時(shí)間點(diǎn)正式開(kāi)啟,各類AI企業(yè)將成為各種行業(yè)創(chuàng)新應(yīng)用的*,這對(duì)AI產(chǎn)業(yè)會(huì)形成一股巨大的推動(dòng)力,也會(huì)進(jìn)一步促進(jìn)AI算法技術(shù)的研究。
對(duì)紫為云來(lái)說(shuō),國(guó)家推動(dòng)新基建的人工智能、大數(shù)據(jù)中心、工業(yè)互聯(lián)網(wǎng)這三個(gè)關(guān)鍵點(diǎn),與我們AI使能平臺(tái)的核心技術(shù)優(yōu)勢(shì)契合,這將形成更大的成長(zhǎng)動(dòng)力。
國(guó)家在政策層面指出了產(chǎn)業(yè)和企業(yè)發(fā)展的方向,并為技術(shù)研發(fā)和應(yīng)用創(chuàng)新提供了有利的政策和資源環(huán)境,清華人更有信心在人工智能大發(fā)展的時(shí)代,把AI科研做好,把AI落地應(yīng)用推動(dòng)好,為企業(yè)AI使能,為產(chǎn)業(yè)AI使能。
記者:在偌大的視頻監(jiān)控AI算法圈層中,紫為云AI使能平臺(tái)在其中扮演什么角色?
王生進(jìn)教授:當(dāng)前AI市場(chǎng)的規(guī)模有很多種說(shuō)法,總體上規(guī)模還不到想象的那么大,未來(lái)的市場(chǎng)伴隨越來(lái)越多的新場(chǎng)景應(yīng)用涌現(xiàn),市場(chǎng)空間和規(guī)模還是很大。
雖然安防屬于AI應(yīng)用落地比較早的行業(yè),但AI在安防行業(yè)場(chǎng)景的應(yīng)用還是處于早期階段,主要還是重點(diǎn)部位的視頻結(jié)構(gòu)化,大規(guī)模的應(yīng)用還正在展開(kāi)。
從當(dāng)前正在制定的幾個(gè)公安部行業(yè)標(biāo)準(zhǔn)來(lái)看,AI的安防應(yīng)用還處于關(guān)鍵窗口期。
在這個(gè)階段,無(wú)論是一些AI獨(dú)角獸企業(yè),還是傳統(tǒng)的安防大型企業(yè),不論是BATH,或者是各種維度上基礎(chǔ)層、技術(shù)層、應(yīng)用層的AI企業(yè),每一家企業(yè)都有自己的優(yōu)勢(shì)和特長(zhǎng),各自都有自己專注的重點(diǎn)和方向。
大家都是AI產(chǎn)業(yè)長(zhǎng)跑跑道上的選手和伙伴,大家都在朝著AI為產(chǎn)業(yè)升級(jí)、為人類美好生活服務(wù)的愿景努力前行。
紫為云AI使能平臺(tái)也是這條長(zhǎng)跑跑道上的選手和伙伴之一,我們?cè)诋a(chǎn)業(yè)市場(chǎng)上,秉持開(kāi)源、使能的理念,更在乎能支持更多的企業(yè)具備AI能力,讓他們?cè)诟髯缘男袠I(yè)里推動(dòng)更多的AI產(chǎn)品和創(chuàng)新應(yīng)用。
在人工智能時(shí)代,讓AI技術(shù)“平民化”;讓AI技術(shù)更簡(jiǎn)單、更便捷和更安全;讓AI使能更多企業(yè)、讓AI使能更多產(chǎn)業(yè);把AI技術(shù)落到場(chǎng)景實(shí)處,為社會(huì)應(yīng)用服務(wù),讓人們的生活通過(guò)AI變得更加便捷和美好。
這是清華人的AI理想!