掌上青島/青網(wǎng)訊  9月9日，2020年阿里巴巴達摩院青橙獎獲獎名單公布，10位青年科學家經(jīng)過層層篩選獲得達摩院的1000萬元獎金。35歲的山東大學教授聶禮強，成為了今年“硬核10人”中的一員，主辦方給他的獲獎理由是：“賦予對話機器人對多模態(tài)場景感知、理解與推理的能力，從而讓人機交互更自然。聶禮強在發(fā)表獲獎感言時表示：“希望對話機器人能夠真正的會看、會聽、會想、會說，從而真正的逼近自然人。”

山東大學教授聶禮強

據(jù)了解，“達摩院青橙獎”（DAMO Academy Young Fellow） 是由阿里巴巴達摩院主辦的公益性評選活動，旨在發(fā)掘和支持對科技進步有關鍵推動作用的中國青年學者，目標對象是從事基礎科學、應用技術研究的優(yōu)秀青年工作者。阿里巴巴達摩院為每位獲獎人發(fā)放100萬人民幣獎金，并提供開放的數(shù)據(jù)資源和應用場景等全方位支持，助力其勇攀科學技術之巔。

 “我的博士跑完半馬才能畢業(yè)”

和很多人印象中的“教授”形象不同，來自山東大學的聶禮強，愛爬山、釣魚、跑步，被學生們稱作“鐵血教授”。聶禮強曾在新加坡國立大學讀博士，畢業(yè)后又從事過助理研究員、研究員，16年回到山東大學任教。“當時還算比較年輕的老師，后來被后浪拍在了沙灘上。我很驕傲的是，后浪是我自己回國培養(yǎng)的第一個博士，現(xiàn)在她是山東省最年輕的一位正教授。”18年初，聶禮強擔任山東省人工智能研究院院長。

回國后，聶禮強組建了山東大學的智能媒體研究中心。中心現(xiàn)在有正教授一名、副教授兩名、助理教授兩名、博士后兩名以及多名全職工程師和科研助理。整個團隊年輕有激情，除了老師還有博士碩士以及高年級本科生大約100余人。

山東大學教授聶禮強

“我們的博士的畢業(yè)條件是，3篇CCF A一作長文+半程馬拉松+1年海外交流。學生選我博士的時候，我就會講好畢業(yè)條件，到現(xiàn)在為止還沒有發(fā)現(xiàn)不愿意的。如果馬拉松跑不下來，我就帶著他們一起。”在聶禮強看來，跑馬拉松是有師承的，他的導師Tat-Seng Chua教授也喜歡跑步，兩人經(jīng)常一起跑。“我希望我的學生不要只是書呆子，不要是光會寫論文的paper machine，你還得成為家庭和社會需要的人。你要用跑步鍛煉韌性，身體原因實在不行的，可以用15分鐘平板支撐替代。你得學會做飯、開車，我也鼓勵學生談戀愛和結婚。”

10余年聚焦多模態(tài)的融合推理以及檢索

過去十多年，聶禮強的研究主要聚焦在多模態(tài)的融合推理以及檢索上。他總結了這個領域的三大挑戰(zhàn)，并針對此聚焦三個研究內(nèi)容，團隊共發(fā)表CCF A類會議或IEEE/ACM期刊百余篇，Google 學術引用7700余次，今年上半年引用1700次。單篇最高引用1400多次。聶禮強參與創(chuàng)辦了齊魯智能媒體論壇，已經(jīng)成功舉辦五屆，惠及齊魯學子大概2000余人次。

聶禮強的代表性成果是多模態(tài)對話系統(tǒng)，他從2009年開始做這個方向的研究，給定一個自然語言描述的問題，讓機器人用相關的文本、音頻、圖像、視頻等單模態(tài)或多模態(tài)組合的素材來呈現(xiàn)答案。“多模態(tài)對話還有一個至親，就是15年前后開始興起的視覺問答，它是給定一張或多張圖片以及與圖片相關的問題，讓機器人用文本來回答問題。多媒體問答的答案是多模態(tài)的，而視覺問答的問題是多模態(tài)的。”

山東大學教授聶禮強

“不管是多媒體問答還是視覺問答，都是單輪對話的，機器沒有記憶功能，沒有聯(lián)系上下文來回答問題，這不符合人類的習慣。”聶禮強希望能夠將多媒體問答和視覺問答捏合，給機器人安裝一個大腦，讓機器人在答復人類問題的時候，能夠考慮上下文，并以多模態(tài)的形式呈現(xiàn)，這就是多模態(tài)對話系統(tǒng)。對于未來的工作，聶禮強期望能夠賦予對話機器人對多模態(tài)場景感知、理解與推理的能力，從而讓人機交互更自然。

學術道路和工業(yè)界道路，怎么選？

在聶禮強看來，學術的道路和工業(yè)界的道路，都能達到人們說的人生成功的巔峰，只不過是不一樣的生活狀態(tài)。“工業(yè)界待遇可能會高一些，做的東西能被千家萬戶使用，會讓你有自豪感。而在高校，教書育人、桃李滿天下，培養(yǎng)的學生在分布在世界各個角落，這是另一種愉悅。”

“關于錢多錢少的問題，當然錢多可能生活會自在一些，但是現(xiàn)在高校教師的收入也在逐漸提高，比如說我們有很好的福利房、解決子女教育等等，我的生活已經(jīng)足夠好了，你每年再多給我30萬20萬，對我的生活的質量沒有更多的改變。”聶禮強表示，自己樂于現(xiàn)在的處境，更多的還是想做自己想做的事情。“在學術界我可以有很多自由時間，我可以做我自己想做的事情。當然我們研究的東西做得很好，我們也可以產(chǎn)業(yè)化、可以落地。如果再給我一個機會，我還是會教書育人，培養(yǎng)學生，這就是我的初衷。”青報全媒體記者 趙文源