AI能看懂英文，阿里巴巴奪實體發(fā)現(xiàn)測評全球第一

本文作者：楊曉凡

2017-11-24 14:43

導(dǎo)語：文章出現(xiàn)了Apple，再出現(xiàn)Jobs，就可以辨別出這個Jobs指的是喬布斯，而不是工作

雷鋒網(wǎng) AI 科技評論消息，全球頂級的知識庫構(gòu)建測評KBP2017日期公布了最新排名。阿里巴巴人工智能研究機構(gòu)iDST斬獲英文實體發(fā)現(xiàn)測評全球冠軍，在準(zhǔn)確率和召回率上均表現(xiàn)出色，核心指標(biāo)F1達到0.811。這次測評吸引了全球20多支頂尖團隊參與，包括IBM Research, BBN, Stanford Univ, CMU Univ, UIUC Univ, Columbia Univ, 騰訊等。

KBP是由NIST（National Institute of Standards and Technology，美國國家標(biāo)準(zhǔn)與技術(shù)研究院）指導(dǎo)、美國國防部協(xié)辦的賽事，主要任務(wù)為從自然書寫的非結(jié)構(gòu)化文本中抽取實體，以及實體之間的關(guān)系。

AI能看懂英文，阿里巴巴奪實體發(fā)現(xiàn)測評全球第一

這項測評要求AI算法在“讀完”一篇英文文章后，構(gòu)建一個物理世界的命名實體和實體之間關(guān)系的知識庫，如“克林頓和希拉里之間是夫妻關(guān)系”、“克林頓畢業(yè)于耶魯法學(xué)院”這樣一個個實體的關(guān)系。

阿里巴巴iDST自然語言處理首席科學(xué)家司羅介紹，他們的算法可以做到對文章上下文的理解。比如，文章出現(xiàn)了Apple，再出現(xiàn)Jobs，就可以辨別出這個Jobs指的是喬布斯，而不是工作。再比如，文章出現(xiàn)了Microsoft，那么Apple就更有可能是蘋果公司，而不是一種水果。

“另外，我們構(gòu)建了一個算法去學(xué)習(xí)不同領(lǐng)域之間共同的部分，通過遷移學(xué)習(xí)提升我們學(xué)習(xí)的準(zhǔn)確度。對于不同領(lǐng)域數(shù)據(jù)，我們?nèi)∑渚A，去其糟粕，進行智能學(xué)習(xí)”，司羅說。

在這次測評中，iDST團隊采用經(jīng)過改良的深度神經(jīng)網(wǎng)絡(luò)架構(gòu)對文本進行理解。改良的架構(gòu)有三個主要特點：首先該模型可以自動閱讀海量文章（如維基百科）并從中汲取經(jīng)驗；其次，該架構(gòu)可以智能選擇訓(xùn)練數(shù)據(jù)集以保證訓(xùn)練數(shù)據(jù)的準(zhǔn)確性；最后，我們采用post regularization的辦法保證模型結(jié)果的一致性。

對于KBP2017的成績，司羅表示：“很榮幸能夠同全球的同行分享阿里巴巴的研究成果，人工智能在機器閱讀理解和知識庫構(gòu)建上還處在起步階段，我們正在積極和同行業(yè)頂尖機構(gòu)學(xué)習(xí)交流，推動行業(yè)發(fā)展。比如我們內(nèi)部建設(shè)的信息抽取平臺AliIE項目就在同斯坦福大學(xué)展開積極合作”。

阿里巴巴正在將這樣的信息抽取技術(shù)廣泛的應(yīng)用到實際業(yè)務(wù)當(dāng)中，并致力于讓更多的中小開發(fā)者從中收益。他們搭建的信息抽取平臺AliIE擁有最頂尖的AI技術(shù)，并從一開始的架構(gòu)設(shè)計就考慮到平臺的開放性和可擴展性?？梢宰尭嗟拈_發(fā)者、研究員共同開發(fā)，并將成果回饋給這個社區(qū)。

AI能看懂英文，阿里巴巴奪實體發(fā)現(xiàn)測評全球第一