11月22日，AI與數(shù)字經(jīng)濟領(lǐng)域一年一度的科創(chuàng)盛會，2023 IDEA大會在深圳舉行。IDEA研究院創(chuàng)院理事長、美國國家工程院外籍院士沈向洋在會上發(fā)表主旨演講，發(fā)布IDEA研究院的重磅研產(chǎn)結(jié)晶與市場化成果；在大咖云集的論壇環(huán)節(jié)，多位領(lǐng)軍科學(xué)家、企業(yè)家、創(chuàng)業(yè)者同臺論道，碰撞“學(xué)研產(chǎn)投”靈感。

 

2023年，AI技術(shù)給人類生活所帶來的撼動已無需贅言。一個個看似散點狀的技術(shù)突破相繼爆發(fā)，將人工智能推向主流?；仡櫄v史，技術(shù)變革無疑都伴隨著產(chǎn)業(yè)重塑與經(jīng)濟發(fā)展。然而，AI在以前所未有的力度沖入市場的同時，在研究上仍存在大量空白。

此次IDEA大會上，沈向洋從技術(shù)創(chuàng)新、技術(shù)創(chuàng)業(yè)、技術(shù)驅(qū)動新產(chǎn)業(yè)三個角度，介紹了IDEA研究院在AI新篇章下，對科創(chuàng)的實踐與思考。

 

技術(shù)創(chuàng)新：見其所見，思所未思

談及技術(shù)創(chuàng)新，沈向洋認(rèn)為，“在大家都看到的問題里，找到大家都找不到的方法”是創(chuàng)新者的必備品質(zhì)。本次大會上，IDEA研究院就發(fā)布了幾項獨具技術(shù)品味的研究成果。

視覺提示模型T-Rex 

用圖片代替語言prompt，是什么體驗？

在計算機視覺領(lǐng)域，檢測類任務(wù)有著極為廣泛的應(yīng)用場景。今年4月，IDEA研究院曾推出能夠“一句話檢測、分割一切”的Grounded SAM，通過文字提示實現(xiàn)精準(zhǔn)的目標(biāo)檢測，極大降低了技術(shù)使用與落地門檻，在Github上火爆出圈。

此次，同個研究團隊帶來新作，視覺提示（visual prompt）模型T-Rex。團隊表示，在真實應(yīng)用場景中，許多罕見、復(fù)雜物體難以用文字充分描述，視覺提示的加入能夠有效解決這一痛點。直觀的視覺反饋與強交互性，也有助于提升檢測的效率和精準(zhǔn)度。

 

值得一提的是，T-Rex是一個開箱即用的模型，無需重新訓(xùn)練或微調(diào)，即可檢測模型在訓(xùn)練階段從未見過的物體?；顒又校蛳蜓筮€發(fā)布了T-Rex的模型實驗室（playground），Interactive Visual Prompt（iVP），用戶可親自試玩解鎖“一圖勝千言”的prompting新體驗。

沈向洋在演講中指出，計算機視覺領(lǐng)域在呼喚通用大模型的來臨。以GPT-4V為代表的多模態(tài)大模型，是在語言能力上增加視覺能力；IDEA研究院的計算機視覺團隊則選擇了另一條路徑，先將基礎(chǔ)的視覺能力做到極致，再增加語言能力。

 

“我們認(rèn)為，物體級別的理解（object-level understanding），也就是檢測、分割、識別，是連接語言和視覺這兩種最重要的模態(tài)的基石?！鄙蛳蜓蟊硎?，只有對物理世界有了更為精準(zhǔn)的、物體級別的視覺理解，才有可能做出真正的多模態(tài)智能。IDEA團隊將通過讓模型言之有據(jù)（grounded）、開放詞表（open-set）、可提示交互（promptable），來探索視覺大模型之路。

Think-on-Graph知識驅(qū)動大模型

大模型雖好，但“一本正經(jīng)的胡說八道”怎么解？

眾所周知，大模型存在深度推理能力差、知識不可追溯、實時更新代價高等局限性，這也成為其在許多嚴(yán)肅領(lǐng)域落地的主要瓶頸。如何彌補大模型的這部分缺陷，是當(dāng)下AI應(yīng)用的重要課題。

為此，IDEA研究院團隊研發(fā)了Think-on-Graph（思維圖譜）技術(shù)，讓大模型和知識圖譜強強聯(lián)合?？傮w來說，大模型更擅長意圖理解和自主學(xué)習(xí)；而知識圖譜因其結(jié)構(gòu)化的知識存儲方式，擅長邏輯鏈條推理，具有更佳的可解釋性與可實時更新性。

 

Think-on-Graph通過實現(xiàn)兩者的緊耦合交互，驅(qū)動大模型agent在知識圖譜上“思考”，逐步搜索推理出最優(yōu)答案（在知識圖譜的關(guān)聯(lián)實體上一步一步搜索推理）。每一步推理中，大模型都親自參與，與知識圖譜相互取長補短。

在大會現(xiàn)場，研究團隊也通過多個實例與產(chǎn)業(yè)化場景演示，展示了Think-on-Graph應(yīng)對復(fù)雜提問時優(yōu)異的深度推理能力。

懂語言者得天下

除了在人工智能方向上一往無前，IDEA研究院還十分重視計算機科學(xué)領(lǐng)域中其他分支的創(chuàng)新。沈向洋在會上重點介紹了兩個語言類項目。

 

今年8月，一個中國團隊開發(fā)的編程語言在Hacker News（由Y Combinator創(chuàng)辦的知名科創(chuàng)社區(qū)）登上頭版頭條，這正是由IDEA研究院推出的MoonBit月兔。

MoonBit 是由Wasm驅(qū)動，專為云計算與邊緣計算設(shè)計的開發(fā)者平臺，同時利用AI大模型賦能傳統(tǒng)工具鏈，提升代碼生成效率。MoonBit不僅提供通用程序語言設(shè)計，還垂直整合了編譯器、構(gòu)建系統(tǒng)、集成開發(fā)環(huán)境（IDE）、部署工具等版塊，提升開發(fā)體驗與效率。

 

IDEA研究院展示的另一門新語言，是區(qū)塊鏈并行智能合約語言GCL。該語言的研究團隊已連續(xù)兩年獲批國家重點研發(fā)計劃項目。

GCL旨在打造區(qū)塊鏈系統(tǒng)上的最優(yōu)解決方案。不同于傳統(tǒng)的“數(shù)據(jù)跟著代碼跑”的方案，GCL設(shè)計了“代碼執(zhí)行跟著數(shù)據(jù)跑”的編程模型，以減少因數(shù)據(jù)傳遞造成的麻煩。分布式編程模型能夠?qū)崿F(xiàn)復(fù)雜的區(qū)塊鏈應(yīng)用邏輯，并高效適配底層的多鏈系統(tǒng)。

 

技術(shù)創(chuàng)業(yè)：自由碰撞，嚴(yán)謹(jǐn)產(chǎn)出

近年來，技術(shù)創(chuàng)業(yè)已然成為許多技術(shù)創(chuàng)新者的下一站。在演講中，沈向洋用Transformer架構(gòu)開山之作《Attention is All You Need》舉例，這篇論文的八名作者如今全部在創(chuàng)業(yè)。“很多我的前同事也找到我說，‘Harry，我想創(chuàng)業(yè)’。”他打趣道。

沈向洋指出，IDEA研究院一直致力于創(chuàng)造一個架構(gòu)，讓科學(xué)家頭腦、企業(yè)家素質(zhì)、創(chuàng)業(yè)者精神能夠自由碰撞，嚴(yán)謹(jǐn)產(chǎn)出。成立剛滿三年，IDEA研究院也帶來一批已經(jīng)或正在走向大市場的優(yōu)秀創(chuàng)業(yè)項目。

 

這些項目中，既有主打AI for Scientists的AI科研產(chǎn)品ReadPaper，也有為數(shù)據(jù)要素可信流通提供硬件級安全保障的SPU機密計算協(xié)處理器、SPU-G異構(gòu)AI協(xié)處理器，還有基于自研知識圖譜與生物醫(yī)學(xué)領(lǐng)域大模型的腦卒中智能防護產(chǎn)品StroCare。

其中，AI科研助手ReadPaper上線一年，收獲了不少科研從業(yè)者的喜愛。在大會上，團隊公開了全新升級的ReadPaper 2.0版本，并現(xiàn)場演示閱讀copilot、潤色copilot等新功能。值得一提的是，支撐ReadPaper 2.0超強體驗的學(xué)術(shù)大模型Eureka也在現(xiàn)場首次公開。

 

除了讓跨學(xué)科、跨界人才在IDEA的平臺上碰撞出火花，IDEA也積極與產(chǎn)業(yè)伙伴合作，將技術(shù)應(yīng)用到場景，深入到業(yè)務(wù)中去。

今年，萬科IDEA聯(lián)合實驗室推出了自主研發(fā)的幾何建模與約束引擎，填補在工業(yè)設(shè)計軟件領(lǐng)域的國產(chǎn)空白。自2021年宣布成立以來，該實驗室已在深圳、上海建設(shè)起一支集合圖像學(xué)、幾何計算、視覺技術(shù)、機器學(xué)習(xí)等領(lǐng)域頂尖人才的研究隊伍。

此外，IDEA研究院還通過CTO Labs平臺與一批獨角獸企業(yè)和瞪羚企業(yè)聯(lián)合創(chuàng)新，合作伙伴包括數(shù)說故事、晶泰科技、翼方健數(shù)等。本次IDEA大會上，IDEA視見睿來實驗室發(fā)布了HiveNet可控人像視頻生成平臺，實現(xiàn)AI技術(shù)方案對傳統(tǒng)視頻拍攝流程（編、導(dǎo)、拍、演、剪）的全面替代。

 

技術(shù)驅(qū)動新產(chǎn)業(yè)：勇闖無人區(qū)，低空經(jīng)濟再進一步

2022年的IDEA大會上，沈向洋發(fā)布《低空經(jīng)濟發(fā)展白皮書——深圳方案》，吹響IDEA勇闖低空無人區(qū)的號角。

過去一年，低空經(jīng)濟在全國發(fā)展迅猛，IDEA研究院也再進一步，在其智能融合低空系統(tǒng)（Smart Integrated Lower Airspace System，SILAS）中，提出時空進程（Temporal Spatial Process）新概念。

與此同時，《低空經(jīng)濟發(fā)展白皮書（2.0）——全數(shù)字化方案》也在活動上發(fā)布。

 

11月23日，由IDEA研究院聯(lián)合承辦的第五屆世界科技與發(fā)展論壇——世界低空經(jīng)濟論壇將在深圳舉行。屆時，IDEA研究院將深度分享“異構(gòu)、高密度、高頻次、高復(fù)雜度”低空飛行安全和效率問題的解決思路，以及低空空域?qū)崿F(xiàn)從“可通達”到“可計算”再到“可運營”轉(zhuǎn)變的數(shù)字化路徑。

“技術(shù)創(chuàng)新從來就不是一蹴而就的?！鄙蛳蜓笳f，人類歷史就是一部勇闖無人區(qū)的歷史，當(dāng)我們回顧那些偉大的創(chuàng)新，今天看來有多震撼，起步時就有多困難。因此，做科研既要有耐心，也要對趨勢有足夠深刻的思考，還要建立讓創(chuàng)新能夠開枝散葉、生生不息的機制。演講的最后，沈向洋呼吁，生逢大時代，IDEA研究院愿與各界同仁一道，創(chuàng)新智能技術(shù)，創(chuàng)造偉大企業(yè)，推動數(shù)字經(jīng)濟。

雷峰網(wǎng)(公眾號：雷峰網(wǎng))

雷峰網(wǎng)版權(quán)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。