今年六月，香港大學(xué)牙醫(yī)學(xué)院口腔頜面外科的蘇宇雄教授(Prof. Richard Y. Su)和蒲靜雅醫(yī)生團(tuán)隊(duì)(Dr. Jane J. Pu)在香港瑪麗醫(yī)院基于聯(lián)影智能uAI MERITS平臺(tái)，成功完成了“全球首例”由醫(yī)療混合大模型驅(qū)動(dòng)的口腔頜面整復(fù)外科手術(shù)。

 

團(tuán)隊(duì)正在實(shí)施手術(shù) 

醫(yī)療混合大模型加速落地

據(jù)了解，該手術(shù)旨在幫助一位因患腫瘤失去單側(cè)下頜骨的患者重建下頜骨，以恢復(fù)正?？谇活M面功能。手術(shù)過程中，需要將患者下肢的腓骨和皮膚及軟組織移植至口腔內(nèi)，以替代缺失的下頜骨和軟組織。而手術(shù)成功實(shí)施的關(guān)鍵操作之一，在于精準(zhǔn)定位并提取患者下肢軟組織內(nèi)的穿支血管。

蘇宇雄教授指出，軟組織規(guī)劃是計(jì)算機(jī)輔助手術(shù)治療的“最后一塊拼圖”，其中以術(shù)中精準(zhǔn)定位軟組織供血?jiǎng)用}——穿支動(dòng)脈為代表的技術(shù)難題，始終困擾著醫(yī)生在手術(shù)精準(zhǔn)度和效率方面的提升。傳統(tǒng)方式下，通常只有高水平、高年資的醫(yī)生才可在定位過程中做到最小誤差，而定位的精度常受限于超聲等不夠精準(zhǔn)的影像。同時(shí)，醫(yī)生還需要花費(fèi)大量的精力耗費(fèi)在反復(fù)比對超聲圖像和手術(shù)部位的手動(dòng)勾畫上。

為解決困擾已久的臨床痛點(diǎn)，團(tuán)隊(duì)創(chuàng)新性采用聯(lián)影智能多元手術(shù)治療平臺(tái)uAI MERITS，通過在手術(shù)前使用基于各種醫(yī)療圖像上訓(xùn)練的Transformer模型，實(shí)現(xiàn)精準(zhǔn)分割。在術(shù)中，通過一個(gè)多模態(tài)大模型來實(shí)現(xiàn)術(shù)中3D圖像和視頻配準(zhǔn)、透視投影和動(dòng)態(tài)視覺跟蹤，穿支動(dòng)脈、血管、骨骼等在術(shù)中就得以直觀展現(xiàn)，實(shí)時(shí)提供術(shù)中的指引，大大提升手術(shù)效率和精準(zhǔn)度。

根據(jù)3D重建的血管投影標(biāo)記小腿穿支血管 

“此類AI技術(shù)在精準(zhǔn)定位要求高或者術(shù)中操作較為復(fù)雜的手術(shù)中優(yōu)勢尤為明顯。作為新技術(shù)的早期使用者，我們希望能為推動(dòng)AI在臨床實(shí)踐中的應(yīng)用貢獻(xiàn)力量?！碧K宇雄教授與蒲靜雅醫(yī)生表示。

目前，團(tuán)隊(duì)已成功完成3例由uAI MERITS平臺(tái)賦能的口腔頜面整復(fù)外科手術(shù)。其中，區(qū)別于前兩例的腓骨肌皮瓣制備手術(shù)，第三例手術(shù)首次實(shí)現(xiàn)了股前外側(cè)穿支皮瓣制備手術(shù)。這些里程碑式的成功標(biāo)志著混合大模型在外科手術(shù)領(lǐng)域已邁出重要一步，為虛實(shí)結(jié)合的手術(shù)技術(shù)發(fā)展提供了新方向。

范式變革掀開序幕

今年六月，蘇宇雄教授在國際口腔面部康復(fù)學(xué)會(huì)會(huì)議中同步分享了基于uAI MERITS的口腔頜面外科修復(fù)手術(shù)實(shí)踐過程，引發(fā)了與會(huì)專家們的高度關(guān)注。

蘇宇雄教授表示，人工智能等新技術(shù)正引領(lǐng)著頜面外科手術(shù)的范式變革。這一技術(shù)的研究者極具創(chuàng)新精神，而作為技術(shù)使用者，則更應(yīng)延續(xù)和發(fā)揮這份創(chuàng)新精神。談及AI技術(shù)的未來發(fā)展，他表示，未來AI技術(shù)或既能深度融合美學(xué)考量，又能改善患者術(shù)后功能恢復(fù)，加速口腔頜面外科手術(shù)術(shù)后美觀性和功能性的雙雙提升。

 

蘇宇雄教授分享手術(shù)實(shí)踐過程 

會(huì)上，聯(lián)影智能首席醫(yī)療官夏炯教授出席并介紹了聯(lián)影智能多元手術(shù)治療平臺(tái)uAI MERITS，以及公司在大模型領(lǐng)域的全維布局。

他指出，作為一款用于機(jī)器介入、治療和手術(shù)的元宇宙生態(tài)系統(tǒng)，聯(lián)影智能多元手術(shù)治療平臺(tái)uAI MERITS依托醫(yī)療混合大模型技術(shù)，可創(chuàng)建在手術(shù)場景下的患者、醫(yī)務(wù)人員和操作環(huán)境的數(shù)字孿生，為術(shù)前準(zhǔn)備、術(shù)中導(dǎo)航、術(shù)后隨訪提供全方位的智能支持。

 

夏炯教授介紹uAI MERITS 

而在大模型方面，公司從基礎(chǔ)模型的構(gòu)建，到基于基礎(chǔ)模型所打造的多款A(yù)I應(yīng)用，已實(shí)現(xiàn)了語言大模型、圖像大模型和混合大模型等多個(gè)維度的覆蓋。夏炯教授同步表示，公司將繼續(xù)與醫(yī)療同行者一道，讓醫(yī)療創(chuàng)新技術(shù)賦能更多臨床場景，為全球醫(yī)生和患者帶來更多的可能性。

突破源自長期深耕與積累

除深度融合前沿的大模型技術(shù)外，本次新技術(shù)在手術(shù)場景的成功落地，還得益于聯(lián)影智能在醫(yī)學(xué)影像領(lǐng)域的長期深耕與積累。

自成立以來，聯(lián)影智能基于“全棧全譜”策略，截至目前已開發(fā)超過100多款A(yù)I應(yīng)用，其中50多款專注于臨床工作流程，覆蓋神經(jīng)、心血管、胸部、腫瘤、手術(shù)等多個(gè)核心臨床場景。作為百余款應(yīng)用成果之一，聯(lián)影智能CTA下肢血管智能分析系統(tǒng)在本次手術(shù)中發(fā)揮了關(guān)鍵作用，通過精準(zhǔn)的血管重建，成功輔助醫(yī)生實(shí)現(xiàn)了快速、精準(zhǔn)的腓骨肌皮瓣移植。

 

CTA 下肢血管系統(tǒng)輔助穿支血管分割重建 

在既有醫(yī)學(xué)影像AI產(chǎn)品布局基礎(chǔ)上深度融合前沿的大模型技術(shù)，未來AI在醫(yī)療場景中的應(yīng)用邊界將進(jìn)一步拓寬、拓深，不僅能夠?yàn)榕R床決策提供強(qiáng)有力的支持，還能在復(fù)雜疾病的治療中發(fā)揮關(guān)鍵作用，驅(qū)動(dòng)醫(yī)療行業(yè)的智能升級。

技術(shù)發(fā)展日新月異，但外科學(xué)的初心，“減小乃至消除病人的手術(shù)創(chuàng)傷”卻從未改變。置身智能時(shí)代，人工智能技術(shù)將賦能、引領(lǐng)臨床診療邁向更加精準(zhǔn)、安全和規(guī)范的世界，照亮人類對抗重疾的未來之路。

雷峰網(wǎng)(公眾號：雷峰網(wǎng))

雷峰網(wǎng)版權(quán)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。