0
| 本文作者： nebula | 2024-07-22 16:00 |
今年六月，香港大學牙醫(yī)學院口腔頜面外科的蘇宇雄教授(Prof. Richard Y. Su)和蒲靜雅醫(yī)生團隊(Dr. Jane J. Pu)在香港瑪麗醫(yī)院基于聯(lián)影智能uAI MERITS平臺，成功完成了“全球首例”由醫(yī)療混合大模型驅(qū)動的口腔頜面整復外科手術(shù)。
團隊正在實施手術(shù)
醫(yī)療混合大模型加速落地
據(jù)了解，該手術(shù)旨在幫助一位因患腫瘤失去單側(cè)下頜骨的患者重建下頜骨，以恢復正常口腔頜面功能。手術(shù)過程中，需要將患者下肢的腓骨和皮膚及軟組織移植至口腔內(nèi)，以替代缺失的下頜骨和軟組織。而手術(shù)成功實施的關(guān)鍵操作之一，在于精準定位并提取患者下肢軟組織內(nèi)的穿支血管。
蘇宇雄教授指出，軟組織規(guī)劃是計算機輔助手術(shù)治療的“最后一塊拼圖”，其中以術(shù)中精準定位軟組織供血動脈——穿支動脈為代表的技術(shù)難題，始終困擾著醫(yī)生在手術(shù)精準度和效率方面的提升。傳統(tǒng)方式下，通常只有高水平、高年資的醫(yī)生才可在定位過程中做到最小誤差，而定位的精度常受限于超聲等不夠精準的影像。同時，醫(yī)生還需要花費大量的精力耗費在反復比對超聲圖像和手術(shù)部位的手動勾畫上。
為解決困擾已久的臨床痛點，團隊創(chuàng)新性采用聯(lián)影智能多元手術(shù)治療平臺uAI MERITS，通過在手術(shù)前使用基于各種醫(yī)療圖像上訓練的Transformer模型，實現(xiàn)精準分割。在術(shù)中，通過一個多模態(tài)大模型來實現(xiàn)術(shù)中3D圖像和視頻配準、透視投影和動態(tài)視覺跟蹤，穿支動脈、血管、骨骼等在術(shù)中就得以直觀展現(xiàn)，實時提供術(shù)中的指引，大大提升手術(shù)效率和精準度。
根據(jù)3D重建的血管投影標記小腿穿支血管
“此類AI技術(shù)在精準定位要求高或者術(shù)中操作較為復雜的手術(shù)中優(yōu)勢尤為明顯。作為新技術(shù)的早期使用者，我們希望能為推動AI在臨床實踐中的應(yīng)用貢獻力量。”蘇宇雄教授與蒲靜雅醫(yī)生表示。
目前，團隊已成功完成3例由uAI MERITS平臺賦能的口腔頜面整復外科手術(shù)。其中，區(qū)別于前兩例的腓骨肌皮瓣制備手術(shù)，第三例手術(shù)首次實現(xiàn)了股前外側(cè)穿支皮瓣制備手術(shù)。這些里程碑式的成功標志著混合大模型在外科手術(shù)領(lǐng)域已邁出重要一步，為虛實結(jié)合的手術(shù)技術(shù)發(fā)展提供了新方向。
范式變革掀開序幕
今年六月，蘇宇雄教授在國際口腔面部康復學會會議中同步分享了基于uAI MERITS的口腔頜面外科修復手術(shù)實踐過程，引發(fā)了與會專家們的高度關(guān)注。
蘇宇雄教授表示，人工智能等新技術(shù)正引領(lǐng)著頜面外科手術(shù)的范式變革。這一技術(shù)的研究者極具創(chuàng)新精神，而作為技術(shù)使用者，則更應(yīng)延續(xù)和發(fā)揮這份創(chuàng)新精神。談及AI技術(shù)的未來發(fā)展，他表示，未來AI技術(shù)或既能深度融合美學考量，又能改善患者術(shù)后功能恢復，加速口腔頜面外科手術(shù)術(shù)后美觀性和功能性的雙雙提升。
蘇宇雄教授分享手術(shù)實踐過程
會上，聯(lián)影智能首席醫(yī)療官夏炯教授出席并介紹了聯(lián)影智能多元手術(shù)治療平臺uAI MERITS，以及公司在大模型領(lǐng)域的全維布局。
他指出，作為一款用于機器介入、治療和手術(shù)的元宇宙生態(tài)系統(tǒng)，聯(lián)影智能多元手術(shù)治療平臺uAI MERITS依托醫(yī)療混合大模型技術(shù)，可創(chuàng)建在手術(shù)場景下的患者、醫(yī)務(wù)人員和操作環(huán)境的數(shù)字孿生，為術(shù)前準備、術(shù)中導航、術(shù)后隨訪提供全方位的智能支持。
夏炯教授介紹uAI MERITS
而在大模型方面，公司從基礎(chǔ)模型的構(gòu)建，到基于基礎(chǔ)模型所打造的多款AI應(yīng)用，已實現(xiàn)了語言大模型、圖像大模型和混合大模型等多個維度的覆蓋。夏炯教授同步表示，公司將繼續(xù)與醫(yī)療同行者一道，讓醫(yī)療創(chuàng)新技術(shù)賦能更多臨床場景，為全球醫(yī)生和患者帶來更多的可能性。
突破源自長期深耕與積累
除深度融合前沿的大模型技術(shù)外，本次新技術(shù)在手術(shù)場景的成功落地，還得益于聯(lián)影智能在醫(yī)學影像領(lǐng)域的長期深耕與積累。
自成立以來，聯(lián)影智能基于“全棧全譜”策略，截至目前已開發(fā)超過100多款AI應(yīng)用，其中50多款專注于臨床工作流程，覆蓋神經(jīng)、心血管、胸部、腫瘤、手術(shù)等多個核心臨床場景。作為百余款應(yīng)用成果之一，聯(lián)影智能CTA下肢血管智能分析系統(tǒng)在本次手術(shù)中發(fā)揮了關(guān)鍵作用，通過精準的血管重建，成功輔助醫(yī)生實現(xiàn)了快速、精準的腓骨肌皮瓣移植。
CTA 下肢血管系統(tǒng)輔助穿支血管分割重建
在既有醫(yī)學影像AI產(chǎn)品布局基礎(chǔ)上深度融合前沿的大模型技術(shù)，未來AI在醫(yī)療場景中的應(yīng)用邊界將進一步拓寬、拓深，不僅能夠為臨床決策提供強有力的支持，還能在復雜疾病的治療中發(fā)揮關(guān)鍵作用，驅(qū)動醫(yī)療行業(yè)的智能升級。
技術(shù)發(fā)展日新月異，但外科學的初心，“減小乃至消除病人的手術(shù)創(chuàng)傷”卻從未改變。置身智能時代，人工智能技術(shù)將賦能、引領(lǐng)臨床診療邁向更加精準、安全和規(guī)范的世界，照亮人類對抗重疾的未來之路。
雷峰網(wǎng)(公眾號：雷峰網(wǎng))
