2025-08-07
來源:器械之家
來源:器械之家
2025-08-07
近期,中國手術(shù)機器人實現(xiàn)了手術(shù)機器人“自主化”手術(shù)的歷史性創(chuàng)舉。國產(chǎn)手術(shù)機器人企業(yè)康諾思騰聯(lián)合香港中文大學多學科研究團隊,實現(xiàn)了全球首例「臨床場景下自主手術(shù)」驗證,并于頂級期刊《Science》的機器人領(lǐng)域子刊《Science Robotics》(IF=27.5, 5年影響因子為32.9)發(fā)表論文。
就在不久前,美國約翰霍普金斯團隊通過手術(shù)機器人,自主完成離體豬膽囊切除的消息曾轟動全球。而國內(nèi)團隊完成的這項研究堪稱2.0版本,主要實現(xiàn)了兩大技術(shù)躍遷:
這意味著,此項研究是目前為止全球范圍內(nèi),最接近真實臨床場景的機器人自主手術(shù),標志著人類向自動化醫(yī)療邁進了一大步。
01
手術(shù)機器人的“ChatGPT時刻”
本次研究采用了活豬進行試驗,全程僅依靠手術(shù)機器人內(nèi)窺鏡視覺反饋,在算法的驅(qū)動下,由Sentire思騰®自主執(zhí)行了三項內(nèi)窺鏡手術(shù)常見操作,即紗布抓取、血管夾閉和軟組織牽引。
這些看似簡單的基礎(chǔ)操作,完全憑借手術(shù)機器人自主運行,涉及許多復雜的挑戰(zhàn)。
比如,在紗布抓取場景中,放置在體內(nèi)的紗布往往會被血液染色,使其與周圍軟組織混為一體,難以識別。這就要求視覺算法,不能僅基于顏色特征進行識別,還須具備更高水平的場景理解。此外,在抓取過程中動物的呼吸運動不停,機器人須準確識別紗布的中心,才能避免失誤。同樣,呼吸運動下血管夾閉任務的血管定位和機器人路徑規(guī)劃十分復雜,這要求手術(shù)機器人的手眼校準要十分精準。而在軟組織牽引中,各種軟組織外觀、方向和表面光反射均有差異,對圖像質(zhì)量要求極高,能否充分按壓組織也是一大難題。
為了實現(xiàn)以上高難度任務,研究團隊首先進行了虛擬環(huán)境中的模擬。采用自研手術(shù)機器人具身智能模擬器SurRoL,進行多項任務預訓練,驗證了團隊研發(fā)的自動化方案能夠成功運作。
接下來,將上述算法嵌入Sentire思騰®腔鏡手術(shù)機器人,在離體動物上進行真實世界驗證。這種方法被稱為“零樣本學習”(zero-shot),即將仿真訓練的AI策略直接部署到真實手術(shù)機器人中,旨在模仿人類的推理過程,不僅能識別出訓練集中已有的數(shù)據(jù)類別,還可以對未見過的數(shù)據(jù)進行區(qū)分。這意味著訓練成本將大幅縮減,模擬與現(xiàn)實之間的差距被無限拉近。
在真實世界的試驗中,手術(shù)機器人自身性能須達到一定條件,才能媲美人類操作。首先是“眼”,Sentire思騰®腔鏡手術(shù)機器人內(nèi)窺鏡提供1080p的高分辨率立體視頻流,為視覺識別提供保障;其次是“腦”與“手”,Sentire思騰®最先進的機電一體化平臺,能夠減少系統(tǒng)延遲,實現(xiàn)更快的控制響應和更精確的機械運動。
研究人員采用了保留左右胃網(wǎng)膜動脈的豬胃組織切片作為離體試驗樣本,在不同光照、煙霧等環(huán)境條件下,成功實現(xiàn)了內(nèi)窺鏡攝像頭調(diào)整、針加持、紗布抓取、軟組織牽引和血管夾閉五項自主任務。
最后在活體豬內(nèi),進行了三項相對復雜,且體內(nèi)外場景差異明顯的任務,即紗布抓取、軟組織牽引和血管夾閉。結(jié)果表明,在無人員介入的情況下,Sentire思騰®能夠準確且高效地完成自主操作,三項任務的成功率分別高達83%、77%和67%,且對于所有在體實驗,神經(jīng)網(wǎng)絡均實現(xiàn)了實時推理速度。
其中,圖像感知模塊處理單幀圖像的時間僅為40毫秒(目標物體分割)和300毫秒(立體深度估計)。策略預測模塊速度更快,僅需7毫秒即可完成場景狀態(tài)評估,并據(jù)此預測機械臂末端執(zhí)行器的動作。最終的視覺伺服低級控制器耗時2毫秒。
出于安全考量及便于人工實時監(jiān)控,研究人員還適當降低了機器的運行速度,結(jié)果顯示紗布抓取任務平均耗時19.2秒,軟組織牽引任務17.0秒,血管夾閉任務8.3秒。這表明,在未來的實際應用中,運行速度不會成為自動化機器人手術(shù)的發(fā)展瓶頸。
02
醫(yī)療終極暢想,照進現(xiàn)實
此次國內(nèi)團隊應用純國產(chǎn)自研手術(shù)機器人,實現(xiàn)全球首例「臨床場景下自主手術(shù)」具有重大的意義。
人機協(xié)作,生產(chǎn)力倍增
當前,手術(shù)機器人超越人類的執(zhí)行精度,已經(jīng)得到了充分驗證。如何更進一步,賦予手術(shù)機器人自主決策的能力,成為醫(yī)生真正的得力助手,不僅是涉及到算法、機械運行的頂級技術(shù)難題,更是臨床中普遍存在的迫切需求。
比如,即便手術(shù)機器人在很大程度上節(jié)約了醫(yī)生的體力,減少了助手的數(shù)量,但在操作過程中,仍存在大量簡單重復的任務,需要醫(yī)生切換機械臂進行操作。若能將這些繁瑣的任務交由手術(shù)機器人自動執(zhí)行,醫(yī)生的精力就能夠充分投入到困難費時的精細操作上。
在本次研究中,團隊探索了人機協(xié)作的手術(shù)模式。由Sentire思騰®的第三只機械臂自動牽引小腸,為醫(yī)生操控的另外兩只機械臂提供腸系膜解剖空間。醫(yī)生可以專注于兩只機械臂的操作,而無須頻頻中斷手術(shù),執(zhí)行軟組織牽引,極大程度上提升手術(shù)效率和護理質(zhì)量。
AI指引,提升教學效率
在手術(shù)機器人培訓的提升上,此項研究同樣具有重要價值。研究人員用RL預測軌跡驅(qū)動機器人控制端操作主手,為學員提供實時力引導。初步結(jié)果顯示,新手在AI輔助訓練下,任務完成速度快了近一倍。此研究有望給外科醫(yī)生培訓資源稀缺問題帶來解決方案,降低醫(yī)療教育門檻。
開源平臺,能力指數(shù)級成長
團隊自研了開源手術(shù)機器人學習平臺SurRoL,進行算法研究和AI策略訓練。目前,該平臺在全球范圍內(nèi)被廣泛應用,谷歌學術(shù)引用已達到100篇,被譽為手術(shù)機器人的「Android系統(tǒng)」。這意味著,全球機構(gòu)的應用數(shù)據(jù)都能推動平臺進步。
安全概念同步跟進
本次研究,還對未來機器人自主手術(shù)的應用,進行了安全框架的探索。團隊創(chuàng)新引入了“自主監(jiān)督”的概念,允許醫(yī)生隨時接管手術(shù)機器人的自主任務。并且在軟組織牽引任務中,可以由醫(yī)生提前勾畫出手術(shù)機器人安全執(zhí)行操作的目標組織。這些安全理念的提出,具有很高的指導意義和參考價值。
國產(chǎn)廠家參與
此外,本次研究基于國產(chǎn)廠家康諾思騰自主研發(fā)的商業(yè)化手術(shù)機器人Sentire思騰®,且康諾思騰團隊深入?yún)⑴c到研究中。除了香港中文大學竇琪教授團隊外,康諾思騰聯(lián)合創(chuàng)始人、首席技術(shù)官兼首席運營官王澤睿博士作為通訊作者共同領(lǐng)導了該項研究。
王澤睿博士
獨角獸企業(yè)康諾思騰聯(lián)合創(chuàng)始人、首席技術(shù)官兼首席運營官
曾任香港中文大學機械與自動化工程學系研究助理教授,
專注于手術(shù)機器人核心技術(shù)研發(fā)逾十年,深度參與國家藥監(jiān)局手術(shù)機器人行業(yè)標準制定
竇琪教授
香港中文大學計算機科學與工程學系助理教授,博導,國家級青年人才
港中文智能醫(yī)療與擴展現(xiàn)實研究所副所長
港中文天石機器人研究所研究員,香港InnoHK醫(yī)療機械人創(chuàng)新技術(shù)中心研究員
結(jié)合其廣泛的臨床經(jīng)驗,以及手術(shù)機器人的開發(fā)經(jīng)驗,能夠更加高效的實現(xiàn)自動化手術(shù)的落地探索。舉例來說,早在構(gòu)建產(chǎn)品之初,康諾思騰便秉持了全棧自研與垂直整合的思路,成就了本次研究的基礎(chǔ)。Sentire 思騰®的系統(tǒng)架構(gòu)具備卓越的可擴展性,其獨特的AI就緒且AI友好特性,在研究中完整實現(xiàn)了從算法到系統(tǒng)的優(yōu)化閉環(huán)。其跨平臺部署能力不僅驗證了核心技術(shù)的商業(yè)化潛力,也推動了自主手術(shù)從概念走向臨床應用。
具備自主意識的,能自動執(zhí)行任務的手術(shù)機器人,一直是醫(yī)療領(lǐng)域的終極暢想,國內(nèi)團隊能夠率先在該領(lǐng)域拿下“全球首個”,不僅彰顯了中國領(lǐng)先的科研能力,也充分證實了國產(chǎn)手術(shù)機器人的先進性能。這項技術(shù)的實現(xiàn),代表了中國在手術(shù)機器人高難度應用的探索上,處于領(lǐng)先地位,令人十分振奮。相信隨著研究的推動,未來我們可以看到機器人參與到更多、更復雜的醫(yī)療任務中,真正實現(xiàn)高端醫(yī)療技術(shù)的民主化。
評論
請登錄后參與評論...
登錄后參與討論
提交評論