元宇宙如何通過VR、AR、5G進行臨床手術輔助

元宇宙元素可應用在臨床手術的術前至術中的整個流程，通過VR/AR、全息影像等技術，解決手術病灶定位困難、醫療手術資源短缺以及醫患溝通不暢等痛點

現有難點

手術的精準性和安全性

術前制定個性化的精準的手術預案，術中避開錯綜復雜的人體結構去定位病灶從而最大限度地減少對人體組織的傷害

醫療手術資源限制

復雜手術費時且高度依賴醫生手術水平;治療受到當地醫療資源和能力的限制

醫患溝通不暢

病患及家屬較難理解疾病原理及手術過程，對手術產生恐懼，對治療依從性低

元宇宙在臨床手術的應用場景及關鍵技術

手術預案制定及術前模擬

術前利用AR/VR技術，根據患者數據模擬結構解剖圖，清楚展現各個部位并解決視角盲區，同時可將整個手術過程在術前模擬進行，減少手術時間、并發癥的發生率和輻射暴露

醫患溝通

混合現實與3D全息影像輔助醫溝通，虛擬化身的醫生或真實的醫生用沉浸的方式(豐富的肢體語言及三維道具、圖文知識)，讓患者能夠根據細節隨時咨詢情況，從而更加科學地了解疾病并克服內心恐懼

術中實時成像

借助混合現實技術，將醫學影像與實體解剖實時重合，幫助醫生更加關注于手術和患者本身，提高手術定位精準、安全與效率術中操作輔助

通過手術機器人與VR技術相結合，兩條手術臂映射外科醫生自己的手臂，醫生將擁有更高的施展空間，提高手術靈活度與精確度;同時減少參加手術的人員，提高手術效率

遠程手術

5G+VR技術實現零延遲的遠程操作機器人手術，跨越地域的界限，平衡不同地方醫生資源不匹配的現狀

案例:Vicarious Surgical的手術機器人

Vicarious Surgical成立于2014年，Vicarious Surgical致力于研發將類人機械臂與虛擬現實技術相結合的微創手術機器系統，“將外科醫生運送到患者體中”。

• 單個1.5厘米甚至更小的切口進入腹腔

• 每條手臂擁有28個傳感器，能夠測量手術機器人的力量、行動、定位，做到完全復刻外科醫生從肩部、肘部再到手腕的自然運動，讓手術精度、視覺影像和控制都實現最大化

• 360度全視角，醫生通過佩戴VR眼鏡、操縱手柄，獲得全景般的逼真感，仿佛進入患者腹腔

案例:Augmedics的外科手術可視化AR系統

Augmedics成立于2014年，以色列外科手術可視化AR系統開發商，面向外科手術提供AR向導“Xvision Spine System (XVS)”

• 利用已獲專利的AR穿透性光學器件將患者脊柱的3D圖片投影到外科醫生的視網膜上，醫生佩戴AR眼鏡可以實時看到患者內部解剖結構，將脊椎部分的CT圖像重疊在患者身上，確認位置。

• 為醫生在復雜的手術中提供“X射線視覺”，實時且正確地指示手術器具的位置，主刀者即使不看監視器，眼睛不離開患者，也能進行手術。

信息來源:德勤訪談、研究與分析