宋劍平梳理瞭一下VR頭顯裝置的發展脈絡：最初 頭顯裝置是“與世隔絕”的 像鋼鐵俠那樣，“抓住”全息影像的病竈，一刀切掉真實的腫瘤！ - 趣味新聞網

外科醫生的夢想怎樣照進現實

其實，2021年12月14日，華山醫院福建醫院已經完成過一例全息影像和現實手術相互融閤神經外科手術。2022年3月上旬，又一例手術在福建華山成功完成，操作醫生都是華山醫院神經外科副主任醫師宋劍平。他說：“我們已經多次完成混閤現實技術輔助下的神經外科手術，證實這一技術對於手術定位有很大幫助。”

人類的大腦是非常復雜並且脆弱的。有些腫瘤長在大腦灰質深處，不易觀察並進行切除。所謂差之毫厘謬以韆裏，切除瞭腫瘤同時損傷瞭腦組織，錯莫大焉。因此，腦腫瘤切除被稱為現代醫學界最棘手的手術之一，對外科醫生手術精準度要求較高。

宋劍平介紹，以往術中為瞭精準定位病竈，醫生需要反復抬頭從屏幕獲取影像，憑藉經驗將觀察到的2D影像視圖匹配到3D對象（患者頭部）上。“現有的影像技術提供的是2D投影，需要醫生有很好的空間想象力，判斷病竈的真實位置。”即使使用瞭現代術中導航設備，導航屏幕與手術台距離造成的視覺上誤差，仍舊為手術帶來挑戰。

淶鞦與華山醫工結閤，創新的混閤現實技術，則將醫學影像數據轉化為3D圖像，宋劍平說：“醫生看見的是立體的、真實的圖像，不再需要通過自己的空間想象力進行轉換瞭。”而且，混閤現實的要義是——虛擬圖像與真實人體“混閤”，醫生在手術台上，看到的是患者的真實肌體上“混閤”瞭醫學影像數據轉化的3D圖像，“目前對定位病竈有很大幫助。”

這是2021年12月14日，在華山醫院福建醫院完成的首台手術。李女士因一次頭部創進行瞭腦部檢查，結果發現患有左側額部腦膜瘤。宋劍平認為，腫瘤位於腦部語言區，深部纍及大血管和迴流靜脈，需要精準定位手術區域。“混閤現實技術可以形成全息三維立體圖像，醫生能‘透視’病變與毗鄰結構的關係，縮短瞭病竈定位時間，精準化設計手術切口與入路。”小試牛刀，為今後的改進提供瞭經驗。

張江“90後”創業團隊將夢想“混閤”現實

華山醫院始終走在神經外科手術的前沿。任何一次技術的升級換代，好比“春江水暖鴨先知”，華山都希望通過醫工結閤搶占高地。

宋劍平梳理瞭一下VR頭顯裝置的發展脈絡：最初，頭顯裝置是“與世隔絕”的，醫生看虛擬圖像就不能看現實圖像，戴上VR眼鏡對現實世界就仿佛是“盲人”；此後的榖歌眼鏡，可以同時看見虛擬圖像和真實世界瞭，但相互不匹配；“微軟 HoloLens 2混閤現實技術帶來顛覆性的改變：虛擬影像可以匹配真實世界，這就是混閤現實技術。”

能不能創新一種混閤現實技術，産生增強版3D全息影像視圖，幫助外科醫生有效穿過顱骨和腦組織“觀察”患者大腦內部，在手術過程中直接觀察腫瘤細節？華山醫院神經外科醫生團隊的臨床需求，成為瞭張江“90後”創業團隊的動力。淶鞦聯閤創始人、技術總監助理苑之儀說：“混閤現實技術在工程應用上已經有很多成功案例，在醫療上，國內應用非常少。”

醫療軟件作為醫療器械的一種，開發過程管理嚴苛程度遠遠高於工程軟件，苑之儀說：“手術過程中這些影像視圖會顯示在醫生佩戴的HoloLens 2頭顯設備上，並通過全息影像同步呈現在患者身體相應的部位上。對數據重建的精準度，可謂人命關天。”

2021年被稱為“元宇宙元年”。元宇宙如何搭建？首先，在技術上，元宇宙是虛擬增強的物理現實與物理上持續存在的虛擬空間的融閤，需要多種高精尖科技相互嵌閤，形成産業閉環。其次，在硬件設備上，除瞭VR廠商的參與之外，虛實交互還需要腦機接口、可穿戴、機器人等技術；在軟件內容層麵，則需要依托於人工智能、數字孿生、3D渲染等技術；存儲和認證機製需要運用區塊鏈技術；數據處理則需運用雲計算、雲存儲技術；網絡環境構建，離不開5G技術……而在技術之外，元宇宙從概念到落地則意味著對當下生活、生産模式的顛覆，不僅僅是一個巨大的市場，更是一個美麗新世界。

而張江，正在擁抱這個新世界：在硬件端，張江正持續推進VR/AR/MR生態的打造，已匯聚瞭一批亮風台、小派科技、影創科技、蛙色、瑞歐威爾、大朋VR等優秀企業；芯片作為VR的最重要部分，決定著産品的技術高度。在芯片領域，張江同樣是佼佼者：曆經二十多年的發展，張江已形成國內産業最集中、綜閤技術水平最高、産業鏈最完善的集成電路産業集群。在內容端，張江已形成以閱文集團、盛趣遊戲、網易遊戲、完美世界、嗶哩嗶哩、第九城市等為龍頭的動漫遊戲産業集群，為遊戲産業提供源源不斷的原創IP。被視作遊戲文化産業界“瞭望塔”的前瞻性專業機構中國遊戲産業研究院也已落戶張江。

特約通訊員 張琪 新民晚報記者 宋寜華