頭戴式顯示器(HMD)、可穿戴終端、增強(qiáng)現(xiàn)實(shí)(AR)、3D打印機(jī)……。神戶(hù)大學(xué)研究生院醫(yī)學(xué)研究系特聘副教授杉本真樹(shù)的研究小組運(yùn)用這些最尖端技術(shù)，在近未來(lái)手術(shù)研究方面走在了世界前沿。最近，該小組全球首次在外科手術(shù)中導(dǎo)入了可穿戴終端“Laser Eyewear”，該終端帶有利用激光直接在視網(wǎng)膜上描繪圖像的圖像顯示機(jī)構(gòu)。該小組還在全球率先實(shí)施了與手術(shù)同時(shí)進(jìn)行的、在同一手術(shù)室內(nèi)用患者的臟器立體模型進(jìn)行手術(shù)訓(xùn)練的“同步手術(shù)(Synchro-surgery simulation)”。

杉本在“第29屆日本醫(yī)學(xué)會(huì)總會(huì)2015關(guān)西”的學(xué)術(shù)演講(2015年4月11～13日，在國(guó)立京都國(guó)際會(huì)館等舉行)分會(huì)“IT外科最前沿：輔助微創(chuàng)手術(shù)的3D圖像和臟器立體模型”上登臺(tái)，以“通過(guò)3D增強(qiáng)現(xiàn)實(shí)與生物質(zhì)地3D打印技術(shù)來(lái)進(jìn)行直觀(guān)手術(shù)輔助”為題，介紹了最新的相關(guān)研究成果。

杉本等人此前在外科手術(shù)中導(dǎo)入了多種導(dǎo)航工具。這些工具大致上分為三種。分別為手術(shù)醫(yī)生所需信息的(1)輸入(input)技術(shù)、(2)顯示(output)技術(shù)、(3)反饋(feedback)技術(shù)。

為手術(shù)醫(yī)生帶來(lái)沉浸感或增強(qiáng)現(xiàn)實(shí)感

相當(dāng)于(1)的是可以進(jìn)行直觀(guān)操作的各種用戶(hù)界面(UI)。這些UI充分考慮到手術(shù)中的操作性，積極利用了觸摸面板及手勢(shì)操作功能。

關(guān)于(2)，該研究小組運(yùn)用了HMD、可穿戴終端、全息圖(空間立體顯示)、AR、立體投影(Projection Mapping)等多種技術(shù)。比如，在使用內(nèi)窺鏡手術(shù)輔助機(jī)器人“da Vinci(da Vinci Surgical System)”的手術(shù)中，采用了虛擬現(xiàn)實(shí)(VR)用HMD“Oculus Rift”。以克服da Vinci的極限(手術(shù)醫(yī)生無(wú)法移動(dòng)頭部)代替了獲得沉浸感，醫(yī)生可以隨意移動(dòng)頭部，“能夠獲得感覺(jué)像置身于患者腹中一樣的手術(shù)區(qū)”(杉本)。

最近采用的Laser Eyewear是日本QDLaser公司與東京大學(xué)共同開(kāi)發(fā)的眼鏡式可穿戴終端(參閱本站報(bào)道)。因?qū)儆诩す庖暰W(wǎng)膜掃描式，無(wú)論用戶(hù)的視力水平如何，均可獲得清晰的圖像，并且無(wú)需對(duì)焦即可在視野中的任何位置獲得圖像。使用該終端來(lái)投影手術(shù)醫(yī)生所需要的圖像信息等，不僅可以減輕視野移動(dòng)負(fù)擔(dān)，“還能夠消除眼部和手部動(dòng)作的偏差”(杉本)。

該研究小組還導(dǎo)入了美國(guó)zSpace公司的沉浸型全息3D顯示系統(tǒng)。利用臟器圖像等看起來(lái)就像懸浮在空中一樣的“增強(qiáng)全息圖(augmented holography)”來(lái)輔助手術(shù)。研究小組將增強(qiáng)全息圖與名為“zView”的虛擬全息系統(tǒng)組合在一起，全球首次應(yīng)用在手術(shù)輔助用途中。

連出血也可再現(xiàn)的臟器模型

關(guān)于(3)，該研究小組用3D打印機(jī)制作了每位患者的臟器立體模型，通過(guò)與采用(2)中的技術(shù)所獲得的圖像信息相結(jié)合，來(lái)提高手術(shù)效果。使用的是名為“Bio-Texture Modeling”、可再現(xiàn)臟器形狀和質(zhì)感的三維模型。而且，還制作了可以再現(xiàn)手術(shù)刀切入后“出血”的臟器模型“BIOTEXTURE WET Model”，用其進(jìn)行了肝臟局部摘除手術(shù)等的模擬。

最近實(shí)施的Synchro-surgery simulation是該研究小組與東京慈惠會(huì)醫(yī)科大學(xué)呼吸器官外科教授森川利昭的共同研究成果，使用了帶有骨骼的胸部臟器立體模型。在實(shí)施肺癌手術(shù)時(shí)，醫(yī)科學(xué)生在旁邊使用手術(shù)器具和該患者的臟器立體模型，同時(shí)再現(xiàn)了與手術(shù)醫(yī)生相同的技術(shù)。這是一項(xiàng)“可以實(shí)現(xiàn)手術(shù)自學(xué)(Self learning)”