近幾年,新冠肺炎疫情席卷全球,迫使醫(yī)院、護(hù)理機(jī)構(gòu)和其他醫(yī)療衛(wèi)生從業(yè)者不得不開(kāi)辟一種新途徑來(lái)應(yīng)對(duì)物理接觸不便所帶來(lái)的種種困難。
遠(yuǎn)程醫(yī)療,一種方興未艾的患者護(hù)理和治療方式,在疫情環(huán)境下得到了公眾愈加廣泛的認(rèn)識(shí)與認(rèn)可,許多醫(yī)療中心開(kāi)始探索來(lái)自AR領(lǐng)域遠(yuǎn)程協(xié)助的魅力,利用AR硬件設(shè)備(眼鏡)與軟件應(yīng)用開(kāi)展醫(yī)療衛(wèi)生工作,在不影響治療、護(hù)理質(zhì)量的情況下更加安全高效地為患者提供服務(wù)。
AR+醫(yī)療,創(chuàng)造醫(yī)學(xué)未來(lái)
| 1 | 讓醫(yī)療也能“免提” |
| 2 | 讓專家無(wú)處不在 |
| 3 | 讓優(yōu)質(zhì)醫(yī)療培訓(xùn)遍地開(kāi)花 |
| 4 | ?助力醫(yī)療行業(yè)突破性發(fā)展 |
讓醫(yī)療也能“免提”
醫(yī)生最關(guān)心的是病人,AR智能眼鏡讓醫(yī)生可以完全解放雙手并專注于他們的工作。
這意味著醫(yī)生可以隨時(shí)在智能眼鏡上保存患者的統(tǒng)計(jì)數(shù)據(jù)并進(jìn)行相關(guān)的注釋說(shuō)明,并且不用停下與患者的溝通或檢查。這消除了對(duì)大量屏幕和監(jiān)控設(shè)備的需求,也可以確?;颊叩拿舾袛?shù)據(jù)能夠保密。
可以通過(guò)語(yǔ)音命令控制的免提智能眼鏡使醫(yī)護(hù)人員能夠在需要的時(shí)候隨時(shí)訪問(wèn)虛擬屏幕上的信息,而無(wú)需用手去操作其他設(shè)備、紙質(zhì)文檔等。這種信息獲取與記錄的自由對(duì)于無(wú)菌手術(shù)室以及其他對(duì)環(huán)境有著高要求的應(yīng)用場(chǎng)景可以說(shuō)是非常友好了。
?
讓專家無(wú)處不在
有了AR智能眼鏡,獲取醫(yī)療專業(yè)知識(shí)從未如此簡(jiǎn)單。醫(yī)療現(xiàn)場(chǎng)的醫(yī)護(hù)人員可以與專家連線分享她對(duì)患者情況的看法,提供一手資料,并在專家指導(dǎo)下找到并執(zhí)行治療的最佳方法。這種專業(yè)知識(shí)的“分散傳播”實(shí)際上就是一種分享知識(shí)和提高醫(yī)療質(zhì)量的行之有效的方式。
緊急手術(shù)不會(huì)因?yàn)樾枰D(zhuǎn)移到特定地點(diǎn)進(jìn)行而被耽誤,找專家就像開(kāi)啟一個(gè)線上會(huì)議一樣簡(jiǎn)單。在任何地方都可以接受來(lái)自專家的服務(wù),這樣大大減少了醫(yī)生與患者的出行成本,更大大提高了醫(yī)療護(hù)理的效率與質(zhì)量。
?
讓醫(yī)療教育變得簡(jiǎn)單高效
AR眼鏡的視頻流擁有通過(guò)內(nèi)置的4K自動(dòng)對(duì)焦攝像頭實(shí)時(shí)查看對(duì)方所見(jiàn)的能力。智能眼鏡不僅消除了手術(shù)室內(nèi)對(duì)額外技術(shù)人員或連接顯示器的笨重設(shè)備的需求,也減小了讓實(shí)習(xí)醫(yī)師進(jìn)入手術(shù)室造成無(wú)菌條件被破壞的風(fēng)險(xiǎn)。
同時(shí),先進(jìn)的視頻流功能讓學(xué)習(xí)者能夠從外科醫(yī)生的角度實(shí)時(shí)、高清地體驗(yàn)正在發(fā)生的事情。在某些情況下,觀看者甚至可以控制攝像機(jī),這給未來(lái)的醫(yī)學(xué)教育提供了更廣泛的思路。
?
醫(yī)生通過(guò)AR眼鏡傳遞手術(shù)現(xiàn)場(chǎng)情況
讓醫(yī)療更具突破
使用智能眼鏡進(jìn)行虛擬協(xié)作除了有以上眾所周知的傳統(tǒng)好處外,還讓醫(yī)療衛(wèi)生事業(yè)的發(fā)展有了更具突破性的可能。智能眼鏡可以配合一定軟件實(shí)現(xiàn)人體映射,因此外科醫(yī)生可以看透手術(shù)單、皮膚和骨骼,更好的了解患者情況以及手術(shù)該如何進(jìn)行, AR眼鏡可以顯示接下來(lái)的手術(shù)步驟,集成的傳感器也會(huì)在手術(shù)過(guò)程中提供實(shí)時(shí)幫助。AR+醫(yī)療的未來(lái),創(chuàng)造性與突破性共存。
?
虹科AR醫(yī)療案例
| 1 | 臺(tái)灣奇美醫(yī)院的遠(yuǎn)程醫(yī)療 |
| 2 | ReSurge采用AR技術(shù)提供手術(shù)援助 |
| 3 | Enhatch用XR流技術(shù)提升手術(shù)水平 |
01
臺(tái)灣奇美醫(yī)院的遠(yuǎn)程醫(yī)療
?
奇美是臺(tái)南地區(qū)的創(chuàng)新者,引進(jìn)了機(jī)器人手術(shù),并擁有最先進(jìn)的血管造影和放射治療系統(tǒng)。同時(shí)奇美也是臺(tái)灣急救服務(wù)的先驅(qū)。近年來(lái),為了進(jìn)一步提升自己的醫(yī)療效率與質(zhì)量,奇美采用了另一個(gè)高科技工具:虹科 Vuzix AR 智能眼鏡。
?急診室應(yīng)用
?
急診室是最忙碌的醫(yī)療場(chǎng)所,以往,每次患者到達(dá)后,開(kāi)展急救的過(guò)程都是一樣的:評(píng)估現(xiàn)狀,收集信息,開(kāi)始治療,共享信息,在多數(shù)情況下會(huì)由專家來(lái)接管患者的最終治療與護(hù)理。
在整個(gè)急救過(guò)程中,兩個(gè)關(guān)鍵要素是信息和時(shí)間。醫(yī)生需要信息來(lái)迅速妥當(dāng)?shù)靥幚砘颊叩木o急情況。幾分鐘時(shí)間的耽誤對(duì)于像是中風(fēng)或心臟病來(lái)說(shuō)就是致命的,關(guān)乎患者的生與死,每分鐘都必不可少。
?
這就讓虹科 Vuzix AR智能眼鏡有了用武之地。AR技術(shù)的應(yīng)用使參與治療的醫(yī)護(hù)人員之間實(shí)現(xiàn)了以第一視角進(jìn)行實(shí)時(shí)視頻溝通的可能。
在傳統(tǒng)的緊急情況下,患者在轉(zhuǎn)往醫(yī)院的過(guò)程中會(huì)得到醫(yī)護(hù)人員的簡(jiǎn)單治療,而專家、急診醫(yī)生只能在醫(yī)院里等待患者的到來(lái)。但是, 有了智能眼鏡,醫(yī)生可以在患者到達(dá)醫(yī)院之前開(kāi)始對(duì)其進(jìn)行治療。當(dāng)醫(yī)護(hù)人員和急診醫(yī)生都佩戴智能眼鏡時(shí),急診醫(yī)生可以以醫(yī)護(hù)人員的第一視角實(shí)時(shí)看到病人,了解患者的真實(shí)情況并與護(hù)送患者的醫(yī)護(hù)人員達(dá)成一些治療手段和方式并遠(yuǎn)程主導(dǎo)治療開(kāi)展,以便爭(zhēng)取寶貴的救命時(shí)間。
此外,奇美醫(yī)療中心也服務(wù)于農(nóng)村地區(qū),許多患者來(lái)自其位于嘉里和柳營(yíng)的附屬醫(yī)院。戴智能眼鏡時(shí), 各附屬醫(yī)院的急診醫(yī)生可以安排不同院區(qū)的多個(gè)部門同時(shí)進(jìn)行會(huì)診,這樣無(wú)論專家身處何處都可以看到患者,不同院區(qū)的醫(yī)生可以詳細(xì)討論患者的病情,從而給患者提供最高效合適的治療方案。
?
佩戴在防護(hù)設(shè)備上依舊合適的智能眼鏡
?手術(shù)室應(yīng)用
?
任何外科手術(shù)都是通過(guò)團(tuán)隊(duì)合作完成的,包括外科醫(yī)生、護(hù)士,有時(shí)甚至需要技術(shù)人員的協(xié)作。通常,如果外科醫(yī)生想尋求專家的幫助,但是該專家可能不在現(xiàn)場(chǎng),按照以往可能醫(yī)生會(huì)用手機(jī)視頻的方式來(lái)聯(lián)系專家,但因?yàn)楣饩€不均勻?qū)е庐?huà)面不清晰,視頻角度受限,以及在聯(lián)系時(shí)無(wú)法用雙手進(jìn)行操作等原因,效果并不理想。
借助AR智能眼鏡,專家可以在千里之外實(shí)時(shí)參與手術(shù),他可以準(zhǔn)確地看到外科醫(yī)生所見(jiàn),了解患者的病情,并與外科醫(yī)生交流下一步的手術(shù)方案。在手術(shù)完成后,外科醫(yī)生,專家和原來(lái)的主治醫(yī)生還可以從不同地方繼續(xù)觀察和交流患者的康復(fù)情況,實(shí)現(xiàn)全流程的遠(yuǎn)程醫(yī)療。
?
?醫(yī)療教學(xué)應(yīng)用
?
醫(yī)生指導(dǎo)初級(jí)醫(yī)師執(zhí)行臨床任務(wù)
知識(shí)共享對(duì)于醫(yī)學(xué)的發(fā)展至關(guān)重要,在奇美醫(yī)療中心,虹科智能眼鏡除了上述用途以外,還用于培訓(xùn)初級(jí)醫(yī)師。
培訓(xùn)外科醫(yī)生時(shí),最好的方法就是通過(guò)實(shí)時(shí)視頻傳輸進(jìn)行教學(xué),但是錄制和流式傳輸手術(shù)視頻的成本很高且耗時(shí),通常視頻質(zhì)量還很差。但是,當(dāng)每個(gè)人都戴著虹科AR智能眼鏡時(shí),實(shí)習(xí)生、初級(jí)醫(yī)師可以準(zhǔn)確,實(shí)時(shí)地看到外科醫(yī)生的操作,還可以提出問(wèn)題與外科醫(yī)生進(jìn)行交流。當(dāng)初級(jí)醫(yī)師自己操刀時(shí),高級(jí)醫(yī)師可以使用智能眼鏡的第一視角和出色的音頻交流功能在手術(shù)室外的任何場(chǎng)所提供詳細(xì)的指導(dǎo),比如癥狀識(shí)別,傷口縫合,導(dǎo)管植入等。總之,AR眼鏡與技術(shù)讓醫(yī)療教學(xué)在任何時(shí)間任何地點(diǎn)都能進(jìn)行,并且讓參與各方都可以解放雙手、全身心的參與每場(chǎng)培訓(xùn)。
?
一名醫(yī)生指導(dǎo)初級(jí)醫(yī)師控制心室輔助設(shè)備
02
ReSurge采用AR技術(shù)提供手術(shù)援助
?
你看見(jiàn)我看見(jiàn)的了嗎?
ReSurge International是一個(gè)全球性的外科培訓(xùn)非營(yíng)利組織,其使命是在當(dāng)今世界的發(fā)展中國(guó)家及地區(qū)開(kāi)展高質(zhì)量的外科和麻醉項(xiàng)目。他們也將通過(guò)AR智能眼鏡來(lái)實(shí)現(xiàn)自己的“Surgical Sight program”(外科視力計(jì)劃),通過(guò)增強(qiáng)現(xiàn)實(shí)(AR)技術(shù)讓世界上的外科界更加緊密地聯(lián)系在一起。
眼鏡使用的“融合現(xiàn)實(shí)”,讓學(xué)員可以在戴上眼鏡的時(shí)候真實(shí)的感受來(lái)自數(shù)千里外的導(dǎo)師的指導(dǎo),如下圖所示。通過(guò)這種方式,ReSurge的導(dǎo)師將確切地看到手術(shù)室中的外科醫(yī)生(學(xué)員)所看到的內(nèi)容,讓他們有機(jī)會(huì)參與進(jìn)整個(gè)手術(shù)過(guò)程并進(jìn)行實(shí)時(shí)指導(dǎo)和教學(xué)。
?
通過(guò)這個(gè)開(kāi)創(chuàng)性的計(jì)劃,世界各地的外科導(dǎo)師和學(xué)員可以使用虹科 Vuzix AR智能眼鏡和AR軟件應(yīng)用進(jìn)行實(shí)時(shí)虛擬培訓(xùn)和操作。這樣的培訓(xùn)方式支持學(xué)員學(xué)習(xí)基本的救生技能并培養(yǎng)他們的自立能力。之后他們可以把學(xué)到的知識(shí)分享出去,并自行培訓(xùn)外科醫(yī)生,從而產(chǎn)生變革的漣漪,拯救無(wú)數(shù)的生命。
?
03
Enhatch用XR流技術(shù)提升手術(shù)水平
?
增強(qiáng)現(xiàn)實(shí) (AR) 在醫(yī)療領(lǐng)域迅速普及,除了AR智能眼鏡的應(yīng)用外,沉浸式流媒體技術(shù)發(fā)揮的作用也不可小覷。它提供了在移動(dòng) AR 設(shè)備上可視化復(fù)雜手術(shù)的 3D 數(shù)據(jù)所需的能力和速度——讓外科醫(yī)生能夠在保持對(duì)患者高度關(guān)注的同時(shí)隨時(shí)訪問(wèn)患者的關(guān)鍵信息。
美國(guó)醫(yī)療技術(shù)公司Enhatch的聯(lián)合創(chuàng)始人兼首席執(zhí)行官Peter Verrillo說(shuō):“我們希望為患者提供更好的手術(shù),同時(shí)也希望通過(guò)減少外科醫(yī)生對(duì)于設(shè)備或患者情況了解等的認(rèn)知負(fù)擔(dān)來(lái)給醫(yī)生減輕壓力”。Enhatch創(chuàng)建了業(yè)內(nèi)首個(gè)智能手術(shù)生態(tài)系統(tǒng),將公司、技術(shù)和外科醫(yī)生聯(lián)系起來(lái)以簡(jiǎn)化臨床工作流程、提升病患護(hù)理質(zhì)量。
?
佩戴增強(qiáng)現(xiàn)實(shí)耳機(jī),外科醫(yī)生可以實(shí)現(xiàn)用語(yǔ)音對(duì)患者的信息數(shù)據(jù)進(jìn)行查看與記錄,無(wú)需離開(kāi)手術(shù)區(qū)域,甚至無(wú)需將視線從患者身上移開(kāi)。在手術(shù)期間,他們可以與非侵入式 UI 元素交互,以訪問(wèn)患者的數(shù)據(jù)記錄、3D 模型或其他術(shù)前記錄。Peter Verrillo 曾表示做到以上這些的挑戰(zhàn)是將這些非常復(fù)雜的數(shù)據(jù)呈現(xiàn)到醫(yī)生的面前。
這就展示了遠(yuǎn)程渲染的強(qiáng)大功能。Enhatch的軟件平臺(tái)自動(dòng)將術(shù)前圖像(如X射線,CT掃描和MRI)轉(zhuǎn)換為精確的3D模型。對(duì)于一次手術(shù),這通常意味著需要處理數(shù)千兆字節(jié)的數(shù)據(jù),大大超過(guò)了許多移動(dòng)AR設(shè)備的性能容量。要使其正常工作,需要減少多邊形并過(guò)度簡(jiǎn)化模型。而這意味著需要更多的處理工作,甚至最終可能產(chǎn)生不太準(zhǔn)確的可視化結(jié)果,這對(duì)一場(chǎng)手術(shù)來(lái)說(shuō)是絕對(duì)不行的。
?
Enhatch通過(guò)將虹科XR流媒體組件ISAR SDK集成到其解決方案中,讓醫(yī)生能夠輕松的訪問(wèn)關(guān)于患者的有價(jià)值的數(shù)據(jù)。虹科ISAR SDK是一種開(kāi)發(fā)人員工具,可實(shí)現(xiàn)整個(gè)AR和VR應(yīng)用程序從云或本地基礎(chǔ)設(shè)施到HoloLens 2,Meta Quest 2,平板電腦或智能手機(jī)的遠(yuǎn)程渲染和實(shí)時(shí)流式傳輸。因此,XR流媒體解決方案允許可視化和操作3D內(nèi)容,大大超出了許多移動(dòng)設(shè)備的性能規(guī)格。
Peter Verrillo 表示:“AR的美妙之處在于將虛擬世界和現(xiàn)實(shí)世界融合在一起,以獲得更成功的臨床結(jié)果, XR流媒體技術(shù)讓外科醫(yī)生能夠分析復(fù)雜的3D醫(yī)療數(shù)據(jù),而不用將注意力從患者身上移開(kāi),最終,在手術(shù)室中使用增強(qiáng)現(xiàn)實(shí)是醫(yī)療保健的未來(lái)?!?/p>
現(xiàn)代醫(yī)學(xué)的發(fā)展與科技的進(jìn)步息息相關(guān),可以預(yù)見(jiàn),AR技術(shù)在醫(yī)療健康領(lǐng)域的應(yīng)用必將更上層樓,或會(huì)幫助醫(yī)療領(lǐng)域發(fā)展一次革命性的變革,讓我們拭目以待吧?! ?/p>
電子發(fā)燒友App

































評(píng)論