虚拟现实与增强现实技术在眼科教学中的应用现状
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
基础医学与临床Basic & Clinical Medicine
December 2020Vol.40 No.122020年 12月 第40卷第12期
文章编号:1001-6325 ( 2020 ) 12-1744-05
医学教育
虚拟现实与增强现实技术在眼科教学中的应用现状
邹绚,睢瑞芳*
*收稿日期:2020-03-16 修回日期:2020-05-27
基金项目:北京协和医学院2018年教育教学改革项目(2018zlgc0112)
*
通信作者(corresponding author ) : hrfsui@
(中国医学科学院北京协和医学院北京协和医院眼科,北京100730)
摘要:虚拟现实(VR)和增强现实(AR)在眼科主要应用于眼解剖教学、眼科检查法和手术操作培训。
医学
生通过观察、模仿和参与来掌握复杂的概念和知识,多数研究都表明这种教学方式可以提高学生的学习效
率,帮助学生更好的掌握某种操作技能,提高医师执业初期在患者中操作的安全性,给眼科教学改革提供了
新思路。
关键词:虚拟现实;增强现实;眼科教学;手术模拟器
中图分类号:R779. 66
文献标志码:A
Current status of virtual reality
and augmented reality-based training tools in ophthalmology teaching
ZOU Xuan , SUI Rui-fang *
(Department of Ophthalmology, Peking Lnion Medical College Hospital , CAMS & PLMC , Beijing 100730, China)
Abstract : The virtual reality ( VR ) or augmented reality ( AR) -based simulators have been used to learn ocular
anatomy , ophthalmic examinations and surgery procedures. Students can easily understand complex concepts and
receive knowledge transfered through observation , imitation and participation. Most researches showed that these new tools improved learning efficiency , assist developing skills and improved the safety of surgical practice in early
careerhood , shedding light on reformation in ophthalmology education and teaching.
Key words : virtual reality ; augmented reality ; ophthalmology teaching ; surgical simulator
现今,越来越多的多媒体教学手段(如手机及 电脑教学应用软件)被应用于医学教学和培训中。
这些多媒体技术、数字信息和教学软件大大丰富了
当今医学生学习方法,提高了学习效率并且进一步 保障了医疗安全。
其中,新的可视化技术如虚拟现
实 ( virtual reality , VR ) 和 增 强 现 实 ( augmented
reality , AR )作为一种新兴的教学手段,已在医学教
学中广泛应用,给当代医学生创造了全新的学习环 境。
比如VR 或AR 技术被用于外科基本操作打结
培训、创伤整形外科手术培训、腔镜手术操作培训, 以及妇产科宫腔镜操作培训等。
而且多数研究都表
明这种教学方式可以提高学习效率、帮助学生更好 的掌握某种操作技能和提高医师执业初期在患者中
操作的安全性。
本文将结合VR 和AR 技术的发展 趋势,总结此两项技术在眼科教学中的应用现况和
进展。
邹绚虚拟现实与增强现实技术在眼科教学中的应用现状1745
1VR和AR技术的基本概念
VR技术源于20世纪60年代,是利用计算机技术生成逼真的视、听、触觉融合的三维虚拟环境,用户以特定设备与虚拟环境进行交互互动,从而获得与真实环境相同的体验和感受°与传统模拟技术相比,VR技术具有沉浸性、构想性和交互性3个主要特征。
在电脑构建的虚拟环境中,操作者可以通过设备对虚拟环境中的内容进行操作,被操作的物体也能够随之产生相应的变化和回应。
AR技术是一种实时计算摄影机影像位置及角度并加上相应图像的技术,将真实世界和虚拟世界合成在一个界面,把原本在现实世界内不存在的信息(视、听、味、触觉等)通过电脑技术模拟仿真后再叠加,将虚拟的信息应用到真实世界,从而达到超越现实的感官体验。
AR系统具有集成性、交互性和在三维空间中增添定位虚拟物体的3个主要特征°
2 VR与AR技术在眼解剖教学中的应用
眼球解剖是眼科学的教学基础,现今的医学教育理念仍将尸体解剖作为解剖教学的“金标准”,但是由于眼球结构非常精密微小,眼球解剖开后组织容易被破坏且难以保存,再加之受经费、伦理等限制,尸体解剖并不适用于眼科教学。
因此,目前传统的教学方式仍是传统授课和书本描述为主,图谱和眼球教学模型为辅。
学生在接触眼球解剖初期,常感抽象和难以理解,容易产生畏难心理°利用VR或AR技术构建正常人眼解剖结构的模拟系统,创造出的图像不仅具有立体感,而且还给人以真实感,以此进行教学可以增强课堂教学的生动性和形象性。
不仅如此,使用者还可以通过手柄对三维立体眼模型进行旋转、放大或缩小、拉近或拉远,可以直观地观察眼内结构(图1),从而更容易理解眼球解剖结构[1]°现在VR和AR技术已经广泛地应用于医学解剖教学中,市场上已经有不少可购买的产品(如Eye Sim, EON Reality Inc.,USA),多数研究表明学生对此种新兴的教学方式反馈良好,学生可以更快地掌握解剖学知识、更深入的理解解剖学结构[1],但是也有研究表明与传统的教学效果差别不明显或者差于传统的教学方法,并且因为学生需要佩戴VR头盔,学习时间难以维持太久(一般少于30min),会产生视疲劳等不适症状[2]°因此,将来通过对VR 或AR技术设备的改良,减轻学生使用后的视疲劳症状,是该技术发展的一个重要方向。
Hide Extras
Choroidal Arteries A
Arterial Circle(Iris)
Long Posterior Ciliary Arteries
Muscular Arteries
Anterior Ciliary Arteries
S hort Posterior Ciliary Artori
Anatomy]Animation
Internal Carotid Artery
Major Structures•
Ophthalmic Artery
Ocular
Retinal Arteries
图1VR技术显示的眼球结构示意图
Fig1Simulation of eye anatomy in VR technology
(EyeSim,EON Reality Inc.,USA)
3VR与AR技术在眼疾病教学中的应用让学生仅通过老师或书本的语言描述来理解眼病中患者的症状是比较抽象的,VR与AR技术可以构建三维立体场景模拟各种视觉障碍,比如视物模糊、视野缺损、视物变形、色觉障碍等。
例如芝加哥的伊利诺斯大学实验室(VRMedLab)使用VR技术虚构了生活场景来模拟青光眼、老年性黄斑变性和糖尿病视网膜病变的症状(图2),学生头戴VR头盔,便可身临其境地感受眼疾患者的症状[1]°
另外,本科医学生在实习过程中通常还不能熟练地掌握裂隙灯、双目间接眼底镜或前置镜的使用,而且对病变形态没有充分的理解,因此临床见习或实习时很难精确地在患者身上观察到疾病的体征。
利用VR和AR技术可以模拟出不同疾病体征(图3)[1],通过这种学习手段,学生可以反复观察学习病变形态,不仅可以更好的理解疾病的病理状态,还可以模拟参与这些虚拟眼疾患者的诊断和治疗工作。
因此,VR和AR技术在模拟眼科疾病的症状和体征上都有很广泛的应用前景,将来也可以通过此技术建立标准化病人库,用于眼科教学和考核°
1746基础医学与临床 Basic & Clinical Medicine 2020. 40(12)
A. VR 技术模拟老年性黄斑变性视觉障碍;
B. VR 技术模拟糖尿病视网膜病变视觉障碍;
C. VR 技术模拟青光眼视觉障碍
图2 VR 技术模拟各种眼疾症状⑴
Fig 2 Simulation of symptoms of eye diseases in VR technology
图3 VR 技术模拟糖尿病视网膜病变的眼底表现[1]
Fig 3 VR eye model showing retinal changes due
to diabetic retinopathy
4 VR 与AR 在眼科检查法和眼科操作中的 应用
使用VR 或AR 模拟器对学生进行眼科检查法 的训练,可以让学生在没有压力的情况下反复长时 间练习,从而避免直接检查对患者造成的不适。
VR
或AR 技术目前可以用于裂隙灯检查、直接检眼镜
检查和间接检眼镜检查的培训。
例如,使用双目间
接眼底镜显示的图像为倒向,且需要良好的手眼运
动协调,因此初学者通常难以掌握,需要反复实践练 习。
EyeSI BIO ( VRmagic , Manheim , Germany )是基
于AR 技术的双目间接眼底镜模拟系统,使用者戴
头镜,可以在真实的环境中使用模型镜(类似于传 统的20D 或28D )在患者模型上对虚拟的眼底图像
进行练习(图4)[3]O 双目间接检眼镜AR 模拟系统
还可以对使用者进行掌握程度的测验。
一项加拿大 的研究纳入了 28名第一年的眼科住院医,比较
EyeSI BIO 培训和传统培训后住院医技能的掌握情
况,表明EyeSI BIO 的教学效果要优于传统的教学
方法叫
除了眼科检查法培训,VR 或AR 技术还用于培
训激光小梁成型⑷、球后注射[5]、视网膜激光光
凝⑷等一些眼科操作的培训。
例如,一项研究比较 了 PixEye 氩激光小梁成型术模拟系统与传统教学
方法的教学效果。
研究纳入了 47名第5年的男性
医学生(VR 模拟系统组24人,传统教学组23名),
A.培训设备;
B.操作界面,使用者可以选择让虚拟患者向不同的方向注视
图4基于AR 技术的双目间接眼底镜培训⑶
Fig 4 AR simulator of binocular indirect
ophthalmoscopy
邹绚虚拟现实与增强现实技术在眼科教学中的应用现状1747经过培训后,学生进行激光小梁成型术的测验。
结
果显示VR模拟系统组激光射失率更低、过度激光
和激光不足的比例更低,而且两组差异显著,说明
PixEye模拟系统能够提高学生的学习效率,减少激
光相关的并发症等。
5 VR与AR在眼科手术培训中的应用
眼科手术模拟器的应用始于20世纪90年代初,目前在教学中使用最多的是Eye SI(VRmagic, Manheim,Germany)眼科手术模拟器(图5),此模拟器可以在显微镜下模拟手术中三维图像,对白内障和玻璃体手术进行模拟和培训,具有使用简单可控、仿真度高且能反复操作等优点。
可显著提高使用者显微镜下操作、白内障手术以及玻璃体手术等的掌握程度。
Eye SI白内障手术模拟器与实际手术中撕囊的过程有高度一致性,经过培训后,可以有效地提高眼科住院医在各个学习模块中的成绩,特别是撕囊和抗抖模块[7];可以缩短学习曲线,表现为在手术中超声乳化时间更短、所用能量更小,并且术中并发症更少⑻。
使用白内障手术模拟器的表现与现实中的手术操作也有显著的相关性⑼。
另外,模拟器能在一定程度上反映使用者的手术掌握情况,因此可 以通过住院医师课程培训的情况,预测日后手术的速度和表现[10]。
大部分参培住院医师认为模拟器训练非常重要和有效;但是,虽然初学者效果明显,Eye SI白内障手术模拟器对于手术经验丰富的医师则无明显的提高作用[11]。
除了白内障手术操作,手术模拟系统也可用于进行玻璃体手术的培训(图5B)。
使用者可以进行眼内基本显微操作训练、玻璃体切除、眼内激光、制作玻璃体后脱离、剥除内界膜等操作,通过训练可以不同程度的提高模拟器训练中的手术技巧,但是能否顺利转换到真实患者手术中,还有待进一步研究[12]。
参考文献:
[1]Jin B,Ai Z,Rasmussen M.Simulation of eye disease in virtual reality[C].Conf Proc IEEE Eng Med Biol Soc,
2005,5:5128-5131.
A.模拟器外观;
B.玻璃体手术操作实景界面
图5Eye SI(VRmagic)眼科手术模拟器
Fig5Eye SI(VRmagic)sugical simulator
6小结
在中国,近年来也有越来越多的医学院开始使用VR或AR设备进行眼科教学。
例如北京协和医学院眼科教学就将Eye SI手术模拟作为本科教学实习和眼科住院医培训的必修课。
学生通过培训,能基本掌握显微镜下的操作要领,较好地控制器械的位置和稳定性。
即使完全没有手术经验的本科生,通过短暂的培训也能有明显的提高,并对整个手术过程有更好的理解。
国内目前也出现了一些自主研发的教学设备,如上海皋城软件有限公司研发的眼球解剖VR软件,对三维眼球进行了立体重建,支持眼球组件的分层显示、组件剖切和实时标记;还包含裂隙灯操作及病例诊断功能等。
总之,AR和VR技术相关的眼科教学系统是建立在高科技信息技术之上的新型教学系统,在过去十年内发展迅速,而且具有广阔的发展前景。
虽然目前还有很多不足和不完善的地方,但仍是未来几十年内发展的趋势,将在医学教育和青年医生的培训方面起到举足轻重的作用。
AR和VR技术给眼科和其他医学教学改革提供了全新的思路,拓展了眼科教学的发展空间,善于应用AR和VR技术,有助于创建全新高效的课堂。
[2]Moro C,Stromberga Z,Raikos A,et al.The effectiveness
of virtual and augmented reality in health sciences and medical anatomy[J].Anat Sci Educ,2017,10:
549-559.
1748基础医学与临床Basic&Clinical Medicine2020.40(12)
[3]Rai AS,Mavrikakis E,Lam WC.Teaching binocular in
direct ophthalmoscopy to novice residents using an augmented reality simulator[J].Can J Ophthalmol,2017, 52:430-434.
[4]Alwadani F,Morsi MS.PixEye virtual reality training has
the potential of enhancing proficiency of laser trabeculoplasty performed by medical students:a pilot study[J].
Middle East Afr J Ophthalmol,2012,19:120-122. [5]Merril JR,Notaroberto NF,Laby DM,et al.The Oph
thalmic Retrobulbar Injection Simulator(ORIS):an application of virtual reality to medical education[J].Proc Annu Symp Comput Appl Med Care,1992:702-706. [6]Peugnet F,Dubois P,Rouland JF.Virtual reality versus
conventional training in retinal photocoagulation:a first clinical assessment[J].Comput Aided Surg,1998,3: 20-26.
[7]Sikder S,Luo J,Banerjee PP,et al.The use of a virtual
reality surgical simulator for cataract surgical skill assessment with6months of intervening operating room experi
ence[J].Clin Ophthalmol,2015,9:141-149.
[8]Jones RS.Reversal of atracurium neuromuscular block
with neostigmine in the dog[J].Res Vet Sci,1990,48:
96-98.
[9]Thomsen AS,Smith P,Subhi Y,et al.High correlation
between performance on a virtual-reality simulator and
real-life cataract surgery[J].Acta Ophthalmol,2017,
95:307-311.
[10]张潇,戴荣平,张美芬.手术模拟器在白内障手术训
练中的应用[J].基础医学与临床,2018,38:
1661-1664.
[11]Thomsen AS,Bach-Holm D,Kjaerbo H,et al.Operating
room performance improves after proficiency-based virtual
reality cataract surgery training[J].Ophthalmology,
2017,124:524-531.
[12]Rasmussen RC,Grauslund J,Vergmann AS.Simulation
training in vitreoretinal surgery:a systematic review[J].
BMC Ophthalmol,2019,19:90.
新闻点击
电子烟不能替代彻底戒烟
吸烟会危害人的心脏和肺部,即使换用电子烟也不会带来好处。
德国心脏病专家领导的小组发现,吸烟和烟内尼古丁都与心脏和肺部健康恶化有关。
戒烟仍然是预防吸烟引起的心血管和呼吸系统疾病的最有效方法。
在新的研究中,研究人员发现,与不吸烟相比,香烟和电子烟分别将慢性阻塞性肺疾病(COPD)的概率提高了约8倍和3倍。
研究发现,与不吸烟相比,香烟使患肺癌的风险增加了13倍以上。
研究人员说,由于肺癌进展的时间常常很多年,因此电子烟对肺癌风险影响的证据水平尚不足以得出可靠的结论。
但是,有充分的证据表明,与不吸烟相比,香烟增加了“动脉硬化风险”(这是心脏病风险的重要预测指标),而电子烟则使这一风险增加了7%。
该研究刊登于《欧洲心脏杂志》。
刘晓荻译
薛惠文编。