大数据分析及其在医疗领域中的应用-图文(精)
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
从而不断改进以获得更多利润。分布在全球各地的气象设备采集的气象数据通过互联网汇集并通
过挖掘分析后可用于预测天气情况,来自世界各地的地震监控仪采集的大量地下数据通过互联网收集形成大数据,采用数据挖掘方法分析并预测地震。大数据最早应用于电子商务领域,美国亚
马逊公司的电子商务平台每天获得大量的客户订单和消费数据,应用机器学习和数据挖掘方法分
数据的更新速度快。每天在线检查化验的人数快速增加,其数据也在快速更新。第三,电子病历
的数据类型包括了文本、图像、图形和视频等多类型数据。最重要的是电子病历数据中隐藏着极有价值的医疗和医学信息。通过数据挖掘方法可以挖掘出这些信息以便医生进一步分析患者的病
因,形成更好的治疗方案。
大数据给计算机科学与技术领域带来了以下
大数据的产生是一个快速的动态过程。Variety是
指数据的种类多,除了文字数据外,还包括图像、图形、视频以及声音等多媒体数据。Value
是指大数据中隐藏了具有高价值的信息,这些信息需要通过机器学习与数据挖掘方法才可能提取到。以医院电子病历数据为例,它是典型的大数据。首先,电子病历的数据量大。以一个小规模城市的数家医院形成的区域医疗系统为例,每天门诊量和住院病人人数都在数万人以上,每人每次的病历、检验数据可达到几个GB,因此每天的数据都在几个TB甚至数十个TB以上。其次,
大数据的产生也与其他领域的技术发展密
不可分。如生物遗传学领域近几年开展的一项巨
作者简介:邹北骥,男,中南大学信息科学与工程学院副院长,教授,博士生导师,教育部中南大学移动医疗重点实验室副主任,中国计算机学会CAD&CG专业委员会副主任,湖南省高等教育学会计算机教育专业委员会理事长;在医学图像分析领域承担多项国家自然科学基金研究项目,主持开展基于电子病历的大数据分析项目研发和基于移动平台的健康管理系统开发,先后在国际国内外重要学术刊物和会议上发表学术论文120余篇,其中
SCI收录20余篇,获得专利2项,湖南省科技进步奖1项,出版著作3部。bjzlou@CSU.edu.cn;bjzou@vip.163.com。
第7期
新视点
25
大工程——人类基因组计划,要对人类23对染色体基因中30亿个碱基对进行测序,其数据量之巨大,以至于当前高性能计算机系统都难以在
可接受的时间内完成[5】。高能物理实验一天产生
的数据高达几个TB,这些数据都在排队等待处
理,当前的计算系统已难以满足它们的处理要求了16]。
人们关注大数据的最重要原因是因为大数据
中隐藏着具有丰富价值的信息。互联网上传递的
商品订购信息反映了消费者的意向、对商品质量
的评价等,于是不断地收集互联网上的这些信息
并进行挖掘分析将有助于企业分析其产品前景,
析这些数据,发现了商品销售中的关联性,如商品A和商品B经常被客户同时购买,于是有意识地将这两种商品(也许它们是毫不相干的两类
商品)摆在同一个货架上,使得商品的销售量大增。这就是典型的大数据分析的结果。因此大数据时代我们所要做的事情就是对隐藏于大数据中有价值的信息进行分析与挖掘,以便利用它们为
人类服务。
年里发生了翻天覆地的变化,彻底地改变了人们的工作和生活方式【l】。通过互联网人们不仅可以下载到新闻、小说、论文等各类文字数据,而且可以轻而易举地下载到音乐、图像和视频等多媒体数据,这使得互联网上的数据流量急剧增长。据统计,现在互联网上每分钟流人流出的数
据量达到1
000
PB,即10亿
GBt21。
推动大数据产生的另一个重要因素是物联网技术。近几年发展起来的物联网技
第7期
24
2014年4月10日
计算机教育
ComputerEducation
◆新视点
文章编号:1672.5913(2014)07—0024-06
中图分类号:G642
大数据分析及其在医疗领域中的应用
邹北骥
(中南大学信息科学与工程学院,湖南长沙410083)
摘要:互联网和物联网技术的快速发展给数据的上传与下载带来了前所未有的便利,使得互联网上
的数据量急剧增长,由此产生了针对大数据的存储、计算、分析、处理等新问题,尤其是对大数据的挖掘。文章分析当前大数据产生的背景,阐述大数据的基本特征及其应用,结合医疗领域,论述医疗
大数据分析的目的、意义和主要方法。
关键词:大数据;物联网;医疗;大数据挖掘
1
大数据早已存在,为何现在称之为大
数据时代
计算与数据是一对孪生姐妹,计算需要数据,数据通过计算产生新的价值。数据是客观事
2
大数据的特征与计算系统面临的新问题
来自于各个领域的大数据尽管代表着不同的
事物,隐藏着不同的价值信பைடு நூலகம்,但都具备4个重
要特征,称为4V特征,即Volume(大容量)、
Velocity(快速更新)、Variety(多类型)和Value(高
价值)。所谓Volume是指数据量极大,虽然没有一个绝对的容量标准,但一般都在数十个TB以上。Velocity是指数据产生和更新的速度很快,
的新问题和挑战。
(1)大数据的存储。大数据一般来自互联网,是动态的多类型数据。尽管当前的存储器容量在不断增加,但选择一种什么样的结构来存储大数
据以便能更好地存取是一个需要解决的问题。以电子病历数据为例,多家医院产生的电子病历数
据是集中存储于某一个医院还是分布式存储于各家医院,这里不仅有一个管理、隐私和医院利益的问题,也有技术上实现的问题,有待进一步研究。近几年发展起来的云存储或许是一种很好的选择。借助于第三方提供的云存储服务,在保证数据安全和各个医院权益的条件下,各家医院可
术通过给每个物品贴上标签
并应用RFID等技术实现了
各类物品信息的快速采集【3】。如新研发的各种穿戴式设备可实时在线获取人体运动过程中的各种
数据,各类带有USB接口或网络接口的电子仪器可迅速地将仪器中的数据上传到互联网并进入计算系统H】,智能化生产过程中产生的各种数
据、GPS导航系统和飞机汽车等现代交通工具在行进中产生的数据均可通过移动互联网上传。所有这一切表明,由于互联网技术的发展和物联网技术的推动,使得原本存在的大数据可快速地进入到计算系统,大数据时代到来了。
物的定量表达,来自于客观世界并早已存在。例
如,半个世纪前,全球的人口数量就有数十亿,与之相关的数据就是大数据;但是在那个时代,由于技术的局限性,大数据的采集、存储和处理
还难以实现。
互联网时代之前,采集世界各地的数据并让它们快速地进入计算系统几乎是一件不可想象的
事情。20世纪80年代兴起的互联网技术在近30
过挖掘分析后可用于预测天气情况,来自世界各地的地震监控仪采集的大量地下数据通过互联网收集形成大数据,采用数据挖掘方法分析并预测地震。大数据最早应用于电子商务领域,美国亚
马逊公司的电子商务平台每天获得大量的客户订单和消费数据,应用机器学习和数据挖掘方法分
数据的更新速度快。每天在线检查化验的人数快速增加,其数据也在快速更新。第三,电子病历
的数据类型包括了文本、图像、图形和视频等多类型数据。最重要的是电子病历数据中隐藏着极有价值的医疗和医学信息。通过数据挖掘方法可以挖掘出这些信息以便医生进一步分析患者的病
因,形成更好的治疗方案。
大数据给计算机科学与技术领域带来了以下
大数据的产生是一个快速的动态过程。Variety是
指数据的种类多,除了文字数据外,还包括图像、图形、视频以及声音等多媒体数据。Value
是指大数据中隐藏了具有高价值的信息,这些信息需要通过机器学习与数据挖掘方法才可能提取到。以医院电子病历数据为例,它是典型的大数据。首先,电子病历的数据量大。以一个小规模城市的数家医院形成的区域医疗系统为例,每天门诊量和住院病人人数都在数万人以上,每人每次的病历、检验数据可达到几个GB,因此每天的数据都在几个TB甚至数十个TB以上。其次,
大数据的产生也与其他领域的技术发展密
不可分。如生物遗传学领域近几年开展的一项巨
作者简介:邹北骥,男,中南大学信息科学与工程学院副院长,教授,博士生导师,教育部中南大学移动医疗重点实验室副主任,中国计算机学会CAD&CG专业委员会副主任,湖南省高等教育学会计算机教育专业委员会理事长;在医学图像分析领域承担多项国家自然科学基金研究项目,主持开展基于电子病历的大数据分析项目研发和基于移动平台的健康管理系统开发,先后在国际国内外重要学术刊物和会议上发表学术论文120余篇,其中
SCI收录20余篇,获得专利2项,湖南省科技进步奖1项,出版著作3部。bjzlou@CSU.edu.cn;bjzou@vip.163.com。
第7期
新视点
25
大工程——人类基因组计划,要对人类23对染色体基因中30亿个碱基对进行测序,其数据量之巨大,以至于当前高性能计算机系统都难以在
可接受的时间内完成[5】。高能物理实验一天产生
的数据高达几个TB,这些数据都在排队等待处
理,当前的计算系统已难以满足它们的处理要求了16]。
人们关注大数据的最重要原因是因为大数据
中隐藏着具有丰富价值的信息。互联网上传递的
商品订购信息反映了消费者的意向、对商品质量
的评价等,于是不断地收集互联网上的这些信息
并进行挖掘分析将有助于企业分析其产品前景,
析这些数据,发现了商品销售中的关联性,如商品A和商品B经常被客户同时购买,于是有意识地将这两种商品(也许它们是毫不相干的两类
商品)摆在同一个货架上,使得商品的销售量大增。这就是典型的大数据分析的结果。因此大数据时代我们所要做的事情就是对隐藏于大数据中有价值的信息进行分析与挖掘,以便利用它们为
人类服务。
年里发生了翻天覆地的变化,彻底地改变了人们的工作和生活方式【l】。通过互联网人们不仅可以下载到新闻、小说、论文等各类文字数据,而且可以轻而易举地下载到音乐、图像和视频等多媒体数据,这使得互联网上的数据流量急剧增长。据统计,现在互联网上每分钟流人流出的数
据量达到1
000
PB,即10亿
GBt21。
推动大数据产生的另一个重要因素是物联网技术。近几年发展起来的物联网技
第7期
24
2014年4月10日
计算机教育
ComputerEducation
◆新视点
文章编号:1672.5913(2014)07—0024-06
中图分类号:G642
大数据分析及其在医疗领域中的应用
邹北骥
(中南大学信息科学与工程学院,湖南长沙410083)
摘要:互联网和物联网技术的快速发展给数据的上传与下载带来了前所未有的便利,使得互联网上
的数据量急剧增长,由此产生了针对大数据的存储、计算、分析、处理等新问题,尤其是对大数据的挖掘。文章分析当前大数据产生的背景,阐述大数据的基本特征及其应用,结合医疗领域,论述医疗
大数据分析的目的、意义和主要方法。
关键词:大数据;物联网;医疗;大数据挖掘
1
大数据早已存在,为何现在称之为大
数据时代
计算与数据是一对孪生姐妹,计算需要数据,数据通过计算产生新的价值。数据是客观事
2
大数据的特征与计算系统面临的新问题
来自于各个领域的大数据尽管代表着不同的
事物,隐藏着不同的价值信பைடு நூலகம்,但都具备4个重
要特征,称为4V特征,即Volume(大容量)、
Velocity(快速更新)、Variety(多类型)和Value(高
价值)。所谓Volume是指数据量极大,虽然没有一个绝对的容量标准,但一般都在数十个TB以上。Velocity是指数据产生和更新的速度很快,
的新问题和挑战。
(1)大数据的存储。大数据一般来自互联网,是动态的多类型数据。尽管当前的存储器容量在不断增加,但选择一种什么样的结构来存储大数
据以便能更好地存取是一个需要解决的问题。以电子病历数据为例,多家医院产生的电子病历数
据是集中存储于某一个医院还是分布式存储于各家医院,这里不仅有一个管理、隐私和医院利益的问题,也有技术上实现的问题,有待进一步研究。近几年发展起来的云存储或许是一种很好的选择。借助于第三方提供的云存储服务,在保证数据安全和各个医院权益的条件下,各家医院可
术通过给每个物品贴上标签
并应用RFID等技术实现了
各类物品信息的快速采集【3】。如新研发的各种穿戴式设备可实时在线获取人体运动过程中的各种
数据,各类带有USB接口或网络接口的电子仪器可迅速地将仪器中的数据上传到互联网并进入计算系统H】,智能化生产过程中产生的各种数
据、GPS导航系统和飞机汽车等现代交通工具在行进中产生的数据均可通过移动互联网上传。所有这一切表明,由于互联网技术的发展和物联网技术的推动,使得原本存在的大数据可快速地进入到计算系统,大数据时代到来了。
物的定量表达,来自于客观世界并早已存在。例
如,半个世纪前,全球的人口数量就有数十亿,与之相关的数据就是大数据;但是在那个时代,由于技术的局限性,大数据的采集、存储和处理
还难以实现。
互联网时代之前,采集世界各地的数据并让它们快速地进入计算系统几乎是一件不可想象的
事情。20世纪80年代兴起的互联网技术在近30