大数据论文
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
大数据时代
摘要:随着物联网、移动互联网、智能便携终端和云计算技术的发展,人类社会进入了“大数据”时代。对于数据分析,这无疑是一个前所未有的黄金时代。现在,几乎每个人的衣袋都有一部可以随时联网的智能手机,更强大的平板电脑则安静的躺在数亿人的手提包里,加之久久没有退出历史舞台的个人电脑和方兴未艾的物联网中的电子设备,这个世界,每时每刻有数以百亿计的电子精灵在产生数据,一个崭新的数据爆炸时代正喷薄而出。大数据在社会经济、政治、文化,人们生活等方面产生深远的影响,大数据时代对人类的数据驾驭能力提出了新的挑战与机遇。
关键词:大数据数据爆炸海量发展影响
一、大数据的概念及形成
1、大数据的概念
"大数据"是一个体量特别大,数据类别特别大的数据集,并且这样的数据集无法用传统数据库工具对其内容进行抓取、管理和处理。狭义的大数据概念,主要指大数据技术及其应用,是指从各种各样类型的数据中,快速获得有价值信息的能力,一方面,强调从海量数据、多样数据提取微价值,即具有价值(Value)特征;另一方面,强调数据获取、数据传递、数据处理、数据利用等层面的高速高效,即具有快速处理(Velocity)特征。大数据概念里的“数据”,是指具有可追踪、可分析、可量化特性的数据。大数据概念里的“大”,是指“大
数据”所应具有的“大量化”(Volume)、“多样化”(Variety)两个特征。从概念内涵上讲,“大数据”(Big Data),一方面,反映的是规模大到无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合;另一方面,主要是指海量数据的获取、存储、管理、分析、挖掘与运用的全新技术体系。
事实上,大数据的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。换言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。很显然,挖掘大数据价值、提供大数据服务的能力,是大数据时代的核心竞争力。
2、大数据形成的必然性
数据管理理念不断变革,大数据成为信息技术发展的必然选择。随着现代信息传播技术手段和方式不断丰富,信息获取、信息传递、信息处理、信息再生、信息利用等功能应用日益多样化,智能化信息系统逐渐形成一个信息网络体系,人类社会的生产方式、工作方式、学习方式、交往方式、生活方式、思维方式等发生了极其深刻的变革,互动化、即时性、全媒体等,成为常态性的信息生态环境,传统的数据库组织架构和信息服务模式已经难以适应信息社会现实需要,整个信息技术架构的革命性重构势在必行,大数据成为信息技术发展的必由之路。
大数据源于虚拟网络的迅速发展和现实世界的快速网络化。虚拟网络的迅速发展和现实世界的快速网络化,两者交互影响,最终导致海量数据的持续生成和繁杂数据的不断出现。
大数据成了决定我们未来数字生活方式的重大技术命题,几乎所有世界级的互联网企业,都将业务触角延伸至大数据产业;无论社交平台逐鹿、电商价格大战还是门户网站竞争,都有它的影子;美国政府投资2亿美元启动“大数据研究和发展计划”,更将大数据上升到国家战略层面。2013年,大数据正由技术热词变成一股社会浪潮,将影响社会生活的方方面面。
二、大数据的五个特点
1、类型多。大数据分为结构化数据和非结构化数据。结构化数据包括“1、
2、
3、4”等传统数字以及符号,非结构化数据包括网络日志、音频、视频、图片、地理位置信息等。
2、容量大。根据IDC(国际数据公司)的监测统计,2011年全球数据总量已经达到1.8ZB,而这个数值还在以每两年翻一番的速度增长,预计到2020年全球将拥有35ZB的数据量,增长近20倍。
3、存取速度快。存取速度快有两个意思。一是数据产生的快;二是数据处理的快
4、应用价值大。大数据之“大”,其实并不在于其表面的“大容量”,而在于其潜在的“大价值”.如果不能把拥有的数据转化为价值,那么拥有再多的数据也是毫无意义的。
5、具备大智能。正是因为大数据拥有的“大价值”,才使得大数据有机会成为社会的财富和创新的基础,是大数据能够像土壤一样,在不久的将来孕育出一个更加智能的社会。
三、大数据应用的现状分析
最早提出世界已经迎来“大数据”时代的机构则是全球知名的咨
询公司——麦肯锡。麦肯锡在其研究报告中指出:数据已经渗透到每一个行业和业务职能领域,逐渐成为重要的生产因素;而人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。
事实上,全球IT业巨头都已经意识到数据的重要意义和“大数据”时代的到来。包括IBM、EMC、惠普、微软在内的全球知名跨国公司都陆续通过收购与“大数据”相关的厂商来实现技术整合。目前典型的大数据应用领域有:商业智能。例如:用户行为分析,即结合用户资料、产品、服务、计费、财务等信息进行综合分析,得出细致、精确的结果,实现对用户个性化的策略控制,这在营销网络的流量经营分析中占有越来越举足轻重的地位。公共服务。一方面,公共机构可以利用大数据技术把积累的海量历史数据进行挖掘利用,从而提供更为广泛和深度的公共服务,如实时路况和交通引导;另一方面,公共机构也可以通过对某些领域的大数据实时分析,提高危机的预判能
力,如疾病预防、环境保护等,为实现更好、更科学的危机响应提供技术基础。政府决策。通过对数据的挖掘,从而有效提高政府决策的科学性和时效性。
四、大数据时代对生活、工作的影响
大数据,其影响除了经济方面的,它同时也能在政治、文化等方面产生深远的影响,大数据可以帮助人们开启循“数”管理的模式,也是我们当下“大社会”的集中体现,三分技术,七分数据,得数据者得天下。
“大数据”的影响,增加了对信息管理专家的需求。事实上,大数据的影响并不仅仅限于信息通信产业,而是正在“吞噬”和重构很多传统行业,广泛运用数据分析手段管理和优化运营的公司其实质都是一个数据公司。大数据在个人隐私的方面,大量数据经常含有一些详细的潜在的能够展示有关我们的信息,逐渐引起了我们对个人隐私的担忧。一些处理大数据公司需要认真的对待这个问题。
总结:这是一个信息爆炸的时代,大数据时代的到来给国家和个人带来了很多机遇,同时也带来了很多挑战。在当下的大数据时代,大数据只是冰山一角,其中的大部分都隐藏在冰山之下,因此大数据还有很多方面值得我们去发现和探索。
参考文献:王珊《架构大数据:挑战、现状与展望》