大数据技术中的科学使命与人文精神
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
大数据技术中的科学使命与人文精神21世纪是信息大爆炸的时代,互联网技术高速发展,生产生活以及科学研究都会产生大量的数据。在这样一个“大数据”时代,通过整合、分析、挖掘数据,将数据的内在联系和关键部位进行提取,展现数据体现的现象,将会被越来越多的领域应用,也将是未来的社会发展趋势。
大数据是一个不断演变的概念,当前的兴起,是因为从IT 技术到数据积累,都已经发生重大变化。当今世界,大数据无处不在,它影响到了我们的工作、生活和学习,并将继续施加更大的影响。
“大数据”的名称来自于未来学家托夫勒所著的《第三次浪潮》。尽管“大数据”这个词直到最近才受到人们的高度关注,但早在1980年,著名未来学家托夫勒在其所著的《第三次浪潮》中就热情地将“大数据”称颂为“第三次浪潮的华彩乐章”。《自然》杂志在2008年9月推出了名为“大数据”的封面专栏。从2009年开始“大数据”才成为互联网技术行业中的热门词汇.最早应用“大数据”的是麦肯锡公司(McKinsey).对“大数据”进行收集和分析的设想,来自于世界著名的管理咨询公司麦肯锡公司。麦肯锡公司看到了各种网络平台记录的个人海量信息具备潜在的商业价值,于是投入大量人力物力进行调研,在2011年6月发布了关于“大数据”的报告,该报告对“大数据”的影响、关键技术和应
用领域等都进行了详尽的分析。麦肯锡的报告得到了金融界的高度重视,而后逐渐受到了各行各业关注。
“大数据”的特点由维克托•迈尔-舍恩伯格和肯尼斯•库克耶在《“大数据”时代》中提出维克托•迈尔-舍恩伯格和肯尼斯•克耶编写的《大数据时代》中提出:“大数据”的4V特点:
Volume(数据量大)
Velocity(输入和处理速度快)
Variety(数据多样性)
Value(价值密度低)
所有联网的东西,电脑、手机、ipad、智能手表、智能电器.... 包括我们人也是数据的来源,社会就可以比喻成一个超大的数据库,我们每个人都是这个数据库的数据来源,每天几点起床、吃饭、运动等等都是数据。若我们能充分利用已有的数据进行深度的分析和挖掘,便可能得出许多结论和对未来的猜测,根据分析结果制定相应的方案。
从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘。但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的
技术,包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。大数据离不开云处理,云处理为大数据提供了弹性可拓展的基础设备,是产生大数据的平台之一。自2013年开始,大数据技术已开始和云计算技术紧密结合,预计未来两者关系将更为密切。除此之外,物联网、移动互联网等新兴计算形态,也将一齐助力大数据革命,让大数据营销发挥出更大的影响力。
想要系统的认知大数据,必须要全面而细致的分解它,着手从三个层面来展开:第一层面是理论,理论是认知的必经途径,也是被广泛认同和传播的基线。在这里从大数据的特征定义理解行业对大数据的整体描绘和定性;从对大数据价值的探讨来深入解析大数据的珍贵所在;洞悉大数据的发展趋势;从大数据隐私这个特别而重要的视角审视人和数据之间的长久博弈。
第二层面是技术,技术是大数据价值体现的手段和前进的基石。在这里分别从云计算、分布式处理技术、存储技术和感知技术的发展来说明大数据从采集、处理、存储到形成结果的整个过程。
第三层面是实践,实践是大数据的最终价值体现。在这
里分别从互联网的大数据,政府的大数据,企业的大数据和个人的大数据四个方面来描绘大数据已经展现的美好景象及即将实现的蓝图。
然而,事物都具有两面性。大数据同样面临机遇与挑战。
1.大数据面临的机遇
大数据在数据挖掘和应用方面成为核心,从多个方面创造价值。根据麦肯锡的测算,大数据的应用每年可潜在为美国医疗健康行业和欧洲政府分别节省3000亿美元和1000亿欧元,利用个人位置信息潜在可创造6000亿美元的市场价值,因此大数据具有超万亿的大市场。
大数据安全问题日益重要,为信息安全领域带来发展契机。伴随移动互联网的兴起,大数据使数据价值极大的提高,大量的数据也对信息安全提出了更高的要求。信息安全和云计算贯穿于大数据的各个环节,云安全等关键技术将为大数据提供更好的保护作用。大数据对信息安全的要求也将更好的促进和推动信息安全技术的发展。
大数据将全面推动商业智能的发展。商业智能概念在1996年由加特纳集团提出,描述了通过应用基于事实的支持系统来辅助商业决策的制定。商业智能技术包括收集、管理和分析数据,将数据转化为有用信息,提供了使企业迅速分析大数据应用及未来展望
摘要:大数据应用及未来展望,紧跟互联网+,便捷未来人们的生活,方便用户。畅想未来人与人之间的联系,从社交网络、社区文化,到“六度空间”;展望教育对于国家的希望,大数据和教育整合、合理的早教,对个人的帮助,对社会和国家的贡献;帮助病人的控制病情,并发病等,结合医疗平台,预测依照现有的生活方式,对个人的影响度,精确医疗救助,帮助老人送诊就医;减少自然灾害对人类,对生态环境的影响,“蝴蝶效应”预测自然灾害的发生;从开发者角度,整合用户数据,适应市场变化,用户需求,猜“你”喜欢,开发出满足用户需求的应用;大数据和人脸识别的结合应用,人脸分析,动态推送广告,全“自动”,非“手动”应用,强调人和人之间的猜“你”喜欢的全新的社交方式。大数据在未来的应用必将更加广泛,如何获取大数据,掌握大数据,提取大数据,整合大数据,关系到人们未来生活的方方面面,谁掌握了大数据,就掌握了未来!
关键字:大数据;应用;社交;教育;医疗;自然灾害;应用开发;人脸识别;
社会网络到社交文化
1.1 社会网络。
过去的10年,是社交网络的10年,从twitter到facebook,到中国的qq,微信,社交网络逐渐渗透到日常生活中,腾讯大数据信息统计,qq日接入消息数:30,000亿,微信平均“日登录用户”5.7亿。大量用户在互联网的社交平台上,建立大量多元化联系。社交拉进了人与人之间的距离,以个体为中心的社会网络向外辐射,又与各个群体产生联系。社会是相互联系的,不是一盘散沙,若有若无的保存着一种联系。关系型社交到非关系型社交再到关系型社交,人与人之间的距离真的只有那么近!关于社交文化的研究会是一个大数据应用方向。