计算机与大数据分析

计算机与大数据分析

XX学校

XX学院

XX专业

XXX

2019年XX月XX日

目录

一．摘要

二．计算机技术现状分析

三．大数据现状分析

四．计算机技术在大数据时代的关系与应用

1.存储—大数据时代的基础

2.数据安全—大数据时代的保证

3.自动推演—大数据在计算机技术下的升级五．总结

六．参考文献

一．摘要：计算机与大数据分析在近年来，都是备受关注的两个词汇。计算机的运算，分析与统计归类的功能为我们提供了更多的便利。而大数据分析也是被运用在各方各面，比较突出的方面：市场经济调控、灾难预警、天气预警、医药效果风险分析、企业风险识别、提供营销的准确性等等。大数据的分析，其实就是巨量资料的统计与归类，但是它庞大的工作量若是依靠人工来计算是不可能的，所以我们发现这些年来大数据与计算机的关联可以说是密不可分的。基于此，本文将针对这种技术的内容和相关解决问题的措施，提出大数据背景下的计算机技术并加以分析，便于更好的利用计算机获得更为精准的数据，促进计算机的技术发展。

关键词：计算机与大数据，存储，数据安全，自动推演

二．计算机技术现状分析

随着电子信息与大数据的发展，现代计算机技术在以前所未有的速度更新与发展。现代计算机技术相比较于传统计算机技术，它的信息处理效率，运行速度，精准性都有极大程度的提高，并且计算机的制作成本和体积都在不断的降低。计算机技术连接着生活的方方面面，也逐步形成了一个比较完整，比较全面的领域。尤其在信息的四面体：Processing, Storage, Transmission, Input Output上逐渐趋于完备。无论是DRAM硬盘的代代发展还是核心芯片的研制，都使现代计算机向着更高能，更高效，更高速的方向前进。

为了更好的发展，又分生出几大子学科：EE、EECS、能源工程、软件工程、网络工程、信息安全、物联网工程、数字媒体技术、智能科学与技术等等门类。全面覆盖生活各个角落，通讯，电网，动力系统模型与设计，信号分析与控制等等。我就拿通讯举例，最近很受大家关注的就是国内5G通讯系统的发展。简单地说5G是新一代的移动通信，相比较前几代，它将采用新的无线传输设备和新的系统结构，新挖掘频率资源，使资源利用率更高，数据传输更高效，速度更快。其中5G采用的新型技术：D2D技术，新型网络架构，高频段传输，同频同时双工技术等核心技术，都是基于现代计算机技术的发展。5G既是专注于通讯方面的无线瓶颈突破，又是现代计算机与互联网的新时代发展。①“LDPC码是1962年美国教授提出的编码原理，Polar码是2008年土耳其教授提出的编码原理，在此基础上数十年来几十家公司上万人进行了工程化研究。3GPP选择了LDPC码和Polar码分别成为了5G的数据和控制信道编码，使其成为了5G标准的一部分。”从华为集团关于5G的声明中，我们就可以窥知一二。

三．大数据现状分析

大数据的时代，就是海量数据与大量计算结合的结果，一般数据是伴随着互联网的运行而产生的，大数据的运算就是对产生的数据加以收集，计算和分析。人们普遍将该定义概括为四个“V”，即更大的容量（Volume，从TB级跃升至PB级，甚至EB级）、更高的多样性（Variety，包括结构化、半结构化和非结构化数据），以及更快的生成速度（Velocity）。前面三个“V”的组合推动了第四个因素——价值（Value）。大数据时代对人们生产生活都提供了一个更加便利的方式。是人们更加明晰，更加能从宏观数据中洞察细微。我们从大数据的存在特点和发展现状上可以发现这样一些事情：

1.自从互联网时代到来之后，其实就意味着大数据时代的到来。现在很多的企业通过用户

的个人端的点击获得大量的数据，也就是用户的点击行为数据。我们可以查到iphone 手机内置三个传感器，三星内置六个传感器，通过后台对这些移动设施点击数据的收集，就可以得到用户的行为规律，可以用来更好的优化产品和开拓新业务。

2.通过用户点击行为产生的海量数据实则是人们行为特点和生活习性的另一方面的展示，

大数据的特点是它可以更加科学，可以从数据的波动中探知用户的社交行为。

3.现在网上电商的发展更加仰仗大数据，电商在网上的交易数据信息，也就是一些搜索行

为，支付行为，物流查询和喜好分析等，为电商提供了更加精准的信息和喜好数据。

4.如今的大数据与过去的大数据有所不同，它的产生方式，存储载体，访问方式，表现形

式，来源特点等都与传统的数据不同，数据更接近于某个群体行为数据，它是全面的数据、准确的数据、有价值的数据。

5.中国目前的大数据应用环境和技术相对于美国而言，在整体技术水平、应用环境、国民

意识、商业环境、技术厂商、技术平台上面相差超过5年左右。在大数据应用的国家战略层面落后的也较多。也就是说中国的大数据发展之路任重而道远。

6.中国正处在全面建成小康社会征程中，工业化、信息化、城镇化、农业现代化任务很重，

建设下一代信息基础设施，发展现代信息技术产业体系，健全信息安全保障体系，推进信息网络技术广泛运用，是实现四化同步发展的保证。大数据分析对我们深刻领会世情和国情，把握规律，实现科学发展，做出科学决策具有重要意义。

其实我们可以从以上几点，简单的综合一下。大数据对当今社会的发展有着非同一般的意义，也足以被应用于各行各业。这也是由于大数据时代的四大特点：一是数量庞大，二是数据类型多样，三是处理计算速度快，四是价值密度低。其实前三点很好理解，我也就不再加以赘述，我简单的阐述一下第四个特点价值密度低，由于数据的庞大与繁杂，正好与精简和高浓度所对立，用我在书上看到的一个视频的例子来说，视频的时长越长，有价值的内容就会越零散。

2015年8月，《国务院关于印发促进大数据发展行动纲要的通知》明确了大数据发展的指导思想、发展目标和发展任务，标志着大数据已成为重要战略资源，大数据发展将充分享受政策红利。中投顾问发布的《2019-2023年中国大数据行业投资分析及前景预测报告》共十三章。首先介绍了大数据和大数据产业的定义、特点、地位等，接着分析了国内外大数据行业的发展及行业格局，然后分析了大数据产业链的上中下游行业发展状况，并对大数据软硬件设备、大数据发展模式、重点区域大数据产业发展布局等进行了细致的透析。

根据②《2019-2023年中国大数据行业投资分析及前景预测报告》中“2017，我国大数据在政策、技术、产业、应用等多个层面均取得显著进展。数据显示，2017年我国大数据产业规模为4700亿元人民币，同比增长30%。在这其中，大数据软硬件产品的产值约为234亿元人民币，同比增长39%。上述资料显示，大数据行业发展提速。”可以看到近年来大数据的迅猛发展。

四．计算机技术在大数据时代的关系与应用

1.存储—大数据时代的基础

完善云存储需要多个方面共同配合，也可以说是硬件与软件的完美配合，还是DRAM硬盘的代代发展与中存储的优化之间的配合。在存储的过程中，硬件塑造基础，软件优化过程，相互配合，相互合作。更加智能化和自动化的存储管理，可以对数据进行迅速而快捷的处理，最后展现给用户的将是一个完整的存储空间和方便的资源分类。存储的发展完善将更加减少人员的投入，提供给用户更高的工作效率，减少了很多数据的管理成本，节约了大量资源。更加科学完整的存储系统才是大数据时代下的基础。打好这一坚实基础，才能更好的向其他方向发展与延伸。

大数据并不是一成不变的数据，更多的时候是动态的数据，它会不断的追加新的数据。比如一些监测数据，常见的有出行订票，购物记录，出入记录，出租车行驶记录，股票交易记录等等。大数据的性质决定了它不能用寻常的存储方式，为了能够提供快速、稳定地存取这些数据，至少得依赖于磁盘阵列。同时还得通过分布式存储的方式将不同区域、类别、级别的数据存放于不同的磁盘阵列中。

除此之外，就是计算机的组件，有一些数据库也纷纷完善自己的组件。如MySQL提供了MySQL proxy组件，实现了对请求的拦截，结合分布式存储技术，从而可以将一张很大的表