大数据平台在电力企业中的应用

收稿日期:20151106

作者简介:张君艳(1985-)

,女,工程师,主要从事电力信息化相关工作㊂大数据平台在电力企业中的应用

张君艳1,董 娜1,彭 伟2,郭禹伶1

(1.国网河北省电力公司电力科学研究院,石家庄 050021;2.华北电力大学,北京 102206

)摘要:大数据具有规模大㊁种类多㊁变化速度快㊁价值巨大但密度低的特点,大数据应用就是利用数据分析的方法从大数据中挖掘有效信息,为用户提供辅助决策,实现大数据价值的过程㊂从大数据的定义㊁特征及其平台三方面宏观介绍大数据技术研究现状,在此基础上分析大数据技术在电力企业中的应用,以电力信息通信客户服务系统中工单事件统计为例,展示了大数据平台的应用过程㊂

关键词:大数据;平台;H a d o o p

;统计中图分类号:T P 27;T P 14 文献标志码:B 文章编号:10019898(2016)01005303

A p p l i c a t i o no f

B i g D a t aP l a t f o r mi nE l e c t r i cP o w e rE n t e r p

r i s e Z h a n g J u n y a n 1,D o n g N a 1,P e n g W e i 2,G u oY u l i n g

1

(1.S t a t eG r i dH e b e i E l e c t r i cP o w e rR e s e a r c h I n s t i t u t e ,S h i j i a z h u a n g 0

50021,C h i n a ;2.N o r t hC h i n aE l e c t r i cP o w e rU n i v e r c i t y ,B e i j i n g 1

02206,C h i n a )A b s t r a c t :B i g d a t ah a s t h e c h a r a c t e r i s t i c s o fV o l u m e ,V a r i e t y ,V e l o c i t y a n dV a l u e .B y t h em e t h o d o f d a t a a n a l y s i s ,t h e a p p

l i c a -t i o n s o f b i g d a t a c a nm i n em a n y u s e f u l i n f o r m a t i o n .A n d t h i s c a n p r o v i d e a u x i l i a r y d e c i s i o n -m a k i n g f

o r u s e r s ,w h i c h c a nm a k e t h e v a l u e o f b i g d a t a c o m e t r u e .A n o v e r v i e ww a s g i v e n a b o u t t h e c u r r e n t s i t u a t i o n o f b i g d a t a f r o mt h r e e a s p

e c t s :t h e d e

f i n i t i o n ,f e a t u r e ,a n d t h ek e y t e c h n o l o

g y o f b i g d a t a .T

h e n ,a s u mm a r y o f t h e a p p l

i c a t i o no f t h eb i g d a t a t e c h n o l o g y i ne l e c t r i c p o w e r e n -t e r p r i s ew a s d e s c r i b e d .F i n a l l y ,t a k i n g t h e e v e n t o r d e r s t a t i s t i c s i n c u s t o m e r s e r v i c e s y s t e mf o r e x a m p l e ,t h i s p a p e r s h o w s t h e a p p l i c a t i o no f b i g d

a t a p l a t f o r m.K e y w o r d s :

b i g d a t a ;p l a t f o r m ;H a d o o p

;s t a t i s t i c s 随着云计算㊁

物联网㊁移动互联网等新兴信息技术的飞速发展,网络上的信息呈现出爆炸式增

长,并且这种增长速度还在不断加快[1

],这些信息

既包含人的,也包含各种物的㊂国际数据公司

(I D C )报告[2]

称,2011年全球被创建和复制的数据总量为1.8Z B (1Z B ʈ1021

B )

,在短短5年间增长了近9倍,而且预计这一数字将每2年翻一番,而且这个速度在2020年之前会继续保持下去,人类真正进入了一个数据的世界㊂大数据这一术语正是产生在全球数据爆炸增长的背景下,用来形容庞大的数据集合㊂如今,工业界㊁学术界甚至政府部门都对大数据产生了浓厚的兴趣㊂

1 大数据的概念与特征

大数据是一个涵盖多种技术的概念,是由数

量巨大㊁结构复杂㊁类型众多数据构成的数据集合,无法使用传统数据工具进行采集㊁处理㊁分析和管理的数据集,既包括传统结构化数据,也包括文本㊁图像㊁视频和音频等非结构化数据㊂一般意义上,大数据是指无法在有限时间内用传统I T 技术和软硬件工具对其进行感知㊁获取㊁管理㊁处理和服务的数据集合㊂

大数据具有数据体量巨大(V o l u m e

)㊁数据类型多(V a r i e t y )㊁数据流动快(V e l o c i t y )和数据潜在价值大(V a l u e )等 4V 特征㊂大数据的 大 主要体现在两个方面:一是数据集 大 到一定程度,可全面表现数据所描述的对象的特征或某种规律;二是数据的规模和复杂程度 大 到传统数据工具无法处理分析㊂大数据除了数据量庞大外,大数据还有一些其他的特征,这些特征决定了

㊃

35㊃V o l .35N o .1 河北电力技术 第35卷第1期F e b .2016 H E B E IE L E C T R I CP OW E R

2016年2月网络出版时间：2016-03-07 14:38:09

网络出版地址：/kcms/detail/13.1082.TM.20160307.1438.036.html