基于自相似业务流的Hurst加权随机早检测算法

合集下载

基于时间滑动窗口的自适应加权随机抽样算法

基于时间滑动窗口的自适应加权随机抽样算法

基于时间滑动窗口的自适应加权随机抽样算法唐达;刘畅;岳前进;张建英【摘要】为了构建传感器网络流数据的概要数据,给出了一种基于时间滑动窗口的自适应加权随机抽样算法:AWRS/BTSW算法.算法根据流数据的到达时间和变化情况,赋予流数据一定的键值,根据流数据的键值并结合skipping因子生成概要数据.在深海平台监测系统中,流数据变化不确定,算法可以根据数据的变化情况动态调整抽样方式,在数据变化不稳定的情况下,生成概要数据的准确性高;在数据变化稳定的情况下,生成概要数据的效率高.%To obtain the synopsis data of the stream data from the sensor networks, an adaptive weighted random sampling algorithm, AWRS/BTSW algorithm, is provided based on time sliding window. Firstly, the algorithm assigns a key value to a stream data according to its arrival time and changes; then, based on the key value and skipping factor, the algorithm generates synopsis data. In the deep sea platform monitoring system, the change of stream data is unknown. The algorithm can dynamically adjust sampling according to data variation. If the data is stable, it generates synopsis data efficiently. Even if the data is unstable, it also generates accurate synopsis data.【期刊名称】《大连理工大学学报》【年(卷),期】2012(052)005【总页数】4页(P772-775)【关键词】流数据;AWRS/BTSW算法;键值;skipping因子【作者】唐达;刘畅;岳前进;张建英【作者单位】大连理工大学计算机科学与技术学院,辽宁大连116024;大连理工大学计算机科学与技术学院,辽宁大连116024;大连理工大学工程力学系,辽宁大连116024;大连理工大学计算机科学与技术学院,辽宁大连116024【正文语种】中文【中图分类】TP310 引言深海平台监测系统通过分析传感器网络上采集到的数据,来确定不同的因素对该平台的影响.从传感器上采集到的数据是随时间不断变化的,具有连续、无界两个特点,即为流数据[1].深海平台监测系统需要管理这类流数据,以便用户查询.对流数据的查询通常是连续的,当新数据到达时增量式地返回结果.在深海平台监测系统中,用户查询仅仅需要一个近似结果,并不需要获得精确的查询值,由于存储容量的有限性,将所有流数据都保存起来不现实,也没有必要.为实现对流数据的存储,需要设计一个保存原始流数据的特征,规模上远小于原流数据的概要数据结构(synopsis data structure)[2].本文对此进行研究.1 概要数据构建技术概要数据构建技术主要有直方图(histogram)技术[3]、小波(wavelet)技术[4]和抽样(sampling)技术.直方图技术只能反映数据的大致轮廓和分布特征,小波技术是从数据集中抽取小部分数据样本,并根据样本近似恢复数据集,相对复杂,两种构建技术构建的概要数据均不能满足流数据快速、连续查询的要求.抽样技术生成概要数据的效率高,能满足流数据快速、连续查询的要求,可以很好地应用到深海平台监测系统上.现有抽样算法主要有均匀抽样(uniform sampling)、偏倚抽样(biased sampling)和权值抽样.均匀抽样:各元组被抽取到的概率是相等的.Vitter[5]提出水库抽样方法,假定数据集的总量为A,以S/A的概率抽取S个元组到样本集合中,当抽取的元组数量超过S时,随机删除样本集合里的一个元组,然后将抽取出来的新元组插入到样本集合中.Gibbons等[6]优化了水库抽样方法,给出了精确抽样方法,将数据元组用(T,C)表示,其中T表示数据元组,C表示数据元组的个数,在相同数据元组多的数据集合中使用该方法,能有效地节省空间.偏倚抽样:各元组被抽取到的概率是不同的.Gibbons等[6]在精确抽样方法的基础上给出了计数抽样方法,在抽取的元组数量超过S时,将出现次数少的元素从样品集合中替换掉,可以很方便地获得一个集合中的常用数据元组.权值抽样:各元组根据一定的权值进行抽样.Efraimidis等[7]认为均匀抽样没有区分数据元组的重要性.其给出了加权抽样算法,赋予数据元组相应的权值,并根据权值进行抽样.Zhang等[8]认为抽样要考虑数据的时间因素,其在加权抽样算法的基础上,综合计算数据元组的到达时间和权值,作为该数据元组的优先数,再根据优先数抽样,形成优先数随机抽样算法(PRS),解决了数据元组过期问题.Hou等[9]为解决多个流数据之间的多次连接操作效率低下的问题,提出一种针对多个相关流数据的概要数据生成算法.上述抽样算法均未能考虑到流数据变化的特点,但加权抽样算法能根据用户赋予数据的权值,来衡量数据的重要性,并根据重要性进行抽样.在深海平台监测系统中,用户事先并不知道何时到达的数据重要,只能根据经验,因此,抽取的概要数据的准确性依赖于用户的经验.为此本文给出一种基于时间滑动窗口的自适应加权随机抽样算法:AWRS/BTSW (adaptive weighted random sampling based on time sliding window)算法,该算法通过计算流数据的平均变化率,来确定一个数据元组的权值以及skipping因子的值,结合skipping因子、权值和数据元组的到达时间来对数据进行抽样,解决了现有抽样算法生成的概要数据与原始数据的误差不确定以及数据过期问题.2 AWRS/BTSW 算法2.1 相关定义定义1 数据平均变化率假设在时刻i的数据为ti,则时刻i的数据变化率Δi为,则从时刻m到n之间的时间段Δt的数据平均变化率为定义2 skipping因子若时间段Δt内的数据平均变化率小于阈值ξ,该时间段的所有数据元组的skipping因子的值为true,否则为false.skipping(Δt)函数定义如下:定义3 数据集的稳定度将数据集分成若干个数据区间,ds表示数据平均变化率不超过阈值的数据区间的个数,da表示总数据区间的个数,则该数据集的稳定度为s=ds/da.定义4 相对误差从原始数据里查询的结果定义为Qr,从概要数据里查询的结果定义为Qs,则相对误差为e=Qs/Qr.2.2 数据项的键值从流数据变化特点出发,根据流数据的平均变化率赋予数据项相应的权值,令w (x)为单调递增函数,w(x)函数取x1/λ(λ为正整数),数据变化越快,赋予的权值就越大.权值计算公式如下:结合基本窗口技术,综合考虑权值和时间因素并将其作为数据项的键值,解决时间滑动窗口的数据过期问题.键值计算公式如下:其中α和β是权衡数据到达时间和权值的两个参数.用vi表示数据流中的第i个数据项,xi表示数据项vi的键值,ti表示数据项vi的到达时间,wi表示数据项vi 的权值,μi表示数据项vi生成的一个随机数.g(x)为单调递增函数,数据到达时间越早,它的值就越小.对于变量x,y,f(x,y)是一个单调递增函数,例如xy. 当新数据到达时,时间窗口向后移,周期性地计算当前滑动窗口的数据项的键值,可以将滑动窗口平均分为k 个子窗口(s[0],s[1],…,s[k-1]).假设vi在子窗口s[m],则当前滑动窗口的各个数据项Δt的键值xi计算如下:假定l是一个正整数,g(x)取x-1/l,f(x,y)取y1/x,代入式(3)可得由式(1)可得新到来的Δt时间段的数据,将其放入s[k]中,将m=k代入式(5)计算可得2.3 AWRS/BTSW 算法步骤当Δt时间段的数据到达时,首先计算该时间段的数据平均变化率Δi,然后根据数据平均变化率计算其skipping因子.如果skipping因子的值为真,则滑过这些元组;否则,根据数据平均变化率给这段数据项赋予一定的权值,并结合到达时间计算这段数据项的键值;最后再根据键值进行抽样.具体算法如下:输入:包含n个数据项的流数据S输出:基于时间的滑动窗口T的概要数据集R(1)将新到达的时间跨度为T的h个数据项加入到当前时间滑动窗口;2.3 AWRS/BTSW 算法步骤当Δt时间段的数据到达时,首先计算该时间(2)将当前时间滑动窗口T按照Δt的时间间隔,平均切分为k 个子窗口(s[0],s[1],…,s[k-1]),k=T/Δt;(3)分别计算每个子窗口的平均数据变化率及各个数据项的权值wi;(4)计算各个数据项的键值xi;(5)for(i=h+1;i<=n;++i),重复步骤(5)~(13);(6)计算下一个Δt时间间隔的数据平均变化率(7)if skipping(Δt)==true,跳跃Δt个时间跨度段,转步骤(5);(8)将Δt时间跨度的数据项读取到s[k];(9)计算Δt时间跨度里的各个数据项的键值xi;(10)for(j=1;j<=Δt;++j),重复步骤(10)~(12);(11)查找当前滑动窗口中键值最小的数据项,假设最小键值为MIN,并且有R[m]=MIN;(12)if xi > MIN -ε用键值为xi的数据项替换R[m];(13)窗口向前滑动,s[i]→s[i-1](i=1,2,…,k).3 算法分析与比较AWRS/BTSW算法首先计算平均数据变化率,时间复杂度为o(n),将流数据中的数据元组抽取到样本集,时间复杂度为o(hlog n/h+Δt(h-1)),算法在数据稳定的情况下滑过Δt个时间跨度,假设流数据中的数据项的稳定度为s,则该算法总时间复杂度为o(n+(n-h)(1-s)((hlog n/h)/Δt+(h-1))),其中s∈ [0,1],Δt∈ [2,h].从算法的时间复杂度计算公式可以得出,该算法依赖数据集的稳定度s和时间跨度Δt.从深海平台监测系统取出3万个数据,用该算法生成5 000个概要数据.其中测试环境为操作系统Windows XP、CPU 2.6GHz Pentium 4、1GB内存.对稳定度相同(假设数据集的稳定度为25%),时间跨度Δt不同(分别为5 000、3 000、1 000、900、800、100、2s)的数据集进行实验,生成概要数据所用时间如图1所示.在时间跨度Δt相同(时间跨度Δt设置为5 s),稳定度不同(分别为0、10%、25%、50%、75%)的数据集中,将AWRS/BTSW算法和优先数随机抽样(PRS)算法生成概要数据所用的时间和准确性进行对比,其中PRS算法中的数据项的权值用随机函数生成,分别运行两种算法并求其算术平均值.两种算法生成概要数据所用时间和相对误差如图2、3所示.图1 AWRS/BTSW算法所用时间Fig.1 AWRS/BTSW algorithm efficiency图2 算法所用时间的比较Fig.2 Comparison of algorithm efficiencies图3 算法相对误差的比较Fig.3 Comparison of accuracy of algorithm从图1、2可以看出,稳定度相同,AWRS/BTSW算法所用时间在2~100s时随时间跨度Δt的增大而减小,在800~5 000s时随时间跨度Δt的增大而增大.当时间跨度Δt相同时,数据集的稳定度越高,该算法生成概要数据的效率越高.从图2、3可以看出,数据集的稳定度越高,AWRS/BTSW算法生成概要数据的效率越高;数据集的稳定度越低,与PRS算法相比该算法的准确性越高.当数据集的稳定度在10%以上时,该算法的效率和准确性都比PRS算法高;当数据集的稳定度在10%以下时,该算法的准确性比PRS算法高,效率略低.4 结论本文总结和分析了概要数据构建的几种抽样方法,给出了一种基于时间滑动窗口的自适应加权随机抽样算法:AWRS/BTSW算法,解决了目前抽样算法在深海平台检测系统等数据变化不确定的应用中,抽取出的概要数据的准确性与原始数据之间的误差不确定的问题.与其他的抽样算法相比,该算法能根据数据变化的情况,动态生成概要数据,在数据变化稳定的情况下生成概要数据的效率高,在数据变化剧烈的情况下生成概要数据的准确性高,相对误差较小.【相关文献】[1] Babcock B,Babu S,Datar M,et al.Models and issues in data streams[C]//Proceedings of the Twenty-First ACM SIGACT-SIGMOD-SIGART Symposium on Principles of Database Systems.New York:ACM,2002:1-16.[2] Gibbons P B,Matias Y.Synopsis data structures for massive data sets[C]//Proceedings of the Annual ACM-SIAM Symposium on Discrete Algorithms.Philadelphia:SIAM,1999.[3] Gibbons P B,Matias Y,Poosala V.Fast incremental maintenance of approximate histograms [J].ACM Transactions on Database Systems,2002,27(3):261-298. [4] Matias Y,Vitter J S, Wang M. Wavelet-based histograms for selectivity estimation [J].ACM SIGMOD Record,1998,27(2):448-459.[5] Vitter J S.Random sampling with a reservoir[J].ACM Transactions on Mathematical Software,1985,11(1):37-57.[6] Gibbons P B, Matias Y. New sampling-based summary statistics for improving approximate query answers [C]// Proceedings of the 1998ACM SIGMOD International Conference on Management of Data.New York:ACM,1998:331-342.[7] Efraimidis P S,Spirakis P G.Weighted random sampling with a reservoir[J].Information Processing Letters,2006,97(5):181-185.[8] ZHANG Long-bo,LI Zhang-huai,ZHAO Yi-qiang,et al.A priority random sampling algorithm for timebased sliding windows over weighted streamingdata[C]//Proceedings of the 2007ACM Symposium on Applied Computing.New York:ACM,2007:453-456.[9] HOU Wei,YANG Bing-ru,WU Chen-shen,et al.RedTrees:A relational decision tree algorithm in streams[J].Expert Systems with Applications,2010,37(9):6265-6269.。

消失矩对小波分析求解自相似参数Hurst的影响研究

消失矩对小波分析求解自相似参数Hurst的影响研究
关键 词 : 消 失矩 ; 小波 ; 自相 似 ;Hu s rt
中图分 类号 : P 9 . 33 6 0
文献标识码: A
文章编号: 0959(070—270 10—8620 ) 25—5 9
S u y o n s n o e t n ue c n tm a i n Hu s r m e e f t d n Va ihi g M m n sI f n e o Es i to r t Pa a l tro S l- i ia I c e fsm l I r f i
维普资讯
第 2 卷 第 9期 9
2 0 年 9月 07







V0 . 9 . 1 NO 9 2 S p .2 0 et 07
J u n l o e t o is & I f r to e h o o y o r a f Elc r n c n o ma i n T c n l g
Re n y n Xu —i Wa gRuc u n n —h a Qi h n - u e gh a Z
0 lg }C mp tr Na jn nv ri } ot a dT c cmmu i t n }a jn 10 3C ia Col eo o ue1 nigU iest o P ss n el o e y e nc i sN nig 0 0 1 hn 、 ao 2
(t e e aoaoy o oe Sf aeTcn l y N ni nvri , aj g 103 C ia Sa yL brt r vl o w r eh o g, aj gU ie t N ni 0 9, h ) tK rf N t o n sy n2 n
Absr c : t e r tc a l ss i p o o e ih i d r c l r v sh w a ih n me t f e c n e tma i n t a t A h o e i nay i s r p s d wh c ie ty p o e o v n s i g mo n s i l n e o s i to n n u Hurtpa a s r me e f e ̄sm i rt a f , n t fe pe i n a e u t h w h t ro l i l r f c a d a l so x rme t l s lss o t e Hur tS a u h n e e i d ct s a i o r s ’ v l e c a g sp ro i i y wih t e v n s i g m o e t , tt t l y i h r tSv l e d c e s d isv ra c a s swih t e i c e e o t h a ih n m n s bu o a wa st e Hu s ’ a u e r a ea t a i er ie t h n r a f n n s t e v ns n h a i hi g mo n s me t .Th s c n l so s d fe e t fo i o cu i n i i r n r m o mo iw ,a d c u d p o i e r a o o h ie f cm n ve n o l r vd e s n fr c oc

自相似网络流量Hurst指数的迭代估计算法

自相似网络流量Hurst指数的迭代估计算法
c nie c tra o ae t rdt n l to . o e v rtemeh di sa l nd f rn c ls S a eu e o f n ei ev l mp rdwi ta io a h d M ro e, h to s tbeo i ee tsae , Oic nb sd d n c h i me f t

种在线估计 Hus指 数的方法 。 rt 文献标识码 :A 文 章编 号:10 .8 62 0 )22 7 .3 0 95 9 (0 61 3 1 0
关键词 自相似 ,H r 指数 ,迭代 ,小波 ut s
中图分类号:T 1 _ N9 93
A n Ie a i eM e h d t tm a eH u s nd x tr tv t o oEsi t r t I e o l-i i rNe wo k 1r m c fSefsm l t r ra a
Abtat I ip pra eai to rsne si t H r dx a dii api ohF N (rcin l src nt s a e,ni rt eme dipee t t et e usi e, n p l d ob t G Fat a h t v h s d o ma tn ts et o G us nN i ) aa n a t fidt. x ei n leu s e nt t ta timehdimuhfs r n a l r a si os dt dr lr c aaE p r a e a e a me t sl mo s ae hths to c t dh s mal ar td r s a ea s e
结构 ,即 () 七 :p() k ,对所有 的 ( 1 ,, 都成立 ,也 = , 3 …) 2 就 是说 ) 与 具有相 同的二阶统计特性 。 广 义平 稳的 自相似过程 的 自相关 函数满足【: 。 1

hurst指数2篇

hurst指数2篇

hurst指数第一篇:Hurst指数简介及应用领域Hurst指数是一种用于衡量时间序列数据的长期记忆性的统计量,其应用广泛于金融分析、水文学、信号处理等领域。

本文将对Hurst指数进行详细介绍,并探讨其应用领域。

Hurst指数最初是由数学家H.E. Hurst于1951年提出的,其用于衡量时间序列数据的波动性和相关性。

时间序列数据是指一组按时间顺序排列的观测值,例如股票价格、气温记录等。

Hurst指数的取值范围在0到1之间,其中0表示完全反序列相关,1表示完全正序列相关,0.5表示完全随机。

Hurst 指数越接近于0.5,说明时间序列数据的波动性越接近于随机,没有长期记忆性;而越接近于0或1,说明时间序列数据存在较强的趋势性,即具有长期记忆性。

Hurst指数的计算需要借助于重叠子序列的均值计算,具体步骤如下:首先,将时间序列数据分解成不同长度的子序列;然后,计算每个子序列的均值;最后,计算不同子序列长度下的均值之比。

根据计算得到的比值,可得到Hurst指数。

在金融分析中,Hurst指数常被用于衡量股票价格的长期记忆性和预测性。

通过计算Hurst指数,可以评估股票价格的波动性,进而辅助投资者进行风险管理和决策制定。

例如,当股票价格的Hurst指数较高时,说明价格具有较强的趋势性,投资者可以选择更长期的持有策略,以获得更大的收益。

此外,Hurst指数在水文学领域也得到了广泛的应用。

水文学研究常关注各种水文变量的波动性,例如降水量、水位等。

通过计算Hurst指数,可以评估水文变量的长期趋势,进而为水资源管理、洪水预测等提供科学依据。

除金融分析和水文学外,Hurst指数在信号处理、网络分析等领域也有着重要的应用价值。

例如,对于信号处理,Hurst指数可以用于评估信号的分形特性和自相似性,从而指导滤波、数据压缩等算法的设计与优化。

综上所述,Hurst指数是一种用于衡量时间序列数据长期记忆性的统计量,在金融分析、水文学、信号处理等领域有广泛的应用。

基于AOS的Hurst-优先级自适应RED与动态调度算法

基于AOS的Hurst-优先级自适应RED与动态调度算法
2 I f r ai na dEn i e r g Col g , ai nU n v ri , l 6 2 C i a . n o m t n gn e i le e D l i e st Da i 1 6 2 , h n ; o n a y n a 1
3 L a n gPo ic e a oaoyo o . io i rvn e yL b rt f mmu ia o e r s d noma o r c s n , a a 1 6 2 C ia n K r C nct nN t k fr t nPo es g D l nl 6 2 , hn ) i wo a I n i i i
Oc o e 01 t b r2 2
基于 AOS的 Hu s. rt 优先级 自适应 RE 与动态调度算法 D
别 玉霞 一 . ,潘成 胜 ,刘 海燕 2 王延 春 , 3 ,
(.南京理 工大 学 自动化 学 院,江 苏 南京 2 09 :2 1 10 4 .大连大 学 信 息工程 学 院,辽 宁 大连 162 16 2 3 .辽宁 省通信 网络与信 息 处理重 点实 验室 ,辽 宁 大连 162 ) 16 2
(. c o l f uo ai Naj gUn es y f c n ea d e h oo y Naj g 10 4 C ia 1 S h o A tm t , n n i ri i c n c n lg , ni 0 9 , hn ; o c i v to S e T n2
pe ig tc n lg n a v c d obt g s s ms( lxn e h oo yo d a e r in y t n i e AOS , u s a dp o t d pier d m e r e c o ( E ) ) aH rt r r y a a t o al d t t n R D n ii v a n y ei

自相似网络流量Hurst指数估计算法

自相似网络流量Hurst指数估计算法

频 域两类 J 。但 大 多 数 方 法 , 如 D A F 、 R / S 、 周 期 图 法、 绝对 值法 、 Wh i t t l e l 3 估 计 法 等 方法 效 率 不 高 , 对 数 据 的需 求量较 大 , 需 要 大量 样 本 和长 时 问 的高 采
意义 上 的 自相 似 性 。传 统 业 务 模 型不 能描 述该 特
方法 , 简称 改进 的 WO法 。
于 自相似 性 , 其 自相似 参数— —H u r s t 参 数成 为表 征
网络 业务 流突发 特征 的重要 参数 , H u r s t 系数 刻 画 了
网络 业务 突发 的剧 烈 程 度 。网 络业 务 量 建 模 的 准
确度 、 高速网络业务传输 中流量控制 以及统计复用
2 0 1 3年 4月 8日收到 中央高校基本科研业务费专项 资金项 目
其 中, “ ” 指概率分布相同, 则称 ( t ) 为是 以参
数 日统 计 自相 似 的 , H 称 为 自相 似 参数 , 有 时也 称 为H u r s t 参 数 J 。 可 以证 明 : 自相 似过程 具有分 维特
O p p e n h e i m 提 出一种 基 于 F B M模 型 和小波变 换 的 方法 ( 下称 wo法 ) 。然 而 , 当观 察 序列 的数 据 量较
小时, WO法 对 H u r s t 参 数估 计 的误 差较 大 。对 此 , 首先 对 WO法效 率不 高 的原 因进 行 了细 致 的分 析 ; 其次 , 针对 WO法存 在 的 问题 , 进 行 了改 进 , 提 出一 种基 于 D F G N模 型和 H a a r 小波基 的 H u r s t 参 数估计

Internet网络流量的自相似性分析

Internet网络流量的自相似性分析

Internet网络流量的自相似性分析
房一泉;程华;黄建华
【期刊名称】《计算机工程》
【年(卷),期】2005(031)023
【摘要】网络流量的自相似参数估计方法有多种,但研究表明这些方法在准确性或计算上都有一定的局限性.该文在小波包分解的基础上,考虑信号能量在分解过程中的分布,得到基于小波包分解的Hurst参数估计方法.通过对两组合成数据的参数估计,表明该方法在继承了小波变换的计算优势的基础上,能得到更精确的估计结果.把该方法应用于计算实际互联网流量的自相似参数,并在此基础上着重分析了受到蠕虫攻击的Internet流量的自相似性的变化,得到了一些有用的结论.
【总页数】3页(P104-106)
【作者】房一泉;程华;黄建华
【作者单位】华东理工大学计算机科学与工程系,上海,200237;华东理工大学计算机科学与工程系,上海,200237;华东理工大学计算机科学与工程系,上海,200237【正文语种】中文
【中图分类】TP393
【相关文献】
1.Internet网络流量的测量与分析 [J], 渠怀玉
2.基于用户行为的网络流量模型及自相似性分析 [J], 田畅;王海;郑少仁
3.Internet网络流量的测量与分析 [J], 张慧勇;李纯喜;陈常嘉
4.校园网络流量自相似性分析与研究 [J], 张浩;吴敏
5.网络流量自相似性产生原因的分析 [J], 张冬梅;王韬;侯景辉
因版权原因,仅展示原文概要,查看原文内容请购买。

自相似业务流HURST参数小波检测法的研究

自相似业务流HURST参数小波检测法的研究

Ab ta t Th a ee—ae to sfrh rt aa tret t n o efsmi rta i sit d c d src : ew v ltb sd meh d o u s p rmee si i fsl i l rf ci nr u e .Th f c fvnsig ma o - a o eef to a i n e h
Wu Y a mig Hu n ia L e n C e gT n u n n a gJy n iL mi h n ig
( .col f polc oi ifr ao , E T C eg u60 5 C i 1S ho o O te t ne nom tn U S C,hnd 04,hn er i 1 a
(、 1 电子科技 大学光电信 息学院, 成都 6 05 ; 10 4 2 电子科技 大学宽带光纤传输 与通信 网技术重点实验 室, 、 成都 6 0 5 ) 10 4

要 :本 文介绍 f/ 波对 自相 似业务流 H r 参数的检测 原理 。重点分析 _ J us t r消失矩 ,分解级数对检测结果的影 响,提
Th t d o u s a a t re t t n o efsmi r r f c e s u y f rh rtp r me e s i i fs l i l a f ma o - a t i o h v ltb s d me h d n t e wa ee - a e t o
mo ns a d n mb ro c l so e e t t n r s l sa ay e ,a d ame h d h w t ee t h u e fs ae y q a i a tro me t n u e fs ae n t si i e u t i n lz d n t o o sl c en mb ro c sb u t fc o f h ma o s o t l l y t e w v ltf tri g v n h p l ai n l t fw v l t a e t o si p it d o t h c e w v l t a e t o sc n b p h a e e i e ie .T ea p i t i a ee —b s d me h d s on e u ,w ih t a e e— s d meh d a e a - l s c o mi o h b p id t tith a y t i d t f c r t e h n n n sr th a y ti d taf .S me s lt n h w t e c n l so sa e t e l o sr e v —al r f a h rt a o —t c e v — l rf c o i ai ss o h o c u in r r . e c e ai i ae i mu o u

基于加权平均值的时变hurst指数估计方法研究

基于加权平均值的时变hurst指数估计方法研究

和 q 阶矩概念ꎬ通过窗口大小、指数权重和 q 阶矩三
时间序列在不同时间段的自相似参数是动态变化
个参数对估计结果进行调整ꎬ估计结果得到明显改
的ꎬ即这些随机信号局部自相似特性是时变的
[5 - 6]

为了有效估计随机信号的这种时变局部自相似特
性ꎬ学者提出了时变 Hurst 指数的概念ꎬ并进行深入
研究 [7 - 8] ꎮ 现有时变 Hurst 指数估计算法基本都是
收稿日期: 2019 - 06 - 28
基金项目: 辽宁省博士启动基金(20170520215)
作者简介: 刘兆羽(1991 - ) ꎬ女ꎬ硕士研究生ꎬ研究方向为随机信号
处理ꎮ 通讯作者:盛虎ꎮ
— 1 —
Δt -1
w s f( ห้องสมุดไป่ตู้ t -s )

s =0
(5)
‹ S( t + τ) - S ( t) q w( t) ›
1 基于加权平均值时变 Hurst 指数估
计算法原理
Hurst 参数与某个时间序列 S( t) 的长期统计相
关性有关ꎬ令时间序列为 t = (1ꎬ2ꎬꎬΔt) ꎬ 定义具
有单一时间步长的时间窗口 Δtꎮ 作为自相似性的度
量ꎬ它必然与基本统计量有关ꎬ基本统计量最终变为
introduced to realize the time ̄varying Hurst exponential estimation of stochastic signals with local self ̄
similarity. In this researchꎬthe local self ̄similar parameter can be calculated on the basis of exponential

校园网网络流量自相似性的测定

校园网网络流量自相似性的测定

校园网网络流量自相似性的测定
林兆启;林南晖;汪继东
【期刊名称】《计算机工程与科学》
【年(卷),期】2008(30)6
【摘要】根据自相似性理论,网络流量自相似性的程度可由计算Hurst参数的大小来测定.本文通过在校园网主干路上进行网络数据包的采集,然后用方差时间方法和R/S方法计算所采集流量的Hurst参数值,以检测校园网网络流量的自相似性.通过实验的分析与比较,验证了自相似性的存在,并对如何运用Hurst值的变化来进行流量异常检测做了初步的探讨.
【总页数】4页(P29-32)
【作者】林兆启;林南晖;汪继东
【作者单位】华南师范大学计算机学院,广东,广州,510631;华南师范大学计算机学院,广东,广州,510631;华南师范大学计算机学院,广东,广州,510631
【正文语种】中文
【中图分类】TP393
【相关文献】
1.基于网络流量自相似性的蠕虫攻击检测方法研究 [J], 代昆玉;胡滨;王翔
2.校园网络流量自相似性分析与研究 [J], 张浩;吴敏
3.链路层分类包的网络流量自相似性研究 [J], 聂得欣;袁小坊;王东;谢高岗
4.基于网络流量自相似性的入侵检测技术 [J], 陈宏聪;朱华鑫
5.网络流量自相似性的影响因素 [J], 龙剑友;王维;何晶
因版权原因,仅展示原文概要,查看原文内容请购买。

自相似流量模拟的Hurst参数实时计算

自相似流量模拟的Hurst参数实时计算

自相似流量模拟的Hurst参数实时计算张冬梅【期刊名称】《价值工程》【年(卷),期】2017(036)034【摘要】Hurst参数是自相似流量模拟重要参数.本文采用R/S法对Hurst系数进行实时计算,在此基础上提出通过实际的Hurst系数与理论Hurst系数的比较来衡量模拟流量与理论模型的差别.%Hurst parameter is an important parameter of self-similar flow simulation. In this paper, the R/S method is used to calculate the Hurst coefficient in real time. On this basis, this paper proposes to measure the difference between the simulated flow and the theoretical model by comparing the actual Hurst coefficient with the theoretical Hurst coefficient.【总页数】2页(P226-227)【作者】张冬梅【作者单位】河北新闻出版广电局监管中心,石家庄050000【正文语种】中文【中图分类】TP393.0【相关文献】1.Hurst参数变化在网络流量异常检测中的应用 [J], 王欣;方滨兴2.虹桥机场软交换网络流量Hurst参数的算法研究 [J], 张意帆3.基于FrFT的网络流量Hurst参数估计器 [J], 王霁;单佩韦4.自相似业务流HURST参数小波检测法的研究 [J], 吴援明;黄际彦;李乐民;程婷5.视频流量中基于小波的Hurst参数估计研究 [J], 马书南;乐红兵;毛蓝因版权原因,仅展示原文概要,查看原文内容请购买。

Internet网络流量的自相似性分析

Internet网络流量的自相似性分析

—104— Internet 网络流量的自相似性分析房一泉,程 华,黄建华(华东理工大学计算机科学与工程系,上海 200237)摘 要:网络流量的自相似参数估计方法有多种,但研究表明这些方法在准确性或计算上都有一定的局限性。

该文在小波包分解的基础上,考虑信号能量在分解过程中的分布,得到基于小波包分解的Hurst 参数估计方法。

通过对两组合成数据的参数估计,表明该方法在继承了小波变换的计算优势的基础上,能得到更精确的估计结果。

把该方法应用于计算实际互联网流量的自相似参数,并在此基础上着重分析了受到蠕虫攻击的Internet 流量的自相似性的变化,得到了一些有用的结论。

关键词:自相似性;Hurst 参数;离散小波包变换Self-similarity Analysis of Internet Network TrafficFANG Yiquan, CHENG Hua, HUANG Jianhua(Dept. of Computer Science and Engineering, East China University of Science and Technology, Shanghai 200237)【Abstract 】There are several methods to estimate parameter H, which measures the degree of self-similarity of network traffic, but researches have indicated that they have limitations either on accuracy or on computation. This paper introduces a method based on the discrete wavelet packet transform (DWPT) for Hurst parameter estimation. It estimates the synthesis data and real Internet data by this method for the purpose of validating the accuracy and robustness. Then it focuses on the variation of self-similarity of abnormal traffics with different Internet worms by the parameter H and the percentage of component grouped by protocol types.【Key words 】Self-similarity; Hurst parameter; Discrete wavelet packet transform (DWPT)计 算 机 工 程Computer Engineering 第31卷 第23期Vol.31 № 23 2005年12月December 2005·网络与通信·文章编号:1000—3428(2005)23—0104—03文献标识码:A中图分类号:TP393文献[4]等表明网络流量在时间测量尺度为毫秒~秒级时具有自相似特性,流量的自相似特性与该过程的长相关特性有关,即可用长相关过程参数来估计自相似的二阶统计参数H 。

基于自相似的异常流量自适应检测方法

基于自相似的异常流量自适应检测方法

基于自相似的异常流量自适应检测方法
夏正敏;陆松年;李建华;马进
【期刊名称】《计算机工程》
【年(卷),期】2010(036)005
【摘要】根据异常流量对网络自相似的影响,通过研究在流量正常和异常情况下表征自相似程度的Hurst参数分布特点的不同,设计一种异常流量动态自适应检测方法.该方法采用小波分析估计Hurst参数,根据网络自相似程度自适应地调整检测阈值.对MIT林肯实验室的入侵检测数据测试结果表明,该检测方法具有较好的动态自适应性、较高的检测率及较快的检测速度.
【总页数】3页(P23-25)
【作者】夏正敏;陆松年;李建华;马进
【作者单位】上海交通大学电子工程系,上海,200240;上海交通大学电子工程系,上海,200240;上海交通大学信息安全工程学院上海市信息安全综合管理技术研究重点实验室,上海,200240;上海交通大学电子工程系,上海,200240;上海交通大学信息安全工程学院上海市信息安全综合管理技术研究重点实验室,上海,200240;上海交通大学信息安全工程学院上海市信息安全综合管理技术研究重点实验室,上海,200240【正文语种】中文
【中图分类】TP393
【相关文献】
1.自适应滤波实时网络流量异常检测方法 [J], 颜若愚;郑庆华;牛国林
2.自适应参数的网络异常流量检测方法 [J], 步山岳;王汝传;张海艳
3.基于网络流量自相似性的蠕虫攻击检测方法研究 [J], 代昆玉;胡滨;王翔
4.基于FRFT自相似参数估计的异常流量检测方法 [J], 冶晓隆;兰巨龙;黄万伟
5.一种自适应的异常流量检测方法 [J], 张新跃;胡安磊;李炬嵘;冯燕春
因版权原因,仅展示原文概要,查看原文内容请购买。

自相似参数辨识与汇聚无线业务尺度特性分析

自相似参数辨识与汇聚无线业务尺度特性分析

自相似参数辨识与汇聚无线业务尺度特性分析
于秦;毛玉明
【期刊名称】《计算机研究与发展》
【年(卷),期】2007(44)1
【摘要】Hurst参数是衡量网络流量自相似程度和突发性的重要参数,在时域R/S 统计、方差 - 时间图法和频域周期图法的基础上,提出一种最优化线性回归小波模型,实现小波域内Hurst参数的准确有效快速辨识.研究了WLAN中多个输入业务源的汇聚过程以及汇聚的多输入自相似业务源统计特性.仿真实验比较了传统的以及基于最优化线性回归小波模型的Hurst参数辨识方法,验证了理论分析中汇聚自相似业务也呈现自相似性的结论,且仿真结果表明,汇聚业务的突发性得到加强而不是削弱.研究结论对网络流量的准确建模以及网络传输中流量控制和优化网络资源配置以及提高网络性能具有重要作用.
【总页数】7页(P58-64)
【作者】于秦;毛玉明
【作者单位】电子科技大学通信与信息工程学院,成都,610054;电子科技大学通信与信息工程学院,成都,610054
【正文语种】中文
【中图分类】TP3
【相关文献】
1.相干结构的尺度相似性与尺度相似亚格子模型 [J], 王瑞新;姜楠
2.基于多尺度化基本尺度熵的两相流流型特性分析 [J], 樊春玲;李浩杰;孙迎慧
3.利用两尺度相似变换提高有限元多尺度函数的逼近阶 [J], 程蓉;李万社
4.多尺度决策系统中基于模糊相似关系的决策粗糙集最优尺度选择与约简 [J], 杨璇;黄兵
5.多时间尺度下锂电池在线参数辨识及SOC估计 [J], 邢丽坤;郭敏;张梦龙;詹明睿;凌六一
因版权原因,仅展示原文概要,查看原文内容请购买。

基于Haar小波和极大似然估计的Hurst参数估计法

基于Haar小波和极大似然估计的Hurst参数估计法

基于Haar小波和极大似然估计的Hurst参数估计法
武莹;李俊州
【期刊名称】《华中师范大学学报(自然科学版)》
【年(卷),期】2013(047)006
【摘要】Hurst参数是表征网络业务自相似性的一个重要参数,在一定的观察时间内对突发业务的Hurst参数进行快速、准确的估计是高速宽带网络实施流量控制和缓冲资源分配的前提.本文提出一种基于Haar小波和极大似然估计的Hurst参数估计法.该方法首先使用Haar小波对DFBM序列的增量DFGN序列进行小波变换,然后再利用极大似然估计来估计Hurst系数.仿真生成的DFBM和真实自相似网络业务数据的计算结果均表明,该方法提高了Hurst参数估计的效率和准确性,比传统方法具有更好的性能.
【总页数】7页(P763-768,775)
【作者】武莹;李俊州
【作者单位】开封大学软件职业技术学院,河南开封475004;开封大学艺术设计学院,河南开封475004
【正文语种】中文
【中图分类】TP393
【相关文献】
1.基于FrFT的网络流量Hurst参数估计器 [J], 王霁;单佩韦
2.基于小波变换的网络长相关业务Hurst参数估计 [J], 金宏伟;周经伦;罗鹏程;尤
洪国
3.视频流量中基于小波的Hurst参数估计研究 [J], 马书南;乐红兵;毛蓝
4.一种基于数据块选择的方差时间图Hurst参数估计方法 [J], 喻莉;陈晨
5.中国股票市场效率的变迁及对市场波动性的影响\r——基于Hurst指数分析法[J], 詹奕椿
因版权原因,仅展示原文概要,查看原文内容请购买。

长相关网络流量Hurst指数估计算法

长相关网络流量Hurst指数估计算法

长相关网络流量Hurst指数估计算法
张博;汪斌强;智英建
【期刊名称】《计算机工程》
【年(卷),期】2009(035)002
【摘要】针对传统长相关网络流量Hurst指数估计算法估计结果不准确、可变信息受损严重的情况,提出时域内滑窗时变方差之差Hurst指数估计算法,采用已知参数的人工分形高斯噪声序列及Bellcore采集的真实网络流量序列BC-pOct89对其进行验证.结果表明该算法减少了可变信息损失,能动态地刻画全域上的长相关特性,具有较高的准确性和鲁棒性.
【总页数】3页(P83-85)
【作者】张博;汪斌强;智英建
【作者单位】国家数字交换系统工程技术研究中心,郑州,450002;国家数字交换系统工程技术研究中心,郑州,450002;国家数字交换系统工程技术研究中心,郑
州,450002
【正文语种】中文
【中图分类】TP393
【相关文献】
1.自相似网络流量Hurst指数的迭代估计算法 [J], 李林峰;裘正定
2.网络流量长相关特性估计算法性能评估 [J], 魏进武;邬江兴
3.网络流量长相关特性的滑窗时变估计算法 [J], 魏进武;张进;邬江兴
4.自相似网络流量Hurst指数估计算法 [J], 徐凌;刘嘉焜;李亮
5.基于改进R/S估计算法的网络流量长相关性分析 [J], 荣红佳;盛虎;闫秋婷
因版权原因,仅展示原文概要,查看原文内容请购买。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

1 引言
拥 塞 控 制 算 法 为保 证 Itre nent的 稳 定起 着 十
分 重要 的作 用 。 目前 采 用 的拥 塞 控 制 算 法 有 两大 类 :链 路 算 法 (ik ag r h 1 loi m)和 源 算 法 (o re n t s uc ag rh u 。源算 法 中使 用最广 泛 的是 T P协 议 loi m) t J C
维普资讯
第2 8卷第 4期 2 0 年 4月 07




Vb .8 1 N O4 2 Ap i 2 0 r 0 7 l
J u n l n Co o r a o mm u iai n n c to s
基 于 自相似业务流的 Hu s 加权随机 早检测算法 rt
p a t r f n u a c S mu ae s l h w mo i e l o t m c e s se ie ty sa i t fq e e sz , n e r a me e p t r f . i lt dr u t s o d f d ag r o i t i e s i i h i r a e v d n l tb l y o u u ie a d d — n i c e s s a k t o srto q e ed ly a d q e e d l yv ra i t , n l r v sl k u ep r e tg fn t r . r a e c e s a , u u e a n u u e a a ib l y f al i p l i i i y mp o e n s ec n a eo e wo k i Ke r s c n e t n ma a e n ; ef s l p t r n o e l e e t n I e wo k y wo d : o g si n g me t s l i a i u ; a d m a y d tci ; P n t r s o -m r n i r o
HW RE ag rt m t e fs l n u . o i e ED l o t m a u e R D l o h i wi s l-i a i p t M d f d R h i m r i ag r i h C t n ED a a tr c o d n o t e Hu s n p r mee s a c r ig t rt h
黄丽亚 ,王锁萍
( 南京 邮 电大学 光 电工程 学 院,江 苏 南京 20 0 ) 10 3

要:Fo d 出的随机早丢弃 ( E ly 提 R D,rn o er e c o )是基于传统的泊松 ( os n a dm al dt t n y ei P s o )模型,不适应 网 i
络流 量普 遍呈现 自相似 性 的特 点 。基 于此 目的 ,提 出 了一 种新 的 R D 算 法——-us E H rt加 权随机 早检测 算法 ( WR D,Hus w ihe no e l eet n 。新算法能够根据输入流量 的 自相似系数 Hus,调整 R D算 H E r e tdr d m ydtc o ) t g a r a i rt E 法参数。仿真结果表 明,新算法提高 了队列长度 的稳 定性 ,减少了丢包率、排 队时延和 排队抖动 ,提 高了网络 的
( M ,at e u u n g met AQ ci eema ae n )。其 中 由 Fo d vq ly
提 出的 R D( n o er e c o ) E r d m a y dt t n 受到广泛 的关 a l ei
Ab t a t R D sp o o e yF o d wa a e n t eta i o a o so p t sr c : E a r p s d b y sb s d o d t n lP is n i u d l c u d n ts t f e fsmi a l h r i n mo e , o l o ai y s l-i l n — s r a t r f n t r r f c W i h s i i w,a t mp a e n ma e b r p s g a mo i e D lo i m,t e u e o ewo k ta i . t ti n ve h n at e th s b e d y p o o i d f d R n i E ag r h t h
链路利用率。
关键词:拥塞管理 ;自相似输 入;随机早检测算法;I P网络 中图分类号 :T 3 31 P 9. 文献标识码 :A 文章编号 :10 —3 X(0 70 —0 50 0 04 6 2 0 )40 9 —6
Hu s i h e a d m a l e e t n r twe g t d r n o e r y d t c i o a g r t m a e n s l-i i rt a ci p t l o ih b s d o efsm l f u a ri n
HUANG — , ANG o pig Liya W Su — n
( stto P ool t nc E gne n, aj gU ie i f otad e cm nct n, nig 10 3 hn I tue f hte cr i n ier g N ni nvr to P s n l o mu i i sNa3 00 ,C ia) ni e o s i n sy s Te ao i 2 n
相关文档
最新文档