自相关过程控制简介
自相关过程
自相关过程控制院系:管理科学与工程专业:质量与可靠性工程学号:110510335 姓名:张华威自相关过程质量控制引论:自相关过程质量控制概述当质量过程呈现自相关现象时,常规控制图已经不能准确反映生产中质量的波动.常规控制图理论:质量管理的观点认为:质量具有变异性其特性值是波动的,具有规律性,但它不是通常的确定性现象的确定性规律,而是随机现象的统计规律,用数学语言来讲,就是服从某种分布。
如果出现异常情况,就必然使波动偏离原来的分布,利用统计技术就可以发现这种波动。
在现代质量管理学中,通常使用休哈特控制图进行质量控制,但休哈特控制图的原理要求数据必须复合独立正态性,即要求数据服从正态分布,所以说如果数据之间彼此具有相关性的话,休哈特控制图便不再使用。
基于以上理论基础绘制的常规控制图虽然使用简便且易于理解,但对于受控状态下一般性原因的认知过于简化。
因此为了提高控制图对特殊性原因的检测能力,当过程相关时设计控制图,必须考虑质量过程的自相关结构。
为了解决过程自相关情况下的质量控制问题,统计学家们陆续提出了一些改进方法,其中主要方法之一就是引入时间序列分析法。
以ARMA以及ARIMA 模型为基础,我们便可以对具有相关性的一组数据进行相关性分析,方差分析,以及残差分析等,通过一系列控制图,便可以达到对具有自相关性的数据进行质量控制和质量改进的目的。
一、收集或生成反应自相关生产过程的平稳时间序列ARMA(p,q)数据:0.5377 0.1183 -0.6593 -1.8273 -0.93062.3339 0.5832 -1.9769 -1.5564 -1.2791-0.9306 -0.887 -1.0862 -1.3611 -0.59951.097 -1.3821 -1.6807 -1.9456 -0.37060.5881 -0.964 -0.8627 -0.3625 -1.2301-0.6845 0.636 -1.5359 -0.8981 -0.7563-0.5994 -0.7409 -0.5368 -1.2723 -0.912-0.1624 0.1918 0.0102 0.4458 -0.05523.3173 -0.352 1.556 -0.3836 0.79214.3794 0.9989 0.5869 -0.6471 1.48871.835 -0.6952 -1.3781 -0.7324 -0.9085.2662 -0.0154 -1.3526 -1.4082 -0.42463.909 0.3363 0.2649 -2.044 0.23763.4713 1.2641 -1.3455 1.0815 2.57693.6231 2.2772 0.3677 1.5831 0.69282.648 1.6038 -0.0958 1.4235 1.30682.2868 -0.0066 1.4991 -0.0704 0.77883.4275 -0.2645 -1.2401 -0.4736 -1.15163.8088 -1.1958 -0.368 -0.4345 -0.78114.3498 1.6732 -1.7639 0.4321 -2.53073.9891 -0.1377 1.9157 -1.2463 -0.3442.092 1.1812 1.2539 -2.8234 -0.59092.96 0.3569 2.5806 -3.2347 -2.14883.7378 1.4214 0.6083 -2.1308 -1.5373 3.2458 0.0529 0.6097 -1.6445 -2.2447 3.7789 -0.9494 0.2149 -1.0098 -2.5627 3.5901 -1.8812 1.3888 -1.1285 -3.1112 2.6253 -0.7372 0.481 -0.6835 -2.858 2.6835 -1.1103 1.3587 -1.1565 -4.3651.3421 -0.9724 -1.2282 0.0787 -2.07562.3645 0.6 -0.5603 -1.6693 0.3241 0.4378 0.2999 -1.4722 -0.356 0.1171 -0.1406 0.5277 -2.4813 -1.5275 -0.1473 -0.7485 1.9415 -1.1743 -1.2054 -0.0155 -3.3607 0.3246 -1.0496 -0.5082 -0.0006 -0.4665 1.4414 -0.8436 0.4234 0.8211 -0.9163 1.6532 -2.0703 -1.0584 1.9373 -1.353 1.0153 -0.1608 0.8585 1.6819 0.4189 1.2193 -0.3513 0.7719 1.2125 -1.908 -0.2516 -0.5229 0.5756 1.736二、建立过程的时间序列模型建模步骤:a :传统修哈特控制图分析:首先对所生成数据作正态性检验概率图P值大于0.05,服从正态分布作均值极差控制图控制图X 的Xbar 控制图检验结果检验1。
自相关过程质量控制图研究方法综述
短: 当过程数据存在 负相 关时, 控制 图的 A R L 1 过长[ 1 1 。近 年来 自相 关过 程 的质量控制 方法研究 已成 为国内外质量
2 文 献 分 析 及 评述
2 . 1修 正控制 图 V a s i l o p o u o s 和 S t a m b o n l i s C  ̄l 入 了修 控 制领 域 学者 研 究 的 一个 热 点 问题 。 对数 据 存 在 自相 关 的 正的 S h e w h a r t 图 ,通过计算过程受控状态均值的方差, 给 过程 的研 究 , 可进一步完 善统计 过程控 制 的理论 , 为解决 出 了修 正控制 图参数 的曲线。Wa r d e l l t 3 1 评价 了过程 的相 关
自相 关 过 程 的质 量控 制 与诊 断提 供 解 决 方法 。 性对 S h e w h a r t 图 的影 响 , 结 果表 明 : 对一 阶 正 相 关 过 程 , 控
制线太 紧 , 因而产生许 多错误警报 i 而对一 阶负相 关 , 控 制 自相 关过 程 质 量 控 制 图 的 设 计 方 法 主 要 有 如 下 五 种 线太宽 ,过程均值 的显著漂移 可能检测 不到 ,控制 图的 类型 : 第一类是修正控 制图, 根据过程 的相 关性 , 调 整控制 A R L性质 不 好。 修 正控制 图的在 实际应用 中常常受到限制。 这是 因为 和 过 程 模 型 来 计 算 过 程 的残 差 ,并 作 为控 制 图 的 变量 : 第 对于传 统控制 线, 大多都是根据顾客对质 量水平 的要求而 三类是基于模型预测的残 差控制 图, 基本思想是提 前一步 制定 的 ,而且大多都 已写入 国际标准并被 大家广泛认同 ,
关键词 :自相 关过程 ; 质量控制 图; 残差控制 图; 非模型方法
SPC/EPC整合下自相关过程监测方法研究
訇 似
S P C / E P C 整合下 自相关过程监测方法研究
M et hod of m oni t or i ng au t ocor r el at i on pr oces s un der i nt egr at ed SPCl EPC
王 秀红
V V ANG Xi u . h o n g
( 郑州航 空工业管理学院 管工院 ,郑州 4 5 0 0 1 5 ) 摘 要 : 针对 s P c( 统 计过程控 制)和E P C( 工程过程 调整)整合 过程中 出现的 “ 窗口”问题和 “ 自 相 关”问题 ,在 分析 比较目前典 型监测方 法的基础上 ,提 出监 测自相 关过程的神 经网络 一 T 2 控制 图。确定 了通过 监测闭循环 中两阶输入和 三阶输出 随机 组合的T 2 统计量 解决 “ 自相 关问 题”, 利用神经 网络监测的灵敏性解决 “ 窗 口”问题的S P O / E P C 整合监测策略 , 并 对组合的 选取和 神经 网络 的结构和参 数设置进 行了研究 。为验证该方 法的性 能 ,对相 同的样本 ,分别 采用S h e w h a r " 图和C U S U M图进行 监测 。实验结果表明 :该模型能准确监测幅度大于1 的阶跃扰 动和 大于1 的过程漂移 ( 监测率 大于9 5 %) ,A R L 为1 ; 传 统S P C 监测技 术只能较准确地 ( 监 测率大于9 0 %)幅度监测大于5 的阶跃扰动和大于2 的过程漂移 ( 监测率大于9 0 %),A R L 大
势 。Mo n t g o me r y【 2 模拟 了线性 和 阶 跃扰 动 过程 ,
实 验 结果 显示 整合 S P C / E P C系统 比单 独使 用S P C 或 E P C对 改 进 质 量 、维 持 过 程 稳 态 更 有 效 。Ho e r 和 P a l m 从理 论 与实 际两 方面 探讨 了S P C / E P C 整 合才
自相关过程的统计控制方法研究
② 残 差 控 制 图 残 差 控 制 图 ( p ca a ec at S e ilC s h r, S C) 基 本 思 想 是 运 用 模 型 拟 合 的 方 法 把 自相 关 过 C 的 程 过 滤 成残 差序 列 , 外 还 可 以 辅 以共 因 图 (o 此 C mmo n C u ec at CC 。 差 序 列 具 有 独 立 同 分 布 的 假 设 , a s h r, C) 残 可 采 用 传 统 的 控 制 图 方 法 进 行 控 制 。 因 图 没 有 控 制 共 界 限 , 根 据 时 间 序 列 模 型 建 立 的 预 测 值 的运 行 图 。 是 有
在离 散过 程工业 中 , 于采 用传 感器 的先进 测量 技术 , 由 可 以 获 得 实 时 的 测 量 数 据 , 据 就 有 明 显 的 自相 关 性 。 数
★国 家 83 目 ( 号 :0 1 A42 2 ) 6项 编 2 0 A 1 0 0
过 程 满足某 种平 稳 时 间序 列模 型 。 若 观测 值 x( 1 2 3, … ) 用 时 间 序 列 AR ,, … 可
② 系统 实 现 了库 存 管 理 的多 Aet 间 的协 调 , gn 之
也 实 现 了 A e t 用 户 之 间 的 复 杂 交 互 。 信 转 换 部 gn 与 通
件 统 一 负 责 完 成 Ag n e t向 CO RBA对 象 中 的 操 作 和 方 法 的 映 射 , 在 设 计 Ag n 使 e t时 可 以 不 必 过 多 考 虑 内 部 的 通 信 机 制 , 要 按 照 传 统 的设 计 : 只 式 即可 , 高 了 系 提
关键词 : 自相 关过 程 控 制图 AR A M 时 间序 列
自相关的操作过程
自相关操作过程分析一、自相关的检验 方法1:DW 检验考察模型 t t t u x y ++=βα,我们怀疑随机项存在自相关。
运用软件结果如下:Dependent Variable: Y Method: Least Squares Date: 01/03/04 Time: 08:10 Sample: 1989 2004 Included observations: 16C -6129.817 2174.074 -2.819507 0.0136 X0.3298620.02856411.548210.0000 R-squared0.904995 Mean dependent var 15982.63 Adjusted R-squared 0.898209 S.D. dependent var 12908.99 S.E. of regression 4118.567 Akaike info criterion 19.60087 Sum squared resid 2.37E+08 Schwarz criterion 19.69744 Log likelihood -154.8069 F-statistic 133.3613 Durbin-Watson stat0.422426 Prob(F-statistic)0.000000从表中可以看出,DW 统计量为dw=0.4224,查表可得临界值为37.1,10.1==U L d d ,所以可以判断模型的随机项存在正的自相关。
方法2:直接检验法(回归检验法) 一阶自相关形式为:t t t v u u +=-1ρ即对模型t t tv e e +=-1ρ进行回归,进行T 检验,判断系数是否为0.结果如下:在EVIEW 软件中常用)(k X -表示变量的X 的滞后k 阶变量。
Dependent Variable: E Method: Least Squares Date: 01/03/04 Time: 08:19 Sample(adjusted): 1990 2004R-squared0.565485 Mean dependent var -167.2139 Adjusted R-squared 0.565485 S.D. dependent var 4059.960 S.E. of regression 2676.235 Akaike info criterion 18.68655 Sum squared resid 1.00E+08 Schwarz criterion 18.73375 Log likelihood-139.1491 Durbin-Watson stat0.750574可写出模型为19818.0ˆ-=t t e e ,因为1-t e 的系数的T 检验的犯错概率为0.0008,远远地小于0.05,这说明系数显著地不为0。
自相关过程能力分析
过程 能力 分 析 ( rcs CpblyA a s , C Poes aait nl i P A) i y s 是统 计过程 控制 的一 个 重要 工 具 , 泛运 用 于 评价 生 广 产过 程满 足 技 术 要 求 和 顾 客 需 求 的 能 力 … 。它 为 生 产 管理者 提供 了直观 描述过程 能力 满足技 术或顾 客需 求 的量化指 标 。传 统 的过 程 能 力 分 析 作 为 S C方 法 P
组 成部分 , 有一个 基 本假 设 , 测 数据 统 计 独 立 , 观 即独
过程 能力 分 析 的影 响少 有 研 究 。少 数 学 者 的研 究 表
明, 自相关的过程能力分析 中简单地套用现有公式 在 计算 过程 能力 指数是 不 适 当 的 , 结 论 将导 致 对 过程 其
能力 的错 误 判 断 。本 文在 自相 关 过 程 的模 型 和统 计 特征 的基础 上 , 了存 在 自相 关特性 的过程 中 , 研究 使 用 标准 的统计 过程控 制常 用 的抽 样和标 准差估 计方法
立、 同分 布 (.. ) iid 。随 着工 业 自动 控 制 的发 展 , 自动
过 程控制 ( P 得 到 了 巨大 的 发 展 。A C利 用 不 断 A C) P
对过程能力指数计算的影响, 并进行仿真研究。
地 反馈或 前 馈 调 整 减 小 过程 的 波 动来 控 制 产 品 的质 量, 因此 , 过程输 出的分布参 数通 常会随 着时 间发生变 化, 过程输 出往 往具 有 自相 关 特性 , 特别 是 在 化学 、 制 药 等连续 生产过 程 中。图 l 一个 具有较 强 自相关 的 是 例 子 。因此 ,P S C技 术 越来 越 难 于适 应 现 代 自动 化生
自相关过程的质量控制方法_残差控制图
© 1994-2010 China Academic Journal Electronic Publishing House. All rights reserved.
2005
年第
6
期
Science
and
科技管理研究 Technology Management
Research
2005
No16
文章编号 : 1000 - 7695 (2005) 06 - 0139 - 02
自相关过程的质量控制方法 ———残差控制图
王斌会 , 张志雷
有效使用控制图能够在生产过程中科学地保证预防原 则的实现 , 减少质量的异常波动 , 从而提高产品品质 、增 强市场竞争力 。但是 , 人们在生产实践中逐渐认识到在使 用常规控制图对过程进行控制时 , 存在着一些不足之处 , 并陆续提出一些改进方法 。本文仅研究当过程存在自相关 现象从而违背常规控制图独立性假定时 , 对质量特性值控 制的残差图理论 , 希望以此对实际质量管理者提供有益的 参考 。
σ2Y = Var ( Yt)
σε2
= 1-
<2
假设在受控状态下质量特性观测值呈现自相关的系统
机理可用式 (3) 表达 , 则过程残差 et 为 : et ≡Yt - ^Yt| t - 1 , t - 2 , …
其中 ^Yt| t - 1 , t - 2 , …是 Yt 的估计值 , 令 Yt 的最小均方误 差线性估计值为 E ( Yt | Yt - 1 , Yt - 2 , …) 。在 t 时刻的估计值 是: ^Yt| t - 1 , t - 2 , … = E ( Yt| Yt - 1 , Yt - 2 , …) =μ^ + ^< ( Yt - 1 - μ^ )
自相关(序列相关性)
i
β X
1
β
=
1
∑ x y ∑ x
=
β
1
+
∑k u
i
i
所以,E (
Var( β ) = + 2σ ∑ x x ρ σ 2 ∑x (∑ xt )
1
2 2 t s 1 2 u u t s<t 2
)=β β
1
其中,
k
i
=
x ∑x
i
2 i
1
t s
即 Var(
β)
1
>
1
∑x
2 t
σu2
(一) OLS估计值方差增大 估计值方差增大
k ≠s k ≠s
检验, 检验失效 (二) t检验, F检验失效 检验
(三)预测精度降低
第二节 自相关的检验
一、图示法
通过et的变化来推断ut的变化规律 1.估计模型,求出 2.作 断
et
et 与 t
或
et 与et-1等的相关图,进行判
瓦特森( 二、杜宾--瓦特森(Durbin--Waston)检验 杜宾 瓦特森 ) 简称, 简称, D--W检验 检验
2.自相关产生的原因 自相关产生的原因 (1)随机项 ui 本身的自相关——“真自相关” 例如,一些随机因素:自然灾害、经济政策、战争 等的影响往往会持续若干时期,造成随机项自相关 (2)模型设定不当,包括遗漏重要解释变量或错误确 定模型的数学形式——“拟自相关” ( 3)数据处理不当造成的自相关 例如,对数据进行差分等变换,就可能产生自相关。
,直到其收敛为止。一般,迭代两步就可以
了,所以,又叫科克兰内--奥克特两步法。 杜宾两步法可以推广到高阶自相关的情况。 利用 d=2(1-
第06章 自相关(讲稿)
第6章自相关1. 自相关定义1)非自相关由第2节知回归模型的假定条件之一是,Cov(u i,u j )=E(u i u j) =0, (i, j∈T, i ≠ j),(1.1)即误差项u t的取值在时间上是相互无关的。
称误差项u t非自相关。
2)自相关如果Cov (u i ,u j ) ≠ 0, (i ≠ j)则称误差项u t存在自相关。
自相关又称序列相关。
原指一随机变量在时间上与其滞后项之间的相关。
这里主要是指回归模型中随机误差项u t 与其滞后项的相关关系。
自相关也是相关关系的一种。
2.自相关类型1)自相关按滞后阶数可分为两类。
(1)一阶自回归形式当误差项u t只与其滞后一期值有关时,即u t = f (u t - 1),称u t具有一阶自回归形式。
(2) 高阶自回归形式当误差项u t的本期值不仅与其前一期值有关,而且与其前若干期的值都有关系时,即u t = f (u t – 1, u t – 2 , … ), 则称u t 具有高阶自回归形式。
2)按函数形式分为线性自相关和非线性自相关 (1)线性自相关 f 为线性函数形式 (2)非线性自相关 f 为非线性函数形式 3.一阶线性自相关通常假定误差项的自相关是线性的。
因计量经济模型中自相关的最常见形式是一阶自回归形式,所以下面重点讨论误差项的线性一阶自回归形式,即 u t =1a u t -1 + v t (1.2)其中1a 是自回归系数,v t 是随机误差项。
v t 满足通常假设E(v t ) = 0, t = 1, 2 …, T, Var(v t ) = σv 2, t = 1, 2 …, T,Cov(v i , v j ) = 0, i ≠ j, i, j = 1, 2 …, T, Cov(u t-1, v t ) = 0, t = 1, 2 …, T,依据普通最小二乘法公式,模型(1.2)中 1 的估计公式是,1ˆa= ∑∑=-=-Tt t Tt t tuuu 22121 (1ˆβ=∑∑---2)())((x x x x y y t t t ) (1.3)其中T 是样本容量。
自相关过程的控制图研究
自相关过程的控制图研究摘要:常规控制图的一个基本假设前提是:从过程获得的观测值彼此时间是相互独立的,然而在现实中存在大量具有自相关性的过程,违背独立性建设。
所以使用常规控制图对平稳的自相关过程进行控制时,会出现大量的虚假报警,从而导致错误的判断,控制图的效用会大为降低。
本文通过对自相关过程中常规控制图进行分析,指出其问题,并运用支持向量机制作残差控制图进行自相关过程控制。
关键词:自相关过程控制;控制图;支持向量机Abstract: The conventional control chart is a basic assumption: the observations obtained from the process each time is independent of each other, but in reality there is a lot of the process of self-correlation, against the independence of the building. Therefore, use of conventional control chart on the smooth control of the autocorrelation process, there will be a large number of false alarms, leading to incorrect judgments, the effectiveness of control charts will be greatly reduced. Based on the autocorrelation of conventional control chart the course of the analysis points out the problems and make use of support vector machines residual control chart for autocorrelated process control.Key words: self-related process control; control chart; support vector machine自相关过程的控制图研究 (1)1.引言 (3)1.1选题的意义 (3)1.2 本文的内容 (3)2.自相关过程常规控制图的局限性 (4)2.1 控制图基础理论 (4)2.1.1 统计过程控制 (4)2.1.2 控制图定义 (5)2.1.3 两种错误 (6)2.1.4 一种简单常规控制图——单值控制图 (7)2.3 自相关过程概述 (8)2.4 常规控制图运用于自相关过程的局限性 (8)3.自相关过程的控制图研究 (10)3.1残差控制图 (10)3.2支持向量机运用于残差控制图 (12)3.2.1 最小二乘支持向量机 (12)3.2.2 用最小二乘支持向量机制作残差控制图 (13) (14)3.3实验研究 (14)3.3.1 受控状态下的控制图研究3.3.2 失控状态下的控制图研究 (20)3.4 检测效率分析 (27)3.4.1平均链长 (27)3.4.2控制图效率比较分析 (27)3.5 结果分析 (27)4.案例分析 (28)4.1 案例说明 (28)4.2 运用残差控制图分析 (28)5总结 (30)1.引言1.1选题的意义要想在市场上立于不败之地,就要满足越来越严格的质量要求,生产出世界级质量的产品。
自相关通俗理解
自相关通俗理解
一、什么是自相关
自相关(Autocorrelation),又称为自相关函数,是描述一个时间序列在不同时间滞后之间的相关性的统计量,它主要用于分析连续数据点之间的关系,以便弄清数据的结构、关系,以及建立数据模型,常用于统计分析中。
二、自相关的用例
自相关用于分析数据在不同时间点之间的相关性,常用于预测经济走势、电力系统的震荡、疾病模型预测,用于测验样本的随机性以及多元回归分析中的多重共线性检验等。
三、自相关的计算
自相关是由特定的自相关函数(ACF)和偏自相关函数(PACF)来计算的,自相关函数用于表示任意时刻与某一时刻之前的滞后时间的相关性,偏自相关函数用于表示任意时刻与某一时刻之前的滞后时间之间的非线性相关性。
四、自相关的应用
1. 用于预测:自相关技术可以用来预测未来趋势、潜在的变化点。
通过分析不同时间点之间的自相关性,可以推断出未来发展的方向,给出未来的预测结果,为企业决策提供参考依据。
2. 用于模型建立:自相关技术可以用来研究不同时间点之间的联系,分析数据的结构和关系,建立有效的模型,以确保模型能够更好地拟合和预测数据。
3. 用于风险控制:自相关技术可以用来识别时间序列可能存在的超出正态分布以外的特殊变异,从而可以避免风险,提高企业的财务效益。
自相关——精选推荐
第六章 自相关一、什么是自相关及其来源 二、自相关的后果三、自相关的检验 四、自相关的修正五、应用实例6.1自相关的概念及其来源例如:研究中国工业总产值指数(Y )和国有企业工业总产值指数(X )的关系,利用1977年至1997年的历史资料,运用OLS 方法得到如下模型。
2ˆ0.0568 1.0628(37.8666)(0.3502)(0.0015)(3.0348)0.32650.37679.2099t t Y X t R DW F =+====给定显著性水平a=0.05,自由度为19,查t 分布表得0.025(19) 2.093t =。
以模型的计算结果t=3.0348,且0.025(19)t t >,表明t X 对t Y 的影响比较显著,但可决系数并不理想。
这种情况下,随机扰动项之间有可能存在序列自相关。
一、自相关的概念自相关(auto correlation )又称序列相关(serial correlation ),是指总体回归模型的随机误差项i u 之间存在的相关关系。
更一般的,自相关是指某一随机变量在时间上与其滞后项之间的相关。
经典回归模型中,曾假定随机误差项无自相关,即i u 在不同观测点之间是不相关的。
(,)(,)0()i j i j Cov u u E u u i j ==≠如果该假设不成立,就称i u 与j u 存在自相关,即不同观测点上的误差项彼此相关。
二、自相关产生的原因 1)经济系统的惯性。
自相关现象大多出现在时间序列数据中,其本期值往往受滞后值影响,突出特征就是惯性和低灵敏度。
例如:居民总消费函数模型01(1,2,,)t t tC Y u t n ββ=++=总消费受收入(t Y )的影响,事实上消费也受消费习惯的影响。
把消费习惯并列随机扰动项中,就可能出现序列相关性。
2)经济行为的滞后性例如,基础设施的建设需要一定的建设周期,那么产出效益的发挥有一定滞后时间。
第五讲 自相关
第五讲、自相关1、自相关的概念:古典线性回归中假设扰动项u i中不存在自相关,即E(u i u j)=0, i≠j这表明任一观察值的扰动项不受其他观察值的扰动项的影响。
但是如果存在E(u i u j) ≠0, i≠j表明存在自相关问题。
自相关通常与时间序列数据有关,但截面数据中也可能产生自相关的问题(空间相关),例如,某一家庭消费支出的增加可能影响不愿比别人逊色的另一家庭消费支出的影响。
图a-d表明扰动项u存在可辨别的模式(可能存在自相关),而图e则表明不存在系统模式(可能不存在自相关)。
2、导致自相关的因素:(1)在涉及时间序列数据的回归方程中,大多数经济时间序列数据的一个显著特征是“惯性”或“延迟性”。
如GDP、就业、货币供给等时间序列都呈现周期性,连续的观察值之间很可能存在相互依赖或是相关的。
(2)模型设定错误:应该包括在模型中的重要变量未包括进模型(过低设定)或模型选择了错误的函数形式,这时残差会呈现出系统模式。
(3)蛛网现象:即解释变量是时间滞后变量,即具有时间滞后效应。
如农产品供给模型中价格对供给的影响存在蛛网现象(滞后效应)。
这种情况下的扰动项不是随机的。
(4)数据加工:在实证研究中,通常原数据是要经过加工的。
例如季度数据的时间序列回归中,数据通常是由月度数据按季相加再平均得到,而这种“平滑”过程的本身可能导致扰动项的系统模式,从而产生自相关。
3、自相关的后果:(1)虽然最小二乘估计仍然是线性和无偏的,但不是有效的,即最小二乘估计量(OLS)不是最优线性无偏估计量(BLUE)。
(2)OLS估计量的方差是有偏的,计算OLS估计量的方差或标准差的公式可能严重低估真实的方差或标准差,从而导致常用的t检验和F检验是不可靠的。
(3)通常计算的R2也是不可靠的。
4、自相关的诊断自相关的诊断存在异方差诊断中的类似问题,即ui是无法观察的,而且也不知道其产生机制:我们通过OLS估计,仅仅得到的是ei,通过对ei的讨论来“了解”自相关是否存在。
GBT17989解读
解读如下:GB/T 17989《控制图》计划分为以下9个部分:第1部分:通用指南;第2部分:常规控制图;第3部分:验收控制图;第4部分:累积和控制图;第5部分:特殊控制图;第6部分:指数加权移动平均控制图;第7部分:多元控制图;第8部分:短周期和小批量控制方法;第9部分:自相关过程控制图。
本文对GB/T 17989的第2部分:常规控制图进行解读。
该标准给出了理解和应用常规控制图进行统计过程控制的指南适用于使用常规控制图进行统计过程控制的情形,所有涉及的补充内容均与常规控制图相关,诸如:警戒限的使用、趋势模式和过程能力分析等。
该标准将代替GB/T 4091 -2001《常规控制图》该标准指出,对于一个受控的过程,超出控制限(平均值±3西格玛)是很偶然的小概率事件。
故而,当一个点落在控制限外时,需要采取行动。
3西格玛控制限通常作为行动限。
同时,在控制图上,对中心线两侧的2西格玛处进行标注是有价值的。
任何落在2西格玛界限之外的点都将作为出现失控状态的警告。
因此2西格玛限称为警戒限。
超警戒限的点并不需要采取措施。
但是可以立即采集另一个样本以确定是否要有相应的纠正措施。
该标准给出了选择不同类型控制图的决策树:与GB/T 4091-2001相比,增加了4种异常波动的检验模式;给出了这四种检验模式所提示的警戒:检验1:表示存在失控状态检验2:表示过程均值或波动性已经偏离中心线检验3:表示过程出现有规则的线性趋势检验4:表示过程出现非随机或周期性模式当然,这些检验模式虽然提高了过程失控的检测能力,但也提高了虚发报警的概率,只使用检验1虚发报警率为3‰,同时应用检验1~3的虚发报警概率约为10‰。
检验模式的选择应基于过程的通常状态来确定,而不是套用模板给出了西部电器的八大判异规则,可作为补充增加了计量控制图的构建方法:给出了通过过程控制、过程能力分析进行过程改进的策略初始数据的采集,推荐25组,要求过程不应受到原材料、操作者、操作方法、机器的设置等外部因素带来的间歇性影响。
自相关过程的批滑动均值EWMA控制图
21 0 0年 6月
J UN. 0 0 2 1
自相 关 过 程 的批 滑 动 均 值 E WMA 控 制 图
王 彩 玲 师 义 民。 ,
(. 1 中国人 民 解 放 军 理 工 大 学 指挥 自动 化 学 院 ,南 京 2 0 0 ; . 北 工 业 大 学 应 用数 学 系, 10 7 2 西 西安 70 7 ) 10 2
摘 要 : 出了基 于批 滑动 平均 构造 新过 程 的方 法 , 给 并证 明新 过 程仍 然 是 平 稳过 程 .针对 MA
() g 过程 给 出 了批 容量 的选 择 方 法 , 建 了监 控 新过 程 的 E 构 WMA 控 制 图, 通过 随机 模 拟 给 出 了 并 平 均运行 批 长. 此控 制 图与利用 大批 容 量和 截 断标 准差 方 法构 建 的 E 将 WMA 控 制 图进 行 比 较 , 结
果表 明, E MA 控 制 图的控制 效果 优 于大 批容 量 的截 断 E MA 控制 图. 此 w w 关键词: 自相 关过 程 ; 批滑 动平 均 ; 自相关 函数 ; 制 图 控
中图分 类 号 : 1 . 文献标 志码 : O2 3 1 A
文 章编 号 :6 43 8 2 1 ) 20 7 - 6 1 7 — 5 X( 0 0 0 —0 10
用 批 滑动平 均 的优 点解 决 了这一 问 题 , 而且 模拟 结果 表 明此控 制 方 法 在实 际 中具有 很 强 的可 行 性 和很 高 的 实用 价值 .
1 过 程 描 述
设 { ,∈z 为 ( ) 稳过 程 , 中 z为整 数集 .即 { ) X t ) 弱 平 其 X 满足 : ( ) X 一 为 常数 , 1 E[ ] 对所 有 的 t . ∈z ( ) [ ]< 。 , 所 有 的 t . 2 E- 。 。 对 X ∈Z
自相关过程控制简介.
计算残差理论ARL的matlab语句 fei=0.6;%自回归系数 delta=1;%偏移量即多少个标准差 %p1是t=q时刻残差落在控制限内的概率 p1=normcdf(3-delta*(1/sqrt(1-fei^2)),0,1)-normcdf(3-delta*(1/sqrt(1-fei^2)),0,1); %p2是t>q各时刻残差落在控制限内的概率 p2=normcdf(3-delta*sqrt(1-fei)/sqrt(1+fei),0,1)normcdf(-3-delta*sqrt(1-fei)/sqrt(1+fei),0,1); ARLtheory=1+1*p1/(1-p2)
残差的单值控制图,偏移0.5标准差
残差的EWMA控制图偏移0.5标准差
单值控制图,偏移1个标准差
EWMA控制图,偏移1个标准差
单值控制图,偏移2个标准差
EWMA控制图,偏移2个标准差
残差控制图的检出效果
平均运行链长仿真,运行1000次,可得偏 移一个标准差,自回归系数=0.6时,可得 ARL=151.95,理论值150.00。若自回归系 数=-0.6,则ARL=7.466,理论值7.05,而 在没有自相关时,休哈特控制图偏移一个 标准差的理论ARL为43.89,在不发生偏 移时残差控制图和普通控制图ARL理论值 均为370
残差控制图的ARL
多元问题
考虑一个二元一阶向量自回归模型,误差 项需满足:均值为0、协方差矩阵为正定矩 阵且不存在自相关。
Yt (Yt 1 ) t 或写成Yt c Yt 1 t , t N 2 (0, ) , t N 2 (0, )
Z i X i (1 ) Z i 1
stm32自相关算法
stm32自相关算法摘要:1.STM32 自相关算法概述2.STM32 自相关算法的原理3.STM32 自相关算法的实现4.STM32 自相关算法的应用5.总结正文:【1.STM32 自相关算法概述】STM32 自相关算法是一种基于STM32 微控制器的算法,用于处理信号处理、图像处理等领域中的自相关问题。
这种算法通过在STM32 上运行程序,实现对输入数据的自相关处理,以达到提取特征、降维等目的。
【2.STM32 自相关算法的原理】STM32 自相关算法的核心思想是利用自相关函数来处理输入数据。
自相关函数是一种统计学方法,用于衡量数据之间的相关性。
在信号处理和图像处理中,自相关函数可以用来提取特征、降维等。
STM32 自相关算法通过在STM32 上运行程序,实现对输入数据的自相关处理,从而实现数据特征的提取和降维。
【3.STM32 自相关算法的实现】STM32 自相关算法的实现主要包括以下几个步骤:(1)数据预处理:对输入数据进行预处理,包括数据规模化、数据归一化等。
(2)自相关函数计算:利用自相关函数计算输入数据的自相关值。
(3)自相关特征提取:根据自相关值的大小,提取输入数据的自相关特征。
(4)数据降维:根据自相关特征,对输入数据进行降维处理。
以上步骤通过在STM32 上运行程序来实现,从而完成对输入数据的自相关处理。
【4.STM32 自相关算法的应用】STM32 自相关算法广泛应用于信号处理、图像处理等领域。
例如,在图像处理中,STM32 自相关算法可以用来提取图像的特征,用于图像识别、目标检测等任务。
在信号处理中,STM32 自相关算法可以用来提取信号的特征,用于信号识别、信号分析等任务。
【5.总结】STM32 自相关算法是一种基于STM32 微控制器的算法,用于处理信号处理、图像处理等领域中的自相关问题。
这种算法通过在STM32 上运行程序,实现对输入数据的自相关处理,以达到提取特征、降维等目的。
自相关过程控制简介.
残差控制图理论ARL的计算
当过程发生偏移时,残差值落在控制限内 的概率为
pt ( ) P(3 Rt 3 ) P[(3 E ( Rt )) / ( Rt E( Rt )) / (3 E( Rt )) / )] Z (3 E ( Rt ) / ) Z (3 E( Rt ) / )
实际问题中还需考虑时间序列的平稳性例子仍然考虑上面的例子对前200个数据采用matlab自带的函数garchfit拟合一个一阶自回归模型拟合的模型为用真实值减去该拟合模型得到的预测值即可得到残差序列我们首先检验残差序列的自相关情况003505866残差的imr控制图残差控制图的检出效果设估计的arp模型残差序列为设序列在q时刻发生偏移残差控制图的检出效果特别的对于一阶自回归模型即p1时因此若q时刻没有检出偏移以后残差显示的偏移减少检出会更加困难残差的单值移动极差控制图会不太灵敏
验证残差的自相关
验证残差的正态性
残差的I-MR控制图
残差控制图的检出效果
设估计的AR(p)模型Yˆt 1(Yt1 ) 2(Yt2 ) ... p(Yt p ) 残差序列为 Rt (Yt ) 1(Yt 1 ) 2(Yt 2 ) ... p(Yt p ) 设序列 Yt 在q时刻发生偏移Y ,即
Z i X i (1 ) Z i 1
1 Ti 2 Z i ' Zi Z i 2i 1 (1 ) 2
Zi
原因分析
SigmaY=inv(eye(4)-kron(fei,fei))*sigma;求 得
100.003 65.994 SigmaY= 65.994 121.001
自相关过程的统计控制状态
残差与过程刚发生偏移时的第一个残差相比会变得非常小 ,
而难于检测出过程的偏移 。导致这一结果的原因是 AR (1)
模型对过程均值的变化作出了响应 ,均值的部分变化反映在
预测值中 。由式 (8) 可见 ,当 < > 0 时 ,均值的变化对残差的
影响减弱了 ;当 < < 0 时 ,均值的变化对残差的影响增强了 。
AR(1) 模型 , Xt 与 Xt - k 的自相关系数为 :
ρ k
=
<k , k
= 1 ,2 , …
(2)
如果模型中系数的估值 ^< 和μ^ 是准确的 ,那么 ,残差为
Rt = Xt - μ^ (1 - ^<) - ^<Xt- 1
(3)
εt 可用残差 Rt 来近似 ,此时残差的自相关性已很微弱 。用
Rt 在控制图上打点构成了一张残差控制图 ,其残差控制图
的控制界限为 :
UCL = 3
CL = 0
LCL = - 3
假设系数估值是准确的 ,那么 ,预测值 X^ t 如下式所示
X^ t = μ(1 - <) + <Xt- 1
(4)
不失一般性 ,令 X0 = μ。
现考虑由于异常原因的影响使过程均值发生变化的情
(1) E ( Xt ) = μ,对一切 t
— 76 —
(2) E( Xt - μ) ( Xt+τ - μ) = rτ 第一条性质表明过程的期望值不随时间的推移而变化 ;第二 条性质表明过程前后两个时刻的线性相关性 (统计意义) 的 强弱只依赖于两个时刻间的间隔而与它们所处的位置 t 无 关 。而平稳过程在工程技术 、自然科学和医学等领域中具有 极其广泛的代表性 ,它反映了一个过程处于稳态工作条件下 的统计性质 。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
E(Rt )
Y (1 ) Y
,t q ,t q
且Y / 12
残差控制图理论ARL的计算
➢因此有
Z(3 / 12)- Z(- 3 / 1 2) ,t q
pt ( ) Z(3 1 / 1)- Z(- 3 1 / 1),t q
➢残差图的ARL按原始意义可得公式
ARL( ) 1* (1 ptq ( )) i ptq ( ) ptq ( )i2 (1 ptq ( )) i2
Zi X i (1 )Zi1
Ti 2
Zi'
1 Zi
Zi
Zi
2
1 (1 )2i
原因分析
➢SigmaY=inv(eye(4)-kron(fei,fei))*sigma;求 得
100.003 65.994 SigmaY= 65.994 121.001
➢对原始数据作MEWMA控制图,估计的
时间序列建模
➢比较常见的是建立自回归模型AR(p),也可 以建立移动平均MA(q)模型和自回归整合移 动平均模型ARIMA(p,q)。模型的阶数确定 可以通过专门的定阶准则AIC、BIC或者是 通过自相关函数和偏自相关函数确定。实 际问题中还需考虑时间序列的平稳性
例子
➢仍然考虑上面的例子,对前200个数据采用 matlab自带的函数garchfit拟合一个一阶自回 归模型,拟合的模型为 xt 0.035 0.5866xt1, 用真实值减去该拟合模型得到的预测值即 可得到残差序列,我们首先检验残差序列 的自相关情况
自相关对控制图表现的影响
自相关的影响机制
➢ 考虑一阶自回归AR(1)模型,Yt Yt1 t
➢ 其中 t N (0, 2 ) ,序列 Yt 的方差:
Y 2
Var(Yt )
2 12
➢ 常用的均值-极差控制图使用极差来估计总体
标准差,查找有关资料可得,E(R / d2(2)) 1Y
➢ 可见当自相关系数 为0时,极差法所得的是
残差控制图理论ARL的计算
Hale Waihona Puke ➢当过程发生偏移时,残差值落在控制限内 的概率为
pt ( ) P(3 Rt 3 )
P[(3 E(Rt )) / (Rt E(Rt )) / (3 E(Rt )) / )]
Z (3 E(Rt ) / ) Z(3 E(Rt ) / )
➢对于一阶自回归过程,已知
,t q E(Yt ) Y , t q
E(Rt )
0
,t q
Y (11 2 ... i )Y (11 2 ... p )Y
,t q ,t q i,1 i p ,t q p
残差控制图的检出效果
➢特别的,对于一阶自回归模型,即p=1时,
0
,t q
E(Rt ) Y
(1 1) Y
y2,t c2 A y 2,1 1,t1 A y 2,2 2,t1 e2,t
➢其中
260 470
,
0.0146 0.6493
0.0177
0.0958
,
99.91 63.99
63.99
69.52
➢仿真200个数据。绘制MEWMA控制图,设
定预期ARL=200, 0.2,则UCL=9.65
p 0
E
(
t
)
0,Var
(
t
)
2
,
E
(
t
s
)
0,
s
t
Exst 0,s t
➢ 一个matlab仿真例子, xt 0.6xt1 t ,t N(0,1)
➢ 初始值x1 =0,仿真250个数据,第201个时刻
引入偏移。偏移量可以指定为标准差的倍数。
先忽略自相关,对前200个数据绘制单值-移
动极差控制图
99.91 63.99 Sigma= 63.99 69.52
➢估计值为
94.5947 62.9745 Sigma= 62.9745 67.1824
残差的MEWMA控制图
其他研究
➢神经网络和支持向量机对自相关问题进行 模式识别,用神经网络和支持向量机对自 相关过程进行回归,然后对残差应用传统 控制图
单值控制图,偏移2个标准差
EWMA控制图,偏移2个标准差
残差控制图的检出效果
➢平均运行链长仿真,运行1000次,可得偏 移一个标准差,自回归系数=0.6时,可得 ARL=151.95,理论值150.00。若自回归系 数=-0.6,则ARL=7.466,理论值7.05,而 在没有自相关时,休哈特控制图偏移一个 标准差的理论ARL为43.89,在不发生偏 移时残差控制图和普通控制图ARL理论值 均为370
总体标准差的无偏估计,而 不为0时,则是
有偏估计。对单值-移动极差控制图,则有
E(MR / d2(2)) 1Y
自相关的影响机制
➢回到上面的例子,xt 0.6xt1 t t N(0,1) ➢ x 1/(10.62) 1.25 ,而采用移动极差法估计的
总体标准差理论值为E(MR / d2(2)) 10.6 *1.25 0.79 ➢从而造成了控制限收紧,导致出现了大量
93.1211 29.3999 SigmaY= 29.3999 60.5394
➢使用最小二乘方法拟合模型,可得
241.06 -0.0236 0.0530 Yt 256.01 0.6183 0.1118 *Yt1
➢使用该模型进行预测,计算出残差值,然 后对残差应用MEWMA控制图。
➢而残差的理论方差-协方差矩阵为
➢对方差协方差矩阵的监控方法 ➢失控的诊断问题
p2=normcdf(3-delta*sqrt(1-fei)/sqrt(1+fei),0,1)normcdf(-3-delta*sqrt(1-fei)/sqrt(1+fei),0,1); ARLtheory=1+1*p1/(1-p2)
残差控制图的ARL
多元问题
➢考虑一个二元一阶向量自回归模型,误差 项需满足:均值为0、协方差矩阵为正定矩 阵且不存在自相关。
自相关问题
➢然而生产实际中,有时并不能满足以上的 假定,对于不符合正态性假定的情形,可 以进行正态性转换,亦有学者采用如支持 向量机分类的方法进行处理。
➢而在化工、冶金等生产领域,同时也由于 数据自动采集技术的进步,数据常常出现 自相关。
自相关对控制图表现的影响
xt 0 1xt1 2 xt2 L p xt p t
自相关过程控制简介
08级工业工程硕士 张驰
内容
➢自相关对控制图表现的影响 ➢一元残差控制图的实施方法和效果分析 ➢一元残差控制图的ARL ➢多元自相关问题简介 ➢其他研究
传统控制图的基本假设
➢自1920s Shewhart博士发明控制图以来,统 计过程控制理论得到了迅速的发展和应用
➢传统控制图,包括休哈特控制图、EWMA 控制图、CUSUM控制图和它们的多元形式 有一个关键的假定:样本序列独立且服从 正态分布
,t q ,t q
➢因此若1 0,q时刻没有检出偏移,以后残差
显示的偏移减少,检出会更加困难,残差
的单值-移动极差控制图会不太灵敏。可以
考虑用EWMA控制图或CUSUM控制图。1 0
时相反。
残差的单值控制图,偏移0.5标准差
残差的EWMA控制图偏移0.5标准差
单值控制图,偏移1个标准差
EWMA控制图,偏移1个标准差
Yt (Yt1 ) t ,t N2 (0, ) 或写成Yt c Yt1 t ,t N2 (0, )
y1,t y2,t
c1 c2
A1,1 A2,1
A1,2 A2,2
y1,t 1 y2,t 1
e1,t e2,t
y1,t c1 A y 1,1 1,t1 A1,2 y2,t1 e1,t
验证残差的自相关
验证残差的正态性
残差的I-MR控制图
残差控制图的检出效果
➢设估计的AR(p)模型Yˆt 1(Yt1 )2(Yt2 )... p(Ytp ) ➢残差序列为 Rt (Yt ) 1(Yt1 ) 2(Yt2 ) ... p(Ytp ) ➢设序列 Yt 在q时刻发生偏移Y ,即
行监控
时间序列建模
➢使用残差控制图监控自相关过程的方法最 早由Alwan和Roberts[Time series modeling for statistical process control]提出,他们证明了对自相关序列 建立恰当的时间序列模型,那么由真实值 减去预测值所得的残差序列是独立的,然 后可以对残差序列应用传统控制图。
1 1
1
ptq ( )
ptq ( )
➢在例子 xt 0.6xt1 t t N(0,1) ,设偏移1个标准
➢差,可得ARL=150.00
➢ 计算残差理论ARL的matlab语句 ➢ fei=0.6;%自回归系数
delta=1;%偏移量即多少个标准差 %p1是t=q时刻残差落在控制限内的概率
p1=normcdf(3-delta*(1/sqrt(1-fei^2)),0,1)-normcdf(3-delta*(1/sqrt(1-fei^2)),0,1); %p2是t>q各时刻残差落在控制限内的概率
的出界点,虚发警报错误较多;若是自相 关系数小于零,则控制限会放宽,容易造 成漏发警报错误。
解决方法一
➢从自相关图可以看到,当滞后期大于3时, 序列间的自相关会变得较小,直观的想法 是增大取样间隔。
方法一的缺陷
➢丢弃大量可用数据信息 ➢过程发生偏移时不能及时的检测出,会产
生大量不合格产品。 ➢可以采用修正控制限的方法 ➢更常见的方法是使用残差控制图对过程进