中心极限定理介绍_王筑娟
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
n
( 是一个随 机 变 量 的 三 角 形 阵 列 。 其 中 Xn j n = …, …, 是具有均值为0和方差为 1, 2, 2, n) j=1,
n
并且满足 σ 的独立随机变 量 序 列 ,
2 n j
j=1
∑σ
2 n j
= 1。
如果 L 即对于 当n → i n d e b e r ε >0, g条件成立 ,
A n I n t r o d u c t i o n t o t h e C e n t r a l L i m i t T h e o r e m s
WANG Z h u u a n - j
( , , ) S c h o o l o f S c i e n c e s S h a n h a i I n s t i t u t e o f T e c h n o l o S h a n h a i 2 0 1 4 1 8, C h i n a g g y g
收稿日期 : 2 0 1 2 0 2 1 9 - - ) 基金项目 : 上海应用技术学院科技发展基金资助项目 ( K J 2 0 0 8 1 5 - , : 作者简介 : 王筑娟 ( 女, 副教授 , 主要研究方向为统计学 . 1 9 6 5 E-m a i l w a n z i t . e d u. c n -) @s g j
—
百度文库
L
1 Xk -μk 2 + δ ∑E s n k=1 成立 , 则
n
2 + δ
# →0
n→
Sn - E Sn L ) 0, 1 → N ( s n
1. 3 平稳 m- 相依序列的中心极限定理 本节讨论 平 稳 m - 相 依 序 列 的 中 心 极 限 定
X1 1 X2 1 X3 1 … X2 2 X3 2 X3 3
n
#时
j=1
2 其中 , { I{ |Xn Xn |>ε}) Xn |>ε} | | → 0, j |I j j ∑E (
1, |Xn >ε j| 是示性函数 , 则 zn = = j ∑Xn 其他 0,
值 的 m - 相 依 序 列, Sn =
{
i=1
∑Y
i
。记 σ 0 j =
2 ( , …, c o v Yi , Yi+j) 1, m ,且 σ =σ j = 0, 0 0 +
3 2 6
上海应用技术学院学报 ( 自然科学版 )
第1 3卷
具有有限均值和方差的随机变量的均值近似服从 正态分布 。 本文将给出中 心 极 限 定 理 的 简 明 介 绍 : 包括 经典的独立同分 布 样 本 的 情 形 , 独立但不同分布 ) 序列的林德伯 格 费 勒 ( 情 形, 和 L i n d e b e r F e l l e r - g
讨论了经典中心 极 限 定 理 的 某 些 改 进 , 其中包括 B e r r E s s e n 界和 E d e w o r t h 展式 。 - y g
1 独立序列的中心极限定理
1. 1 独立同分布序列的中心极限定理 …是独立同分布的 定理 1 C L T 设 X1 , X2 , 随机向量 , 均 值 为 0, 且具有有限的协方差矩阵 。 则槡 nXn →N ( 0, Σ, Σ) 1. 2 独立不同分布序列的中心极限定理 单变量情形 定理 2 L i n d e b e r F e l l e r定 理 , - g 设
L
证明 因为
定理 3 L 多变量情形 i n d e b e r F e l l e r定 理 , - g …) , , 设 Xn n = 1, 2, 对每一个 n( n j 1 ≤j ≤ k 是一列独立的 , 在 R 空 间 中 取 值 的 随 机 向 量, 满
p
σ 烄 0 0 Y1烌 烄
。正态分布在历史上称为误差
律, 被G 因 此, 它 a u s s用作天 文 观 测 误 差 的 模 型 , 通常被称为 G 自然 ” a u s s分布 。G a u s s考虑某些 “ 的误差分布的假设 , 例如观察值的算术平均是 “ 最 被观测到 的 数 量 , 导 出 了 正 态 分 布, 而不是 可能 ” 作为一些独 立 随 机 变 量 和 的 极 限 。 如 今 , 中心极 使得可以用正态分布来拟合那些 限定理 ( C L T)
( ) 文章编号 : 1 6 7 1 7 3 3 3 2 0 1 3 0 4 0 3 2 5 0 4 - - -
中心极限定理介绍
王筑娟
( ) 上海应用技术学院 理学院 , 上海 2 0 1 4 1 8
摘要 : 包括独立 同 分 布 样 本 的 经 典 中 心 极 限 定 理 , 独立但 对中心极限定理作了简明的介绍 , 不同分布的 L i n d e b e r F e l l e r中心极限定理和 m- 相依序列的中心极限定 理 。 特 别 对 m- 相 - g 依序列中心极限定理 , 给出了一个新的 、 更为简单易懂的证明 。 还讨论了对经典中心极限定理 包括 B 的近似的改进 , e r r E s s e n 界和 E d e w o r t h 展式 。 - y g 关键词 : B e r r E s s e n界 ; E d e w o r t h 展式 m- 相依平稳序列 ;中心极限定理 ; - y g 中图分类号 :O2 1 2. 1 文献标志码 : A
第1 3卷 第4期 2 0 1 3年1 2 月
上 海 应 用 技 术 学 院 学 报( 自 然 科 学 版) J OURNAL O F SHANGHA I I N S T I TUT E O F T E CHNO L OGY( NATURAL S C I ENC E)
V o l . 1 3 N o . 4 e c . 2 0 1 3 D
k n
k n
j=1
|X ∑E (
L
n j
2 I{ | Xn |>ε}) | →0 j
则
j=1
∑X
n j
。 0, → N ( Σ)
对定理 2 和 3, 要验证 L i n d e b e r g 条件常常并 而下述定理 4 的条件却是容易验证的 , 但 不容易 , 是条件更强 。 定理 4 L a u n o v 中 心 极 限 定 理 设 X1 , y p …, 是 一 列 独 立 的 随 机 变 量, 满 足 E( X2 , Xn ) =
] , 该定理见文献 [ 但是 , 本文的证明是全新 理, 3 4 - 的, 且其特点是比原有的证明更简单易懂 。 如 果 对 任 意 给 定 的 k, 随机向量( Xt+1 , …, 的联 合 分 布 与 t 无 关 , 则称序列 Xt+2 , Xt+k ) …, 是严平稳的 。 如果只要 j- 有 X1 , X2 , i>m , ( …, …) 和( 独 立, 则称严 X1 , X2 , Xi) Xj , Xj+1 , 平稳序列 { 为 m- 相依的 。 Xn } …) 定理 5 设 Yi( 是一个具有0均 i=1, 2,
…
σ 0 m
…
0
…烌 0
σ 0 0
σ 0 m σ 0 0
c o v Y2 = σ 0 m 0 σ 烆 烎 0 m 烆 所以对 n≥m
n n
( ) 。 足E 如果 Xn o v Xn n j = 0 且协方差矩阵 Σ j =c j
k n
0
烎
( )当 n → # 时 , Σn 1 ∑ j → Σ;
2 ( v a r Xn ) = 0。 令 σ n, n < # 并且至少有一个σ n> μ Sn = X1 + X2 + … + Xn 且 2 2 2 ( s v a r Sn )= 槡 σ n = 槡 1 +σ 2 + … +σ n 对某个δ>0, 如果 L a u n o v 条件 y p
m- 相依序列的一个情形 。 对 m- 相 依 序 列 的 中 心极限定理 , 将给出一个新的 、 更容易的证明 。 还
: , A b s t r a c t A c o n c i s e i n t r o d u c t i o n t o t h e c e n t r a l l i m i t t h e o r e m s w a s m a d e i n c l u d i n t h e c l a s s i c a l v e r s i o n g , , I I D s a m l e s L i n d e b e r F e l l e r v e r s i o n f o r i n d e e n d e n t l b u t n o t i d e n t i c a l l d i s t r i b u t e d s e u e n c e s a n d t o - p g p y y q a i v e n, r o o f r o v i d e d v e r s i o n f o r m- d e e n d e n t s e u e n c e s w a s f o r w h i c h a n e w a n d e s a t o f o l l o w w a s - - g p p p q y , , w e l l . M o r e o v e r s o m e i m r o v e m e n t o f t h e c l a s s i c a l c e n t r a l l i m i t t h e o r e m s w a s a l s o d i s c u s s e d i n c l u d i n a s p g B e r r E s s e n B o u n d s a n d E d e w o r t h e x a n s i o n s . - y g p : ; K e w o r d s m- d e e n d e n t s t a t i o n a r c e n t r a l l i m i t t h e o r e m; B e r r E s s e n b o u n d s E d e w o r t h e x a n s i o n s - y p y; y g p
) ( ; 0, 1 n → #) → N (
2 反之 , 如果当 n → # 时 , m a x σ n n j≤n j →0及 z
L
L 2 ,则Sn → N ( 。 2∑σ 0, σ) 0 i i=1 n 槡
m
=
∑X
n j
), 则L 0, 1 i n d e b e r → N ( g 条件成立 。
j=1
( )对每个 ε > 0, 当 n → #时 , 2
( v a r Sn )=
i=1 j=1
( o v Y ∑ ∑c
i
, Yj)=
第4期
n
王筑娟 : 中心极限定理介绍
大数定律和中心极限定理是统计学的两大基 前者确保了统 计 推 断 至 少 在 样 本 增 大 时 可 以 石, 无限接近真相 , 而后者则给出了大多数统计量分 布的正态近 似
[ ] 1 2 -
由多个独立的小误差所造成的结果 。 存在着许多 情形 , 观 察 并 不 受 误 差 影 响, 但 是, 正态分布的合 理性仍然可 以 用 中 心 极 限 定 理 来 保 证 。 例 如 , 一 定年龄的成年人的身高的分布可以被认为是正态 的, 因为身高可以 被 看 作 是 许 多 独 立 的 微 小 影 响 , 的总和 。 正态分布并不是起源于 G 至 少, 它 a u s s 零散地出现在 D 他证明了 p= e M o v i e的工作中 , 1 时的贝努利场合 ( 即: 第n 个随机变量是投掷硬 2 币的结果 ) 的中心极限定理 。 在概率论中 , 中心极 限定理给出一定的条件 , 在这些条件下 , 足够多的
( 是一个随 机 变 量 的 三 角 形 阵 列 。 其 中 Xn j n = …, …, 是具有均值为0和方差为 1, 2, 2, n) j=1,
n
并且满足 σ 的独立随机变 量 序 列 ,
2 n j
j=1
∑σ
2 n j
= 1。
如果 L 即对于 当n → i n d e b e r ε >0, g条件成立 ,
A n I n t r o d u c t i o n t o t h e C e n t r a l L i m i t T h e o r e m s
WANG Z h u u a n - j
( , , ) S c h o o l o f S c i e n c e s S h a n h a i I n s t i t u t e o f T e c h n o l o S h a n h a i 2 0 1 4 1 8, C h i n a g g y g
收稿日期 : 2 0 1 2 0 2 1 9 - - ) 基金项目 : 上海应用技术学院科技发展基金资助项目 ( K J 2 0 0 8 1 5 - , : 作者简介 : 王筑娟 ( 女, 副教授 , 主要研究方向为统计学 . 1 9 6 5 E-m a i l w a n z i t . e d u. c n -) @s g j
—
百度文库
L
1 Xk -μk 2 + δ ∑E s n k=1 成立 , 则
n
2 + δ
# →0
n→
Sn - E Sn L ) 0, 1 → N ( s n
1. 3 平稳 m- 相依序列的中心极限定理 本节讨论 平 稳 m - 相 依 序 列 的 中 心 极 限 定
X1 1 X2 1 X3 1 … X2 2 X3 2 X3 3
n
#时
j=1
2 其中 , { I{ |Xn Xn |>ε}) Xn |>ε} | | → 0, j |I j j ∑E (
1, |Xn >ε j| 是示性函数 , 则 zn = = j ∑Xn 其他 0,
值 的 m - 相 依 序 列, Sn =
{
i=1
∑Y
i
。记 σ 0 j =
2 ( , …, c o v Yi , Yi+j) 1, m ,且 σ =σ j = 0, 0 0 +
3 2 6
上海应用技术学院学报 ( 自然科学版 )
第1 3卷
具有有限均值和方差的随机变量的均值近似服从 正态分布 。 本文将给出中 心 极 限 定 理 的 简 明 介 绍 : 包括 经典的独立同分 布 样 本 的 情 形 , 独立但不同分布 ) 序列的林德伯 格 费 勒 ( 情 形, 和 L i n d e b e r F e l l e r - g
讨论了经典中心 极 限 定 理 的 某 些 改 进 , 其中包括 B e r r E s s e n 界和 E d e w o r t h 展式 。 - y g
1 独立序列的中心极限定理
1. 1 独立同分布序列的中心极限定理 …是独立同分布的 定理 1 C L T 设 X1 , X2 , 随机向量 , 均 值 为 0, 且具有有限的协方差矩阵 。 则槡 nXn →N ( 0, Σ, Σ) 1. 2 独立不同分布序列的中心极限定理 单变量情形 定理 2 L i n d e b e r F e l l e r定 理 , - g 设
L
证明 因为
定理 3 L 多变量情形 i n d e b e r F e l l e r定 理 , - g …) , , 设 Xn n = 1, 2, 对每一个 n( n j 1 ≤j ≤ k 是一列独立的 , 在 R 空 间 中 取 值 的 随 机 向 量, 满
p
σ 烄 0 0 Y1烌 烄
。正态分布在历史上称为误差
律, 被G 因 此, 它 a u s s用作天 文 观 测 误 差 的 模 型 , 通常被称为 G 自然 ” a u s s分布 。G a u s s考虑某些 “ 的误差分布的假设 , 例如观察值的算术平均是 “ 最 被观测到 的 数 量 , 导 出 了 正 态 分 布, 而不是 可能 ” 作为一些独 立 随 机 变 量 和 的 极 限 。 如 今 , 中心极 使得可以用正态分布来拟合那些 限定理 ( C L T)
( ) 文章编号 : 1 6 7 1 7 3 3 3 2 0 1 3 0 4 0 3 2 5 0 4 - - -
中心极限定理介绍
王筑娟
( ) 上海应用技术学院 理学院 , 上海 2 0 1 4 1 8
摘要 : 包括独立 同 分 布 样 本 的 经 典 中 心 极 限 定 理 , 独立但 对中心极限定理作了简明的介绍 , 不同分布的 L i n d e b e r F e l l e r中心极限定理和 m- 相依序列的中心极限定 理 。 特 别 对 m- 相 - g 依序列中心极限定理 , 给出了一个新的 、 更为简单易懂的证明 。 还讨论了对经典中心极限定理 包括 B 的近似的改进 , e r r E s s e n 界和 E d e w o r t h 展式 。 - y g 关键词 : B e r r E s s e n界 ; E d e w o r t h 展式 m- 相依平稳序列 ;中心极限定理 ; - y g 中图分类号 :O2 1 2. 1 文献标志码 : A
第1 3卷 第4期 2 0 1 3年1 2 月
上 海 应 用 技 术 学 院 学 报( 自 然 科 学 版) J OURNAL O F SHANGHA I I N S T I TUT E O F T E CHNO L OGY( NATURAL S C I ENC E)
V o l . 1 3 N o . 4 e c . 2 0 1 3 D
k n
k n
j=1
|X ∑E (
L
n j
2 I{ | Xn |>ε}) | →0 j
则
j=1
∑X
n j
。 0, → N ( Σ)
对定理 2 和 3, 要验证 L i n d e b e r g 条件常常并 而下述定理 4 的条件却是容易验证的 , 但 不容易 , 是条件更强 。 定理 4 L a u n o v 中 心 极 限 定 理 设 X1 , y p …, 是 一 列 独 立 的 随 机 变 量, 满 足 E( X2 , Xn ) =
] , 该定理见文献 [ 但是 , 本文的证明是全新 理, 3 4 - 的, 且其特点是比原有的证明更简单易懂 。 如 果 对 任 意 给 定 的 k, 随机向量( Xt+1 , …, 的联 合 分 布 与 t 无 关 , 则称序列 Xt+2 , Xt+k ) …, 是严平稳的 。 如果只要 j- 有 X1 , X2 , i>m , ( …, …) 和( 独 立, 则称严 X1 , X2 , Xi) Xj , Xj+1 , 平稳序列 { 为 m- 相依的 。 Xn } …) 定理 5 设 Yi( 是一个具有0均 i=1, 2,
…
σ 0 m
…
0
…烌 0
σ 0 0
σ 0 m σ 0 0
c o v Y2 = σ 0 m 0 σ 烆 烎 0 m 烆 所以对 n≥m
n n
( ) 。 足E 如果 Xn o v Xn n j = 0 且协方差矩阵 Σ j =c j
k n
0
烎
( )当 n → # 时 , Σn 1 ∑ j → Σ;
2 ( v a r Xn ) = 0。 令 σ n, n < # 并且至少有一个σ n> μ Sn = X1 + X2 + … + Xn 且 2 2 2 ( s v a r Sn )= 槡 σ n = 槡 1 +σ 2 + … +σ n 对某个δ>0, 如果 L a u n o v 条件 y p
m- 相依序列的一个情形 。 对 m- 相 依 序 列 的 中 心极限定理 , 将给出一个新的 、 更容易的证明 。 还
: , A b s t r a c t A c o n c i s e i n t r o d u c t i o n t o t h e c e n t r a l l i m i t t h e o r e m s w a s m a d e i n c l u d i n t h e c l a s s i c a l v e r s i o n g , , I I D s a m l e s L i n d e b e r F e l l e r v e r s i o n f o r i n d e e n d e n t l b u t n o t i d e n t i c a l l d i s t r i b u t e d s e u e n c e s a n d t o - p g p y y q a i v e n, r o o f r o v i d e d v e r s i o n f o r m- d e e n d e n t s e u e n c e s w a s f o r w h i c h a n e w a n d e s a t o f o l l o w w a s - - g p p p q y , , w e l l . M o r e o v e r s o m e i m r o v e m e n t o f t h e c l a s s i c a l c e n t r a l l i m i t t h e o r e m s w a s a l s o d i s c u s s e d i n c l u d i n a s p g B e r r E s s e n B o u n d s a n d E d e w o r t h e x a n s i o n s . - y g p : ; K e w o r d s m- d e e n d e n t s t a t i o n a r c e n t r a l l i m i t t h e o r e m; B e r r E s s e n b o u n d s E d e w o r t h e x a n s i o n s - y p y; y g p
) ( ; 0, 1 n → #) → N (
2 反之 , 如果当 n → # 时 , m a x σ n n j≤n j →0及 z
L
L 2 ,则Sn → N ( 。 2∑σ 0, σ) 0 i i=1 n 槡
m
=
∑X
n j
), 则L 0, 1 i n d e b e r → N ( g 条件成立 。
j=1
( )对每个 ε > 0, 当 n → #时 , 2
( v a r Sn )=
i=1 j=1
( o v Y ∑ ∑c
i
, Yj)=
第4期
n
王筑娟 : 中心极限定理介绍
大数定律和中心极限定理是统计学的两大基 前者确保了统 计 推 断 至 少 在 样 本 增 大 时 可 以 石, 无限接近真相 , 而后者则给出了大多数统计量分 布的正态近 似
[ ] 1 2 -
由多个独立的小误差所造成的结果 。 存在着许多 情形 , 观 察 并 不 受 误 差 影 响, 但 是, 正态分布的合 理性仍然可 以 用 中 心 极 限 定 理 来 保 证 。 例 如 , 一 定年龄的成年人的身高的分布可以被认为是正态 的, 因为身高可以 被 看 作 是 许 多 独 立 的 微 小 影 响 , 的总和 。 正态分布并不是起源于 G 至 少, 它 a u s s 零散地出现在 D 他证明了 p= e M o v i e的工作中 , 1 时的贝努利场合 ( 即: 第n 个随机变量是投掷硬 2 币的结果 ) 的中心极限定理 。 在概率论中 , 中心极 限定理给出一定的条件 , 在这些条件下 , 足够多的