第二章随机过程基本概念.
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
(1若有的一维密度函数。
为称使可积
}: ({ , ( , ( , (, 0 , (1111T t t X t x f dx
t x f t x F t x f x
Î=³ò¥-(2若有的一维概率分布。
为称满足}: ({}{1
, 0} ({T t t X p p
p p x t X P k k k k k
k Î=³==å
¥¥-k k iux X k k iux X p e
u t p x t X P t X dx t x f e u t t x f t X k , ( (( ( 2 , ( , ( , ( (111jj则有分布列若(,则
有密度若(
有时也需要利用常用的一些特征函数来求随机变量的分布函数,由特征函数与分布函数的一一对应性有:
cos(
(Q
+
=t
a
t
X w
的均值函数,方差函数和自相关函数。其中, a , w为常数, Q是在(0, 2p上均匀分布的随机变量。例4试求随机相位余弦波
2随机过程的特征函数
的一维特征函数。
为称为随机变量,记
由于给定( , ( ( ( , ( (, ( (t X u t u e
E u t t X T t X t X t iuX X jjjÙ==Îåò====
为X (t的有限维分布函数族。
为随机过程的n维分布函数。称关于随机过程X (t的所有有限维分布函数的集合
注意:随机过程的n维分布函数描述了随机过程在任意n不同时刻的状态之间的联系。
随机过程X (t的有限维分布函数族的意义何在?随机过程的n维分布函数(或概率密度能够近似地描述随机过程的统计特性,而且, n越大,则n维分布函数越趋完善地描述随机过程的统计特性。
且对于不同的t,是不同的随机变量.
(2对于固定的样本点n, X(t=n是一个t的函数.
(即:在多长时间内来n个人?
所以{X(t,t>0}为一个随机过程.
相位正弦波。为随机过程,称为随机则令例(
2, 0(~
sin( (3t X U Y R t Y t a t X pwÎ+=例4考虑抛掷骰子的试验:
(i设X n是第n次抛掷的点数,对于n = 1, 2, …的不同值, X n为不同的随机变量,因而{Xn , n≥ 1}构成一个随机过程,
我们通常称状态空间离散的随机过程为链,参数空间离散的随机过程为随机(时间序列。
二、按随机过程的概率结构来分类
这种分类是按随机过程的概率特性来分类,实质上就是按随机过程的分布函数的特性分类。设X (t为随机过程,若其均方值函数,对于任意的t都存在,则称此X (t为二阶矩过程。
2随机过程的基本概念
§2.1基本概念
随机过程是指一族随机变量.
对随机过程的统计分析称为随机过程论,它是随机数学中的一个重要分支,产生于本世纪的初期.
其研究对象是随机现象,而它特别研究的是随“时间”变化的“动态”的随机现象.
一随机过程的定义
1定义设E为随机试验, S为其样本空间,如果(1对于每个参数t ∈ T , X(e,t为建立在S上的随机变量,
二、随机过程的数字特征与特征函数
1随机过程的数字特征
(1若对于任意给定的t , EX (t的存在,则称它为随机过程的均值(t的函数,记为
( (t EX t m X =又称为X(t的均值函数。(2若对于任意给定的t , EX 2(t存在,则称它为随机过程的均方值函数,记为
( (2
2
t EX t X =y(3若对于任意给定的t, E(X(t-mX (t2存在,则称它为随机过程的方差函数,记为[]2
(, , (, (( , , , , , , , (22112121n n n n n x t X x t X x t X P t t t x x x F £££=L L L则F必为某个随机过程的有限维分布族。即存在X(t,使(2相容性:对于任意自然数m < n ,函数簇中的m维分布函数与n维分布函数之间有关系:
t
t
X Î
例7排队问题:
顾客来到服务站要求服务(如:某时间段内用户对电话交换台的呼叫数、到银行要求服务的顾客数、用户对电器故障要求修理的户数等,当服务站中的服务员都在忙碌时,来到的顾客就要排队。如:用X(t表t时要求服务的用户数,
Y(t表t时来到的顾客需等候的时间
Z(t表t时的队长,等。
则X(t, Y(t, Z(t均为随机过程。
, 2, 0(, 1, 13. , , 2, 0(2. , , 1, 11.
, , sin为常数而的均匀分布上服从上均匀分布的随机变量是若为常数上的均匀分布服从若为常数上均匀分布的随机变量是若画出其图形的任意两个样本函数并试写出随机过程
Q-QQ-+¥¥-ÎQ+=pwwpwwA A A t t A t X
{X(e,t , t∈(0,+∞}
就是描述花粉运动的随机过程。(布朗运动
例6群体生长随机模型
一个群体(如:自然生长的鸟的群体、一个宇宙射线粒子引起的裂变的原子全体、数量用X(t表示时间t时群体的大小,则为一随机过程。
}
(
{T
(2对每一个e ∈ S , X(e,t为t的函数,那么称随机变量族{X(e,t, t∈ T, e∈ S}为一个随机过程,简记为{X(e,t, t∈ T}或X(t。
((((({}
{}
[](为随机序列。时,通常称,取可列集合当可以为无穷。
通常有三种形式:
参数一般表示时间或空间,或有时也简写为一个轨道。
随机过程的一个实现或过程的样本函数,或称随机的一般函数,通常称为为对于:上的二元单值函数。
T t
t
X
t
X Î
=,
cos
(w
例1考虑随机过程
此处w为常数, X服从标准正态分布。试求X (t的一维概率密度。
例2设随机过程为
0
(
,
(>
=t
te
t
Y X
其中X服从参数为l的指数分布,试求Y (t的一维概率密度。
定义2设X(t为随机过程,对于任意两个时刻t 1,t 2,及实数x 1, x 2,称
为随机过程的二维分布函数,而
k
k k k iux t X p x t X P p e
u k ==Û=å} ({ ( (j
例6:设独立,且服从, 0(, (2
21sN X t X X t X i +=求X(t的一维特征函数。
随机过程的n维特征函数:
( , , ; , , (]( ( ([112211n n t X u t X u t X u i n n X e E u u t t +++=L L L j定义:称随机过程的一维、二维、… n维等有限维特征函数全体
定理2.1(存在定理设分布函数簇
, , , , , , , , , , ( , , , , , , , (21212121n m n m m m t t t x x x F t t t x x x F L L L L L +¥+¥=
例3设为随机过程,其中A和B为随机变量,相互独立,均服从正态分布N (0, 1 b t a Bt A t X ££<+=0 , (试求X (t的n维分布函数。
( ( (t m t X E t D X X -=
(4若对于任意给定的t 1,t 2, E[X(t1X(t2]存在,则称它为随机过程的自相关函数,记为
]
( ([ , (2121t X t X E t t R X =(5若对于任意给定的t 1,t 2,存在
则称它为随机过程的自协方差函数,记为(((((([]
称为此随机过程的二维分布函数族.
(, (( , , , (221121212x t X x t X P t t x x F ££=}
, , , , , , , ({21212121T t t R x x t t x x F ÎÎ2随机过程的二维分布函数族
注意:随机过程的二维分布函数描述了随机过程在任意两个不同时刻的状态之间的联系。
为一个随机过程。则令
掷一均匀硬币,例, ( (cos (}, {1
t e X t X R
t T e t H e t t X T H S =Îîíì====p2随机过程举例
例2:用X(t表示电话交换台在(0, t时间内接到的呼唤的次数,则
(1对于固定的时刻t, X(t为随机变量,其样本空间为{0, 1, 2, …..},
(ii设是前n次抛掷中出现的最大点数,
n Y }1, {³n Y n为随机过程。
k n
k n X Y ££=1max
例5 1827年布朗(Brown发现静水中的花粉在不停的运动,后来就把这种运动称为布朗运动。在静水中花粉运动的原因是由于花粉受到水中分子的碰撞,这些相互独立的分子每分钟多达1021次对花粉随机碰撞的合力使花粉产生随机运动。若用X(e,t表示在t时刻花粉所处位置的横坐标,那么
数字特征之间具有如下关系
, (]([ (22t t R t X E t X X ==y ( ( , ( , (212121t m t m t t R t t C X X X X -=
( , ( , ( (2t m t t R t t C t D X X X X -==
( (22
t m t X X -=y
1931年,苏联数学家柯尔莫哥洛夫证明了关于有限维分布函数族的重要性的定理.
(1对称性:对于(1, 2, … , n的任一排列i 1,i 2, … ,i n有满足
} , 1 , , , , , , , , ({2121T t n t t t x x x F F i n n n γ=L L
, , , , , , , ( , , , , , , , (21212121n n i i i i i i n t t t x x x F t t t x x x F n n L L L L =
自然界还有许多随机现象,如
地震波幅,
结构物承受的风荷载,
§在时间间隔[0, t内船舶甲板“上浪”的次数, §通讯系统和自控系统中的各种噪声和干扰, §生物群体的生灭问题
§数量遗传学
§竞争现象,
§传染病扩散,癌细胞扩散
§质点随机游动,排队问题等等
§都可用随机过程这一数学模型来描述。
例8
(((
(((((.
为X(t的有限维特征函数簇。
}: ({T t t X Î}
1, : , , ; , , ({11³În T t u u t t i n n X L L j随机过程与分布函数一样,能较全面地描述X(t的统计特性。
§2.3随机过程的基本类型对一般随机过程进行研究是十分困难的.
因为实际问题产生的随机过程总可以归结为一些特殊的随机过程,所以我们有必要对随机过程进行分类,以方便实际应用与研究需要。基于出发点的不同,可产生许多不同的分类方法,本节仅介绍两类典型的分类方法:即按参数集与状态集分类方法,和按随机过程的概率结构来分类方法,并介绍一些常见的随机过程,
为即若用映射来表示注意:
t X T T T b a b a T T T T t X t X t e X T t e X S e S T t e X R
S T t e X t
21321, , , , 3, 2, 1, 0, 1, 2, 3, , 3, 2, 1, 0T , . 4, . 3, , 2, :, . 1=---==ÎÎ×δ®´L L L
定义3设X (t为随机过程,对于任意n个时刻,及实数,称T t t t n Î, , , 21L R x x x n Î, , , 21L (, , (, (( , , , , , , , (22112121n n n n n x t X x t X x t X P t t t x x x F £££=L L L }1, , , , , , , , , , , , ({212121³În T t t t t t t x x x F n n n n L L L 3 n维分布函数族
§2.2随机过程的分布与存在定理
一、随机过程的分布函数族
定义2.1设X (t为随机过程,对任意固定的t ,及实数x ,称
为随机过程的一维分布函数,而称为此随机过程的一维分布函数族.
}
, , , ({T t R x t x F ÎÎT
t x t X P t x F 룼D
(( , (1注意:随机过程的一维分布函数不是一个函数而是一族(无数个函数,描述了随机过程在各个孤立时刻的统计特性。1随机过程的一维分布函数族
2211t m t X t m t X E x x --均值函数,均方值函数与方差函数是刻画随机过程在某个孤立时刻状态的数字特征,而自相关函数与自协方差函数则是刻画随机过程自身在两个不同时刻状态之间的线性依从关系的数字特征。
]
( ((( ([( , (221121t m t X t m t X E t t C X X X --=
为称使可积
}: ({ , ( , ( , (, 0 , (1111T t t X t x f dx
t x f t x F t x f x
Î=³ò¥-(2若有的一维概率分布。
为称满足}: ({}{1
, 0} ({T t t X p p
p p x t X P k k k k k
k Î=³==å
¥¥-k k iux X k k iux X p e
u t p x t X P t X dx t x f e u t t x f t X k , ( (( ( 2 , ( , ( , ( (111jj则有分布列若(,则
有密度若(
有时也需要利用常用的一些特征函数来求随机变量的分布函数,由特征函数与分布函数的一一对应性有:
cos(
(Q
+
=t
a
t
X w
的均值函数,方差函数和自相关函数。其中, a , w为常数, Q是在(0, 2p上均匀分布的随机变量。例4试求随机相位余弦波
2随机过程的特征函数
的一维特征函数。
为称为随机变量,记
由于给定( , ( ( ( , ( (, ( (t X u t u e
E u t t X T t X t X t iuX X jjjÙ==Îåò====
为X (t的有限维分布函数族。
为随机过程的n维分布函数。称关于随机过程X (t的所有有限维分布函数的集合
注意:随机过程的n维分布函数描述了随机过程在任意n不同时刻的状态之间的联系。
随机过程X (t的有限维分布函数族的意义何在?随机过程的n维分布函数(或概率密度能够近似地描述随机过程的统计特性,而且, n越大,则n维分布函数越趋完善地描述随机过程的统计特性。
且对于不同的t,是不同的随机变量.
(2对于固定的样本点n, X(t=n是一个t的函数.
(即:在多长时间内来n个人?
所以{X(t,t>0}为一个随机过程.
相位正弦波。为随机过程,称为随机则令例(
2, 0(~
sin( (3t X U Y R t Y t a t X pwÎ+=例4考虑抛掷骰子的试验:
(i设X n是第n次抛掷的点数,对于n = 1, 2, …的不同值, X n为不同的随机变量,因而{Xn , n≥ 1}构成一个随机过程,
我们通常称状态空间离散的随机过程为链,参数空间离散的随机过程为随机(时间序列。
二、按随机过程的概率结构来分类
这种分类是按随机过程的概率特性来分类,实质上就是按随机过程的分布函数的特性分类。设X (t为随机过程,若其均方值函数,对于任意的t都存在,则称此X (t为二阶矩过程。
2随机过程的基本概念
§2.1基本概念
随机过程是指一族随机变量.
对随机过程的统计分析称为随机过程论,它是随机数学中的一个重要分支,产生于本世纪的初期.
其研究对象是随机现象,而它特别研究的是随“时间”变化的“动态”的随机现象.
一随机过程的定义
1定义设E为随机试验, S为其样本空间,如果(1对于每个参数t ∈ T , X(e,t为建立在S上的随机变量,
二、随机过程的数字特征与特征函数
1随机过程的数字特征
(1若对于任意给定的t , EX (t的存在,则称它为随机过程的均值(t的函数,记为
( (t EX t m X =又称为X(t的均值函数。(2若对于任意给定的t , EX 2(t存在,则称它为随机过程的均方值函数,记为
( (2
2
t EX t X =y(3若对于任意给定的t, E(X(t-mX (t2存在,则称它为随机过程的方差函数,记为[]2
(, , (, (( , , , , , , , (22112121n n n n n x t X x t X x t X P t t t x x x F £££=L L L则F必为某个随机过程的有限维分布族。即存在X(t,使(2相容性:对于任意自然数m < n ,函数簇中的m维分布函数与n维分布函数之间有关系:
t
t
X Î
例7排队问题:
顾客来到服务站要求服务(如:某时间段内用户对电话交换台的呼叫数、到银行要求服务的顾客数、用户对电器故障要求修理的户数等,当服务站中的服务员都在忙碌时,来到的顾客就要排队。如:用X(t表t时要求服务的用户数,
Y(t表t时来到的顾客需等候的时间
Z(t表t时的队长,等。
则X(t, Y(t, Z(t均为随机过程。
, 2, 0(, 1, 13. , , 2, 0(2. , , 1, 11.
, , sin为常数而的均匀分布上服从上均匀分布的随机变量是若为常数上的均匀分布服从若为常数上均匀分布的随机变量是若画出其图形的任意两个样本函数并试写出随机过程
Q-QQ-+¥¥-ÎQ+=pwwpwwA A A t t A t X
{X(e,t , t∈(0,+∞}
就是描述花粉运动的随机过程。(布朗运动
例6群体生长随机模型
一个群体(如:自然生长的鸟的群体、一个宇宙射线粒子引起的裂变的原子全体、数量用X(t表示时间t时群体的大小,则为一随机过程。
}
(
{T
(2对每一个e ∈ S , X(e,t为t的函数,那么称随机变量族{X(e,t, t∈ T, e∈ S}为一个随机过程,简记为{X(e,t, t∈ T}或X(t。
((((({}
{}
[](为随机序列。时,通常称,取可列集合当可以为无穷。
通常有三种形式:
参数一般表示时间或空间,或有时也简写为一个轨道。
随机过程的一个实现或过程的样本函数,或称随机的一般函数,通常称为为对于:上的二元单值函数。
T t
t
X
t
X Î
=,
cos
(w
例1考虑随机过程
此处w为常数, X服从标准正态分布。试求X (t的一维概率密度。
例2设随机过程为
0
(
,
(>
=t
te
t
Y X
其中X服从参数为l的指数分布,试求Y (t的一维概率密度。
定义2设X(t为随机过程,对于任意两个时刻t 1,t 2,及实数x 1, x 2,称
为随机过程的二维分布函数,而
k
k k k iux t X p x t X P p e
u k ==Û=å} ({ ( (j
例6:设独立,且服从, 0(, (2
21sN X t X X t X i +=求X(t的一维特征函数。
随机过程的n维特征函数:
( , , ; , , (]( ( ([112211n n t X u t X u t X u i n n X e E u u t t +++=L L L j定义:称随机过程的一维、二维、… n维等有限维特征函数全体
定理2.1(存在定理设分布函数簇
, , , , , , , , , , ( , , , , , , , (21212121n m n m m m t t t x x x F t t t x x x F L L L L L +¥+¥=
例3设为随机过程,其中A和B为随机变量,相互独立,均服从正态分布N (0, 1 b t a Bt A t X ££<+=0 , (试求X (t的n维分布函数。
( ( (t m t X E t D X X -=
(4若对于任意给定的t 1,t 2, E[X(t1X(t2]存在,则称它为随机过程的自相关函数,记为
]
( ([ , (2121t X t X E t t R X =(5若对于任意给定的t 1,t 2,存在
则称它为随机过程的自协方差函数,记为(((((([]
称为此随机过程的二维分布函数族.
(, (( , , , (221121212x t X x t X P t t x x F ££=}
, , , , , , , ({21212121T t t R x x t t x x F ÎÎ2随机过程的二维分布函数族
注意:随机过程的二维分布函数描述了随机过程在任意两个不同时刻的状态之间的联系。
为一个随机过程。则令
掷一均匀硬币,例, ( (cos (}, {1
t e X t X R
t T e t H e t t X T H S =Îîíì====p2随机过程举例
例2:用X(t表示电话交换台在(0, t时间内接到的呼唤的次数,则
(1对于固定的时刻t, X(t为随机变量,其样本空间为{0, 1, 2, …..},
(ii设是前n次抛掷中出现的最大点数,
n Y }1, {³n Y n为随机过程。
k n
k n X Y ££=1max
例5 1827年布朗(Brown发现静水中的花粉在不停的运动,后来就把这种运动称为布朗运动。在静水中花粉运动的原因是由于花粉受到水中分子的碰撞,这些相互独立的分子每分钟多达1021次对花粉随机碰撞的合力使花粉产生随机运动。若用X(e,t表示在t时刻花粉所处位置的横坐标,那么
数字特征之间具有如下关系
, (]([ (22t t R t X E t X X ==y ( ( , ( , (212121t m t m t t R t t C X X X X -=
( , ( , ( (2t m t t R t t C t D X X X X -==
( (22
t m t X X -=y
1931年,苏联数学家柯尔莫哥洛夫证明了关于有限维分布函数族的重要性的定理.
(1对称性:对于(1, 2, … , n的任一排列i 1,i 2, … ,i n有满足
} , 1 , , , , , , , , ({2121T t n t t t x x x F F i n n n γ=L L
, , , , , , , ( , , , , , , , (21212121n n i i i i i i n t t t x x x F t t t x x x F n n L L L L =
自然界还有许多随机现象,如
地震波幅,
结构物承受的风荷载,
§在时间间隔[0, t内船舶甲板“上浪”的次数, §通讯系统和自控系统中的各种噪声和干扰, §生物群体的生灭问题
§数量遗传学
§竞争现象,
§传染病扩散,癌细胞扩散
§质点随机游动,排队问题等等
§都可用随机过程这一数学模型来描述。
例8
(((
(((((.
为X(t的有限维特征函数簇。
}: ({T t t X Î}
1, : , , ; , , ({11³În T t u u t t i n n X L L j随机过程与分布函数一样,能较全面地描述X(t的统计特性。
§2.3随机过程的基本类型对一般随机过程进行研究是十分困难的.
因为实际问题产生的随机过程总可以归结为一些特殊的随机过程,所以我们有必要对随机过程进行分类,以方便实际应用与研究需要。基于出发点的不同,可产生许多不同的分类方法,本节仅介绍两类典型的分类方法:即按参数集与状态集分类方法,和按随机过程的概率结构来分类方法,并介绍一些常见的随机过程,
为即若用映射来表示注意:
t X T T T b a b a T T T T t X t X t e X T t e X S e S T t e X R
S T t e X t
21321, , , , 3, 2, 1, 0, 1, 2, 3, , 3, 2, 1, 0T , . 4, . 3, , 2, :, . 1=---==ÎÎ×δ®´L L L
定义3设X (t为随机过程,对于任意n个时刻,及实数,称T t t t n Î, , , 21L R x x x n Î, , , 21L (, , (, (( , , , , , , , (22112121n n n n n x t X x t X x t X P t t t x x x F £££=L L L }1, , , , , , , , , , , , ({212121³În T t t t t t t x x x F n n n n L L L 3 n维分布函数族
§2.2随机过程的分布与存在定理
一、随机过程的分布函数族
定义2.1设X (t为随机过程,对任意固定的t ,及实数x ,称
为随机过程的一维分布函数,而称为此随机过程的一维分布函数族.
}
, , , ({T t R x t x F ÎÎT
t x t X P t x F 룼D
(( , (1注意:随机过程的一维分布函数不是一个函数而是一族(无数个函数,描述了随机过程在各个孤立时刻的统计特性。1随机过程的一维分布函数族
2211t m t X t m t X E x x --均值函数,均方值函数与方差函数是刻画随机过程在某个孤立时刻状态的数字特征,而自相关函数与自协方差函数则是刻画随机过程自身在两个不同时刻状态之间的线性依从关系的数字特征。
]
( ((( ([( , (221121t m t X t m t X E t t C X X X --=