随机过程知识点汇总第一章 随机过程的基本概念与基本类型 一．随机变量及其分布1．随机变量X ， 分布函数)()(x X P x F ≤= 离散型随机变量X 的概率分布用分布列 )(k k x X P p == 分布函数∑=kp x F )(连续型随机变量X 的概率分布用概率密度)(x f 分布函数⎰∞-=x dt t f x F )()(2．n 维随机变量),,,(21n X XX X Λ=其联合分布函数),,,,(),,,()(221121n n nx X x X x X P x x x F x F ≤≤≤==ΛΛ离散型 联合分布列 连续型 联合概率密度３．随机变量的数字特征 数学期望：离散型随机变量X ∑=kk p x EX 连续型随机变量X ⎰∞∞-=dxx xf EX )(方差：222)()(EX EX EX X E DX -=-= 反映随机变量取值的离散程度协方差（两个随机变量YX ,）：EY EX XY E EY Y EX X E B XY⋅-=--=)()])([(相关系数（两个随机变量Y X ,）：DYDX B XY XY⋅=ρ 若0=ρ，则称Y X ,不相关。
独立⇒不相关⇔0=ρ４．特征函数)()(itXe E t g = 离散 ∑=kitx p e t g k )( 连续⎰∞∞-=dx x f e t g itx)()(重要性质：1)0(=g ，1)(≤t g ，)()(t g t g =-，kk kEX i g =)0(５．常见随机变量的分布列或概率密度、期望、方差０－１分布 qX P p X P ====)0(,)1( pEX =pqDX =二项分布 kn k kn q p C k X P -==)(npEX =npqDX =泊松分布 !)(k ek X P kλλ-== λ=EXλ=DX 均匀分布略正态分布),(2σa N222)(21)(σσπa x ex f --=aEX =2σ=DX指数分布⎩⎨⎧<≥=-0,00,)(x x e x f x λλλ1=EX 21λ=DX６．Ｎ维正态随机变量),,,(21n X XX X Λ=的联合概率密度),(~B a N X)}()(21ex p{||)2(1),,,(121221a x B a x B x x x f T n n ---=-πΛ),,,(21n a a a a Λ=，),,,(21nx x x x Λ=，nn ijb B ⨯=)(正定协方差阵二．随机过程的基本概念 １．随机过程的一般定义设),(P Ω是概率空间，T 是给定的参数集，若对每个T t ∈，都有一个随机变量X 与之对应，则称随机变量族{}T t e t X ∈),,(是),(P Ω上的随机过程。
简记为{}T t t X ∈),(。
含义：随机过程是随机现象的变化过程，用一族随机变量才能刻画出这种随机现象的全部统计规律性。
另一方面，它是某种随机实验的结果，而实验出现的样本函数是随机的。
当t 固定时，),(e t X 是随机变量。
当e 固定时，),(e t X 时普通函数，称为随机过程的一个样本函数或轨道。
分类：根据参数集T 和状态空间I 是否可列，分四类。
也可以根据)(t X 之间的概率关系分类，如独立增量过程，马尔可夫过程，平稳过程等。
２．随机过程的分布律和数字特征用有限维分布函数族来刻划随机过程的统计规律性。
随机过程{}T t t X ∈),(的一维分布，二维分布，…，n 维分布的全体称为有限维分布函数族。
随机过程的有限维分布函数族是随机过程概率特征的完整描述。
在实际中，要知道随机过程的全部有限维分布函数族是不可能的，因此用某些统计特征来取代。
（１）均值函数)()(t EX t m X= 表示随机过程{}T t t X ∈),(在时刻t 的平均值。
（２）方差函数2)]()([)(t m t X E t DX X-=表示随机过程在时刻t对均值的偏离程度。
（３）协方差函数)()()]()([))]()())(()([(),(t m s m t X s X E t m t X s m s X E t s B X X X X X -=--= 且有)(),(t D t t B X X =（４）相关函数)]()([),(t X s X E t s RX= (3)和(4)表示随机过程在时刻s ，t 时的线性相关程度。
（５）互相关函数：{}T t t X ∈),(，{}T t t Y ∈),(是两个二阶距过程，则下式称为它们的互协方差函数。
)()()]()([))]()())(()([(),(t m s m t Y s X E t m t Y s m s X E t s B Y X Y X Y X -=--=，那么)]()([),(t Y s X E t s RXY=，称为互相关函数。
若)()()]()([t m s m t Y s X E Y X=，则称两个随机过程不相关。
３．复随机过程tt t jY X Z +=均值函数tt ZjEY EX t m+=)( 方差函数]))(())([(|])([|)(2t m Z t m Z E t m Z E t D ZtZtZ t Z --=-=协方差函数)()(][]))(())([(),(t m s m Z Z E t m Z s m Z E t s B Z Z t s Z t Z s Z -=--=相关函数][),(t s Z Z Z E t s R =４．常用的随机过程（１）二阶距过程：实（或复）随机过程{}T t t X ∈),(，若对每一个T t ∈，都有∞<2)(t X E （二阶距存在），则称该随机过程为二阶距过程。
（2）正交增量过程：设{}T t t X ∈),(是零均值的二阶距过程，对任意的Tt t t t ∈<<<4321，有]))()(())()([(3412=--t X t X t X t X E ，则称该随机过程为正交增量过程。
其协方差函数)),(m in(),(),(2t s t s R t s B X X Xσ==（3）独立增量过程：随机过程{}T t t X ∈),(，若对任意正整数2≥n ，以及任意的Tt t t n ∈<<<Λ21，随机变量)()(,),()(),()(13412----n n t X t X t X t X t X t X Λ是相互独立的，则称{}T t t X ∈),(是独立增量过程。
进一步，如{}T t t X ∈),(是独立增量过程，对任意t s <，随机变量)()(s X t X -的分布仅依赖于s t -，则称{}T t t X ∈),(是平稳独立增量过程。
（4）马尔可夫过程：如果随机过程{}T t t X ∈),(具有马尔可夫性，即对任意正整数n及Tt t t n ∈<<<Λ21，))(,,)((1111>==--n n x t X x t X P Λ，都有{}{}111111)()()(,,)()(----=≤===≤n n n n n n n n x t X x t X P x t X x t X x t X P Λ，则则称{}T t t X ∈),(是马尔可夫过程。
（5）正态过程：随机过程{}T t t X ∈),(，若对任意正整数n 及Ttt t n∈,,,21Λ，（)()(),(21nt X t X t X Λ）是n 维正态随机变量，其联合分布函数是n 维正态分布函数，则称{}T t t X ∈),(是正态过程或高斯过程。
（6）维纳过程：是正态过程的一种特殊情形。
设{}∞<<-∞t t W ),(为实随机过程，如果，①0)0(=W ；②是平稳独立增量过程；③对任意t s ,增量)()(s W t W -服从正态分布，即0),0(~)()(22>--σσs t N s W t W 。
则称{}∞<<-∞t t W ),(为维纳过程，或布朗运动过程。
另外：①它是一个Markov 过程。
因此该过程的当前值就是做出其未来预测中所需的全部信息。
②维纳过程具有独立增量。
该过程在任一时间区间上变化的概率分布独立于其在任一的其他时间区间上变化的概率。
③它在任何有限时间上的变化服从正态分布，其方差随时间区间的长度呈线性增加。
（7）平稳过程：严（狭义）平稳过程：{}T t t X ∈),(，如果对任意常数τ和正整数n 及Ttt t n∈,,,21Λ，Tt t tn ∈+++τττ,,,21Λ，（)()(),(21nt X t X t X Λ）与（)()(),(21τττ+++n t X t X tX Λ）有相同的联合分布，则称{}T t t X ∈),(是严（狭义）平稳过程。
广义平稳过程：随机过程{}T t t X ∈),(，如果①{}T t t X ∈),(是二阶距过程；②对任意的T t ∈，常数==)()(t EX t m X ；③对任意Tt s ∈，，)()]()([),(s t R t X s X E t s RX X-==，或仅与时间差s t -有关。
则满足这三个条件的随机过程就称为广义平稳过程，或宽平稳过程，简称平稳过程。
第二章 泊松过程一．泊松过程的定义（两种定义方法）１，设随机计数过程{}(),0X t t ≥，其状态仅取非负整数值，若满足以下三个条件，则称：{}T t t X ∈),(是具有参数λ的泊松过程。
①(0)0X =；②独立增量过程，对任意正整数n，以及任意的T t t tn ∈<<<Λ21)()(,),()(),()(12312----n n t X t X t X t X t X t X Λ相互独立，即不同时间间隔的计数相互独立；③在任一长度为t 的区间中，事件Ａ发生的次数服从参数0t λ>的的泊松分布，即对任意,0t s >，有{}()()()0,1,!ntt P X t s X s n en n λλ-+-===L[()]E X t tλ=，[()]E X t tλ=，表示单位时间内时间Ａ发生的平均个数，也称速率或强度。
２，设随机计数过程{}(),0X t t ≥，其状态仅取非负整数值，若满足以下三个条件，则称：{}(),0X t t ≥是具有参数λ的泊松过程。
①(0)0X =；②独立、平稳增量过程；③{}{}()()1()()()2()P X t h X t h o h P X t h X t o h λ+-==+⎧⎪⎨+-≥=⎪⎩。
第三个条件说明，在充分小的时间间隔内，最多有一个事件发生，而不可能有两个或两个以上事件同时发生，也称为单跳性。