随机过程知识点总结
- 格式:doc
- 大小:162.50 KB
- 文档页数:4
第一章随机过程 的基本概念与基本类型 一.随机变量及其分布X ,分布函数 F (x) P(X x) 1.随机变量 离散型随机变量 X 的概率分布用分布列 p P(X x k ) F(x)p kf (t)dt分布函数kxX 的概率分布用概率密度 f (x)F(x)分布函数连续型随机变量 2.n 维随机变量 X (X ,X , , X ) 1 2 n F(x) F(x ,x , ,x ) P(X x , X 2 x , , X n x n ,)其联合分布函数 1 2 n 1 1 2 离散型联合分布列连续型联合概率密度3.随机变量 的数字特征 数学期望:离散型随机变量 XEX x p kkXEX xf (x)dx连续型随机变量2DX E(X EX) 2 EX (EX) 2方差:反映随机变量取值 的离散程度协方差(两个随机变量 X ,Y ):B E[( X EX)(Y EY)] E(XY) EX EYXYB XY相关系数(两个随机变量X,Y ):0,则称 X ,Y 不相关。
若XYDX DY独立不相关itXg(t) E(e )itxe p k 连续 g(t)ke itxf (x)dx4.特征函数离散 g(t) 重要性质: g(0) 1,g(t) 1 g( t) g(t),, g (0) i EX kk k5.常见随机变量 的分布列或概率密度、期望、方差 0-1分布 二项分布P( X 1) p,P( X 0) qEX pDX pqP(X k) C p q n kk kEX npDX n p qnk泊松分布P( X k) ek!EXDX均匀分布略( x a)21 2N(a, ) f (x)222EX a正态分布eDX2xe ,x 0 0, x 011指数分布f (x)EXDX2X (X ,X , ,X ) 的联合概率密度 X ~ N(a, B) 6.N维正态随机变量1 2 n11 2T 1(x a) B (x a)}f (x , x , , x n ) exp{ 11 2n 2(2 ) | B |2a (a ,a , ,a ), x (x , x , ,x ), B (b ) 正定协方差阵 1 2 n 1 2 n ij n n二.随机过程 的基本概念 1.随机过程 的一般定义设 ( , P)是概率空间, T 是给定 的参数集,若对每个 t T ,都有一个随机变量 X 与之对应, X(t,e),t T ( , 是P)上 的随机过程。
知识点总结第1章 概率论基础1.1概论空间随机试验,它是指其结果不能事先确定且在相同条件下可以重复进行的试验。
其中,一个试验所有可能出现的结果的全体称为随机试验的样本空间,记为Ω,试验的一个结果称为样本点,记为ω,即}{ω=Ω. 样本空间的某个子集称为随机事件,简称事件.定义1.1.1 设Ω样本空间,是Ω的某些子集构成的集合,如果:(1)∈Ω (2)若∈A ,则∈A(3)若∈n A ,,, ,21n =则∈∞= 1n nA那么称为一事件域,也称为σ域.显然,如果是一事件域,那么(1)∈φ(2)若∈B A ,,则∈-B A(3)若∈n A , ∞==1n n 2,1n A ,则,,定义 1.1.2 设Ω是样本空间,是一事件域,定义在上的实值函数)(⋅P 如果满足:(1)∈∀A 0)(,≥A P ,(2)1)(=ΩP , (3)若∈n A ,,2,1, =n 且,,2,1,,, =≠=j i j i A A j i φ则∞=∞=∑=11)()(n n n n A P A P那么称P 是二元组(,Ω)上的概率,称P (A )为事件A 的概率,称三元组,(Ω),P 为概率空间。
关于事件的概率具有如下性质:(1);0)(=φP(2)若∈nA ,,,2,1,,,,,,2,1,n j i j i A A n i j i =≠==φ 则ni ni i i A P A P 11)()(==∑=(3)若∈B A ,,,B A ⊂则)A P B P A B P ()()(-=-(4)若∈B A ,)()(,,B P A P B A ≤⊂则; (5)若∈A ;1)(,≤A P 则(6)若∈A );(1)(,A P A P -=则(7)若∈n A ,,2,1, =n 则∞=∞=∑≤11)()(n n n i A P A P(8)若∈i A ,,,2,1,n i =则-===∑ ni ni i i A P A P 11)()(∑∑≤<≤≤<<≤--+-+nj i nk j i n n kj ij i A A A P A A A P A A P 11211)()1()()(一列事件∈n A ,2,1,=n 称为单调递增的事件列,如果;,2,1,1 =⊂+n A A n n 一列事件∈n A ,2,1,=n 称为单调递减的事件列,如果,2,1,1=⊃+n A A n n .定理1.1.1 设 ∈n A ,2,1,=n(1)若 ,2,1,=n A n 是单调递增的事件列,则⎪⎪⎭⎫⎝⎛=∞=∞→ 1)(lim n n n n A P A P (2)若 ,2,1,=n A n 是单调递减的事件列,则⎪⎪⎭⎫⎝⎛=∞=∞→ 1)(lim n n n n A P A P 定义1.1.3.设,(Ω),P 为一概率空间,∈B A ,.且,0)(>A P 则称)()()(A P AB P A B P =为在事件A 发生的条件下事件B 发生的条件概率.不难验证,条件概率)|(A P ⋅符合定义1.1.2中的三个条件,即 (1)∈∀B , 0)|(≥A B P ;(2);1)|(=ΩA P (3)设∈n B ,,2,1,,,,2,1, =≠==j j i B B n j i φ则∞=∞=∑=11)|()|(n n n n A B P A B P定理 1.1.2. 设,Ω( ),P 是一概率空间,有: (1)(乘法公式)若∈i A ,,,,2,1n i =且0)(121>-n A A A P ,则)|()()(12121A A P A P A A A P n =(2)(全概率公式)设∈A ,∈iB ,,2,1,0)(, =>i B P i 且∞=⊃=≠=1,,,2,1,,,,i i j i A B j i j i B B φ则∑∞==1)|()()(i i i B A P B P A P(3)(贝叶斯(Bayes)公式)且∈A ∈>i B A P ,0)(,,,,2,1,0)( =>i B P i且 ∞=⊃==1,,,2,1,,i i j i A B j i B B φ则,2,1,)|()()|()()|(1==∑∞=i B A P B P B A P B P A B P j jji i i定义 1.1.4设,(Ω ),P 为一概率空间,,,,2,1,n i F A i =∈如果对于任意的)1(n k k ≤<及任意的,12n i i i k i ≤<<<≤ 有)()()()(2121k k i i i i i i A P A P A P A A A P =则称n 21,,,A A A 相互独立。
随机过程知识点汇总随机过程是指一组随机变量{X(t)},其中t属于某个集合T,每个随机变量X(t)都与一个时刻t相关联。
2.随机过程的分类随机过程可以分为离散时间随机过程和连续时间随机过程。
离散时间随机过程是指在离散的时间点上取值的随机过程,例如随机游走。
连续时间随机过程是指在连续的时间区间上取值的随机过程,例如XXX运动。
3.随机过程的数字特征随机过程的数字特征包括均值函数和自相关函数。
均值函数E[X(t)]描述了随机过程在不同时刻的平均取值。
自相关函数R(t1,t2)描述了随机过程在不同时刻的相关程度。
4.平稳随机过程平稳随机过程是指其均值函数和自相关函数都不随时间变化而变化的随机过程。
弱平稳随机过程的自相关函数只与时间差有关,而不依赖于具体的时间点。
强平稳随机过程的概率分布在时间上是不变的。
5.高斯随机过程高斯随机过程是指其任意有限个随机变量的线性组合都服从正态分布的随机过程。
高斯随机过程的均值函数和自相关函数可以唯一确定该过程。
6.马尔可夫随机过程马尔可夫随机过程是指其在给定当前状态下,未来状态的条件概率分布只依赖于当前状态,而与过去状态无关的随机过程。
马尔可夫性质可以用转移概率矩阵描述,并且可以用马尔可夫链来建模。
7.泊松过程泊松过程是指在一个时间段内随机事件发生的次数服从泊松分布的随机过程。
泊松过程的重要性质是独立增量和平稳增量。
8.随机过程的应用随机过程在金融学、信号处理、通信工程、控制理论等领域有广泛的应用。
例如,布朗运动被广泛应用于金融学中的期权定价,马尔可夫链被应用于自然语言处理中的语言模型。
t)|^2]协方差函数BZs,t)E[(ZsmZs))(ZtmZt))],其中Zs和Zt是Z在时刻s和t的取值。
复随机过程是由实部和虚部构成的随机过程,其均值和方差函数分别由实部和虚部的均值和方差函数计算得到。
协方差函数和相关函数也可以类似地计算得到。
复随机过程在通信系统中有广泛的应用,例如调制解调、信道编解码等。
第一章随机过程的基本概念与基本类型一. 随机变量及其分布1随机变量X,分布函数F(x)二P(X < x)X连续型随机变量X的概率分布用概率密度 f (x) 分布函数F(x)二f (t)dt2. n维随机变量X =(X i,X2,…,X n)其联合分布函数F(x) H F a’X?,…,X n) =P(X1空X-X2乞x2,…,X n乞x n,)离散型联合分布列连续型联合概率密度3 .随机变量的数字特征数学期望:离散型随机变量X EX =二x k p k连续型随机变量X EX二"xf (x)dx匚方差:DX = E(X -EX)2二EX2-(EX)2反映随机变量取值的离散程度协方差(两个随机变量X,Y ):B XY =E[(X — EX)(Y —EY)] =E(XY) — EX .EY独立=不相关:=:-=0予oO 予离散g(t)二' e iX k P k 连续g(t) e iX f (x)dx'J重要性质:g(0)=1 , g(t) <1 , g(—t)=g(t) , g k(0)=i k EX k5 •常见随机变量的分布列或概率密度、期望、方差0 —1分布P(X =1) =p,P(X =0) =q EX二p DX = p q二项分布k k n -kP(X = k) = C n p q EX=np DX=n pq泊松分布-kP(X =k) =e EXk!DX=扎均匀分布略离散型随机变量X的概率分布用分布列P k 二P(X 二X k)分布函数F(x) = 7 P k相关系数(两个随机变量X,Y ):B XYDX DY若'=0,则称X,Y不相关。
4 .特征函数g(t)二E(e itX)6.N 维正态随机变量 X =(X ,,X 2^ ,X n )的联合概率密度II T A.f(X i ,X 2, ,X n )二 ---------- n-exo{(x-a) B (x-a)} 2 (2 二)2|B|2a =(a .,a 2,…,aj , x =(x i , X 2,…,X n ), B = (b ij )nn 正定协方差阵二•随机过程的基本概念 1•随机过程的一般定义设r 1, P)是概率空间,T 是给定的参数集,若对每个r T ,都有一个随机变量 X 与之对应, 则称随机变量族fx (t,e),t ・T /是 (JP)上的随机过程。
考研随机过程知识点浓缩随机过程是概率论中的重要分支,研究随机事件在时间上的演变规律。
在考研数学中,随机过程是一个重要的知识点,涉及到概率论和数理统计等多个领域。
本文将对考研随机过程的知识点进行浓缩总结,帮助考生更好地掌握重点内容。
1. 随机过程的定义随机过程是一个定义在时间轴上的随机变量族,即一系列随机变量组成的集合。
随机过程可分为连续时间随机过程和离散时间随机过程,根据时间参数的取值范围来进行区分。
2. 随机过程的分类根据随机过程的状态空间,可以将随机过程分为离散状态随机过程和连续状态随机过程。
离散状态随机过程中,状态空间为有限集合或者可列无限集合,如泊松过程;连续状态随机过程中,状态空间为连续集合,如布朗运动。
3. 马尔可夫性质马尔可夫性质是随机过程的重要性质之一,指的是在给定当前状态的条件下,未来的发展只依赖于当前状态,与过去的状态无关。
具有马尔可夫性质的随机过程可以简化计算和分析。
4. 随机过程的平稳性平稳性是随机过程的另一个重要性质,分为弱平稳和严平稳。
弱平稳指的是均值和自协方差不依赖于时间的特性;严平稳则要求联合分布在时间上的平移具有不变性。
平稳性的性质可以简化对随机过程的研究。
5. 随机过程的独立增量性质随机过程的独立增量性质指的是在不相交的时间间隔内,随机变量之间是相互独立的。
具有独立增量性质的随机过程可以通过对各个时间间隔内的随机变量进行独立分析。
6. 随机过程的马尔可夫链马尔可夫链是一种特殊的离散时间随机过程,具有马尔可夫性质。
马尔可夫链的状态空间是离散的,状态转移概率只与当前状态有关,与过去的状态无关。
马尔可夫链通常用状态转移矩阵来描述状态之间的转移规律。
7. 泊松过程泊松过程是一类具有无记忆性的离散状态随机过程,是一种常用的数学模型。
泊松过程描述了在一段时间内随机事件发生的次数,具有独立增量和稳定增量的性质。
8. 布朗运动布朗运动是连续时间的连续状态随机过程,具有平稳增量、独立增量和高斯增量的特性。
随机过程个人总结随机过程是一个数学模型,用来描述随机现象的演化规律。
它在许多领域中都有广泛应用,在概率论、统计学、物理学、工程学等领域中都有重要的地位。
1. 定义和特征:随机过程是一族随机变量的集合,表示随机现象在不同时间发生的情况。
每个随机变量表示某个时刻或某个时间段内的随机事件的结果。
它具有两个维度:时间和状态。
2. 分类:根据状态空间的特征,可以将随机过程分为离散随机过程和连续随机过程。
离散随机过程的状态空间是离散的,而连续随机过程的状态空间是连续的。
根据时间的连续性,可以将连续随机过程分为时齐随机过程和时变随机过程。
时齐随机过程的统计特性不随时间变化,而时变随机过程的统计特性与时间有关。
3. 状态转移概率:随机过程的核心是状态转移概率,描述了随机过程在不同状态之间进行转移的概率。
状态转移概率可以用转移矩阵或转移函数表示,它描述了随机过程的演化规律。
4. 随机过程的性质:随机过程有许多重要的性质,包括平稳性、独立性、马尔可夫性、鞅性等。
这些性质可以帮助我们分析和理解随机过程的行为。
5. 应用:随机过程在概率论、统计学和工程学中有广泛的应用。
在概率论中,随机过程用于描述随机事件的演化过程。
在统计学中,随机过程用于建立模型和进行统计推断。
在工程学中,随机过程用于分析和设计系统,例如通信系统、控制系统和金融系统等。
总之,随机过程是一个重要的数学工具,可以帮助我们建立数学模型,描述和分析随机现象的演化过程。
它在各个领域中都有广泛应用,并且具有丰富的理论基础和实际应用价值。
第 2 章 随机过程2.1 引言•确定性信号是时间的确定函数,随机信号是时间的不确定函数。
•通信中干扰是随机信号,通信中的有用信号也是随机信号。
•描述随机信号的数学工具是随机过程,基本的思想是把概率论中的随机变量的概念推广到时间函数。
2.2 随机过程的统计特性一.随机过程的数学定义:•设随机试验E 的可能结果为)(t g ,试验的样本空间S 为{x 1(t), x 2(t), …, x n (t),…}, x i (t)是第i 次试验的样本函数或实现,每次试验得到一个样本函数,所有可能出现的结果的总体就构成一随机过程,记作)(t g 。
随机过程举例:二.随机过程基本特征其一,它是一个时间函数;其二,在固定的某一观察时刻1t ,)(1t g 是随机变量。
随机过程具有随机变量和时间函数的特点。
● 随机过程)(t g 在任一时刻都是随机变量; ● 随机过程)(t g 是大量样本函数的集合。
三.随机过程的统计描述设)(t g 表示随机过程,在任意给定的时刻T t ∈1, )(1t g 是一个一维随机变量。
1.一维分布函数:随机变量)(t g 小于或等于某一数值x 的概率,即})({);(1x t g P t x P ≤= 2.2.12.一维概率密度函数:一维概率分布函数对x 的导数.xt x P t x p ∂∂=);(),(11 2.2.2 3.对于任意两个时间1t 和2t ,随机过程的对应的抽样值)(1t g )(2t g 为两个随机变量.他们的联合分布定义为)(t g 的二维分布})(;)({),;,(221121212x t g x t g P t t x x P ≤≤= 2.2.34.二维分布密度定义为212121221212),;,(),;,(x x t t x x P t t x x p ∂∂∂=2.2.4四.随机过程的一维数字特征设随机过程)(t g 的一维概率密度函数为),(1t x p .1.数学期望(Expectation)dx t x xp t g E t g );()]([)(1⎰∞∞-==μ 2.2.52.方差(Variance)dx t x p t x t t g E t g Var t g g g ),()]([]))()([()]([)(1222μμσ-=-==⎰∞∞- 2.2.6五.随机过程的二维数字特征1.自协方差函数(Covariance)•21212122211221121),;,())())((())]()())(()([(),(dx dx t t x x p t x t x t t g t t g E t t C g g g g g μμμμ--=--=⎰⎰∞∞-∞∞- 2.2.72. 自相关函数(Autocorrelation)•2121212212121),;,()]()([),(dx dx t t x x p x x t g t g E t t R g ⎰⎰∞∞-∞∞-== 2.2.83.自相关函数和自协方差函数的关系)]([)]([),(),(212121t g E t g E t t R t t C g g •-= 2.2.9 4.设两个随机过程分别为)(),(t h t g ,在时刻1t 和2t ,对)(),(t h t g 抽样,两个随机过程的互相关函数(Cross-correlation)定义为)]()([),(2121t h t g E t t R gh = 2.2.105.两个随机过程的互协方差函数(Cross-covariance)定义为)]()())(()([(),(221121t t h t t g E t t C h g gh μμ--= 2.2.112.3 平稳随机过程一.狭义平稳的随机过程(严平稳的随机过程)对于任意的正整数n 和实数τ,若随机过程)(t g 的n 维概率密度函数满足),,;,,(),,;,,,(21212121n n n n n n t t t x x x p t t t x x x p ⋅⋅⋅⋅⋅⋅=+⋅⋅⋅++⋅⋅⋅τττ 2.3.1则称)(t g 为狭义平稳的随机过程.统计特性不随时间的推移而变化的随机过程称为平稳随机过程。
应用随机过程学习总结(小编整理)第一篇:应用随机过程学习总结应用随机过程学习总结一、预备知识:概率论随机过程属于概率论的动态部分,即随机变量随时间不断发展变化的过程,它以概率论作为主要的基础知识。
1、概率空间方面,主要掌握sigma代数和可测空间,在随机过程中由总体样本空间所构成的集合族。
符号解释:sup表示上确界,inf 表示下确界。
本帖隐藏的内容2、数字特征、矩母函数与特征函数:随机变量完全由其概率分布来描述。
其中由于概率分布较难确定,因此通常计算随机变量的数字特征来估算分布总体,而矩母函数和特征函数便用于随机变量的N阶矩计算,同时唯一的决定概率分布。
3、独立性和条件期望:独立随机变量和的分布通常由卷积来表示,对于同为分布函数的两个函数,卷积可以交换顺序,同时满足结合律和分配率。
条件期望中,最重要的是理解并记忆E(X)= E[E(X|Y)] = intergral(E(X|Y=y))dFY(y)。
二、随机过程基本概念和类型随机过程是概率空间上的一族随机变量。
因为研究随机过程主要是研究其统计规律性,由Kolmogorov定理可知,随机过程的有限维分布族是随机过程概率特征的完整描述。
同样,随机过程的有限维分布也通过某些数值特征来描述。
1、平稳过程,通常研究宽平稳过程:如果X(t1)和X(t2)的自协方差函数r(t1,t2)=r(0,t-s)均成立,即随机过程X(t)的协方差函数r(t,s)只与时间差t-s有关,r(t)= r(-t)记为宽平稳随机过程。
因为一条随机序列仅仅是随机过程的一次观察,那么遍历性问题便是希望将随即过程的均值和自协方差从这一条样本路径中估计出来,因此宽平稳序列只需满足其均值遍历性原理和协方差遍历性原理即可。
2、独立增量过程:若X[Tn]–X[T(n-1)]对任意n均相互独立,则称X(t)是独立增量过程。
若独立增量过程的特征函数具有可乘性,则其必为平稳增量过程。
兼有独立增量和平稳增量的过程称为平稳独立增量过程,其均值函数一定是时间t的线性函数。
《概率统计与随机过程》知识总结第1章 随机事件及其概率一、随机事件与样本空间 1、随机试验我们将具有以下三个特征的试验称为随机试验,简称试验, (1)重复性:试验可以在相同的条件下重复进行;(2)多样性:试验的可能结果不止一个,并且一切可能的结果都已知; (3)随机性:在每次试验前,不能确定哪一个结果会出现。
随机试验一般用大写字母E 表示,随机试验中出现的各种可能结果称为试验的基本结果。
2、样本空间随机试验E 的所有可能结果组成的集合称为试验的样本空间,记为S ,样本空间中的元素,即E 的每个基本结果,称为样本点。
3、随机事件称随机试验E 的样本空间S 的子集为E 的随机事件,简称事件。
随机事件通常利用大写字母A 、B 、C 等来表示。
在一次试验中,当且仅当这一子集(事件)中的某个样本点出现时,称这一事件发生。
特别地,将只含有一个样本点的事件称为基本事件;样本空间S 包含所有的样本点,它在每次试验中都发生,称S 为必然事件;事件∅(S ∅⊂)不包含任何样本点,它在每次试验中都不发生,称∅为不可能事件。
4、随机事件间的关系及运算(1)包含关系:若B A ⊂,则称事件A 包含事件B ,也称事件B 含在事件A 中,它表示:若事件B 发生必导致事件A 发生。
(2)相等关系:若B A ⊂且A B ⊂,则称事件A 与事件B 相等,记为A B =。
(3)事件的和:称事件{|A B x x A ⋃=∈或}x B ∈为事件A 与事件B 的和事件。
事件A B ⋃发生意味着事件A 发生或事件B 发生,即事件A 与事件B 至少有一件发生。
类似地,称1n i i A =⋃为n 个事件12n A A A ⋯、、、的和事件,称1i i A ∞=⋃为可列个事件12 A A ⋯、、的和事件。
(4)事件的积:称事件{|A B x x A ⋂=∈且}x B ∈为事件A 与事件B 的积事件。
事件A B ⋂发生意味着事件A 发生且事件B 发生,即事件A 与事件B 都发生。
第一章随机变量基础1历史上哪些学者对随机过程学科的基础理论做出了突出贡献?答:随机过程整个学科的理论基础是由柯尔莫哥洛夫和杜布奠定的。
这一学科最早源于对物理学的研究,如吉布斯、玻尔兹曼、庞加莱等人对统计力学的研究,及后来爱因斯坦、维纳、莱维等人对布朗运动的开创性工作。
1907年前后,马尔可夫研究了一系列有特定相依性的随机变量,后人称之为马尔可夫链。
1923年维纳给出布朗运动的数学定义,直到今日这一过程仍是重要的研究课题。
随机过程一般理论的研究通常认为开始于20世纪30年代。
1931年,柯尔莫哥洛夫发表了《概率论的解析方法》,1934年A·辛饮发表了《平稳过程的相关理论》,这两篇著作奠定了马尔可夫过程与平稳过程的理论基础。
1953年,杜布出版了名著《随机过程论》,系统且严格地叙述了随机过程基本理论。
2 全概率公式的含义?答:全概率公式的含义就是各种可能发生的情况的概率之和为1。
3 概率空间有哪几个要素,其概念体现了对随机信号什么样的建模思想?答:样本空间、事件集合、概率函数称为概率空间的三要素。
概率函数建立了随机事件与可描述随机事件可能性大小的实数间的对应关系,因此,概率空间是在观测者观测前对随机事件发生的可能性大小进行了量化,其有效性是通过多次观测体现出来的,也即在多次观测中,某个随机事件发生的频率可直接认为与其发生的概率相等,所以,概率空间的建模思想实际是对大量观测中某随机事件发生频率的稳定性的描述。
4 可用哪些概率函数完全描述一个随机变量?答:概率分布函数(cdf)、概率密度函数(pdf)、特征函数(cf)、概率生成函数(gf)。
5 可用哪些数字特征部分描述一个随机变量?答:均值、方差、协方差、相关系数和高阶矩。
6 随机变量与通常意义上的变量有何区别与联系?答:随机变量具有通常意义上的变量的所有性质和特征(即变量特性),还增加了变量取每个值的可能性大小的描述(即概率特性)。
因此,描述或刻画一个随机变量时,还必须要特别考察其概率函数或各阶矩函数。
第一章 随机过程的基本概念与基本类型 一.随机变量及其分布1.随机变量X , 分布函数)()(x X P x F ≤=离散型随机变量X 的概率分布用分布列 )(k k x X P p == 分布函数∑=kpx F )(连续型随机变量X 的概率分布用概率密度)(x f 分布函数⎰∞-=xdt t f x F )()(2.n 维随机变量),,,(21n X X X X =其联合分布函数),,,,(),,,()(221121n n n x X x X x X P x x x F x F ≤≤≤== 离散型 联合分布列 连续型 联合概率密度 3.随机变量的数字特征数学期望:离散型随机变量X ∑=k kp xEX 连续型随机变量X ⎰∞∞-=dx x xf EX )(方差:222)()(EX EX EX X E DX -=-= 反映随机变量取值的离散程度 协方差(两个随机变量Y X ,):EY EX XY E EY Y EX X E B XY ⋅-=--=)()])([( 相关系数(两个随机变量Y X ,):DYDX B XY XY ⋅=ρ 若0=ρ,则称Y X ,不相关。
独立⇒不相关⇔0=ρ4.特征函数)()(itXeE t g = 离散 ∑=k itx p e t g k )( 连续 ⎰∞∞-=dx x f e t g itx )()(重要性质:1)0(=g ,1)(≤t g ,)()(t g t g =-,k k k EX i g =)0(5.常见随机变量的分布列或概率密度、期望、方差0-1分布 q X P p X P ====)0(,)1( p EX = pq DX =二项分布 kn k k n q p C k X P -==)( np EX = npq DX =泊松分布 !)(k ek X P kλλ-== λ=EX λ=DX 均匀分布略正态分布),(2σa N222)(21)(σσπa x ex f --=a EX = 2σ=DX指数分布 ⎩⎨⎧<≥=-0,00,)(x x e x f x λλ λ1=EX 21λ=DX6.N维正态随机变量),,,(21n X X X X =的联合概率密度),(~B a N X)}()(21ex p{||)2(1),,,(121221a x B a x B x x x f T nn ---=-π),,,(21n a a a a =,),,,(21n x x x x =,n n ij b B ⨯=)(正定协方差阵二.随机过程的基本概念 1.随机过程的一般定义设),(P Ω是概率空间,T 是给定的参数集,若对每个T t ∈,都有一个随机变量X 与之对应,则称随机变量族{}T t e t X ∈),,(是),(P Ω上的随机过程。
随机过程例题和知识点总结随机过程是研究随机现象随时间演变的数学理论,在通信、金融、物理等众多领域都有广泛的应用。
接下来,我们通过一些例题来深入理解随机过程的相关知识点。
一、随机过程的基本概念随机过程可以看作是一族随机变量的集合,其中每个随机变量对应于一个特定的时间点。
例如,考虑一个在时间段0, T内的股票价格变化过程,对于每个时刻 t∈0, T,股票价格就是一个随机变量。
知识点 1:随机过程的分类随机过程可以分为离散时间随机过程和连续时间随机过程。
离散时间随机过程的时间参数是离散的,比如每天的股票收盘价;连续时间随机过程的时间参数是连续的,比如股票价格在任意时刻的取值。
知识点 2:随机过程的概率分布描述随机过程在不同时刻的概率分布是研究随机过程的重要内容。
对于离散随机过程,常用概率质量函数;对于连续随机过程,常用概率密度函数。
例题 1假设一个离散时间随机过程{Xn},n = 0, 1, 2, ,其中 Xn 取值为 0 或 1,且 P(Xn = 0) = 06,P(Xn = 1) = 04,求 X0 和 X1 的联合概率分布。
解:X0 和 X1 的可能取值组合有(0, 0)、(0, 1)、(1, 0)、(1, 1)。
P(X0 = 0, X1 = 0) = P(X0 = 0) × P(X1 = 0) = 06 × 06 = 036P(X0 = 0, X1 = 1) = P(X0 = 0) × P(X1 = 1) = 06 × 04 = 024P(X0 = 1, X1 = 0) = P(X0 = 1) × P(X1 = 0) = 04 × 06 = 024P(X0 = 1, X1 = 1) = P(X0 = 1) × P(X1 = 1) = 04 × 04 = 016二、随机过程的数字特征数字特征可以帮助我们更简洁地描述随机过程的某些重要性质。
第一章随机过程的基本概念与基本类型一.随机变量及其分布1.随机变量,分布函数离散型随机变量的概率分布用分布列分布函数连续型随机变量的概率分布用概率密度分布函数2.n 维随机变量其联合分布函数离散型联合分布列连续型联合概率密度3 .随机变量的数字特征数学期望:离散型随机变量连续型随机变量方差:反映随机变量取值的离散程度协方差(两个随机变量):相关系数(两个随机变量):若,则称不相关。
独立不相关4•特征函数离散连续重要性质:,,,5 •常见随机变量的分布列或概率密度、期望、方差0 — 1分布二项分布泊松分布均匀分布略正态分布指数分布6.N维正态随机变量的联合概率密度,,正定协方差阵二.随机过程的基本概念1.随机过程的一般定义设是概率空间,是给定的参数集,若对每个,都有一个随机变量与之对应,则称随机变量族是上的随机过程。
简记为。
含义:随机过程是随机现象的变化过程,用一族随机变量才能刻画出这种随机现象的全部统计规律性。
另一方面,它是某种随机实验的结果,而实验出现的样本函数是随机的。
当固定时,是随机变量。
当固定时,时普通函数,称为随机过程的一个样本函数或轨道。
分类:根据参数集和状态空间是否可列,分四类。
也可以根据之间的概率关系分类,如独立增量过程,马尔可夫过程,平稳过程等。
2 .随机过程的分布律和数字特征用有限维分布函数族来刻划随机过程的统计规律性。
随机过程的一维分布,二维分布,…,维分布的全体称为有限维分布函数族。
随机过程的有限维分布函数族是随机过程概率特征的完整描述。
在实际中,要知道随机过程的全部有限维分布函数族是不可能的,因此用某些统计特征来取代。
(1)均值函数表示随机过程在时刻的平均值。
(2)方差函数表示随机过程在时刻对均值的偏离程度。
(3)协方差函数且有(4)相关函数(3)和(4)表示随机过程在时刻,时的线性相关程度。
(5)互相关函数:,是两个二阶距过程,则下式称为它们的互协方差函数。
,那么,称为互相关函数。
随机过程理论的基础知识和应用场景随机过程是指随机事件在时间或空间维度上的演变过程,广泛应用于信号处理、经济学、物理学等领域。
而随机过程理论是研究随机过程的数学工具,主要包括随机变量、概率论、统计学、测度论等基础知识。
在本文中,将介绍随机过程理论的基础知识和应用场景,并通过实例分析展示其实际应用。
一、随机过程理论基础知识1.随机变量与概率论随机变量是指随机现象的数学表示,用来描述事件结果的不确定性。
常见的随机变量包括离散型随机变量和连续型随机变量。
概率论则是研究随机现象的分布规律和概率问题的一门数学分支,主要包括概率分布、期望、方差等内容。
在随机过程理论中,随机变量和概率论是非常基础而重要的概念。
2.统计学原理统计学是研究数据收集、分析和解释的一门学科,主要包括描述统计学和推断统计学两个部分。
前者主要是对数据进行整理、分类、图表展示等描述性统计分析,后者则是利用样本数据推断总体的参数。
在随机过程理论中,统计学原理可以用来对随机过程进行统计分析,从而更好地了解其规律和特性。
3.测度论测度论是研究度量和测量问题的一门数学学科,主要包括测度的概念、性质、测度空间等内容。
在随机过程理论中,测度论可用来定义随机过程的测度空间、概率空间等基础概念。
二、随机过程应用场景1.信号处理随机过程在信号处理中广泛应用,例如在噪声抑制、信号分析、同步定时等方面发挥着重要作用。
例如,在噪声抑制领域,随机过程可以用于描述噪声和信号的关系,进而采用滤波等方式降低噪声干扰,提高信号的质量和可靠性。
2.经济学随机过程在经济学领域中也起到了关键作用。
例如,在金融市场中,随机过程可以用于建立股票、期货、期权等金融工具的价格模型,对投资决策和风险管理具有重要意义。
另外,在经济预测、宏观调控等方面,随机过程也具有广泛的应用。
3.物理学随机过程在物理学中的应用也非常广泛。
例如,在分子动力学、核物理、天体物理等领域,随机过程可以用于描述微观粒子的运动规律和宏观物体的演化过程。
第一章:
考试范围1.3,1.4
1、计算指数分布的矩母函数.
2、计算标准正态分布)1,0(~N X 的矩母函数.
3、计算标准正态分布)1,0(~N X 的特征函数.
第二章:
1. 随机过程的均值函数、协方差函数与自相关函数
2. 宽平稳过程、均值遍历性的定义及定理
3. 独立增量过程、平稳增量过程,独立增量是平稳增量的充要条件
1、设随机过程()Z t X Yt =+,t -∞<<∞.若已知二维随机变量(,)X Y 的协方差矩阵为2122σρρσ⎡⎤⎢⎥⎣⎦
,求()Z t 的协方差函数. 2、设有随机过程{(),}X t t T ∈和常数a ,()()()Y t X t a X t =+-,t T ∈,计算()Y t 的自相关函数(用(,)X R s t 表示).
3、设12()cos sin X t Z t Z t λλ=+,其中212,~(0,)Z Z N σ是独立同分布的随机变量,λ为
实数,证明()X t 是宽平稳过程.
4、设有随机过程()sin cos Z t X t Y t =+,其中X 和Y 是相互独立的随机变量,它们都分别以0.5和0.5的概率取值-1和1,证明()Z t 是宽平稳过程.
第三章:
1. 泊松过程的定义(定义3.1.2)及相关概率计算
2. 与泊松过程相联系的若干分布及其概率计算
3. 复合泊松过程和条件泊松过程的定义
1、设{(),0}N t t ≥是参数3λ=的Poisson 过程,计算:
(1). {(1)3}P N ≤; (2). {(1)1,(3)3}P N N ==; (3). {(1)2(1)1}P N N ≥≥.
2、某商场为调查顾客到来的客源情况,考察了男女顾客来商场的人数. 假设男女顾客来商场的人数分别独立地服从每分钟2人与每分钟3人的泊松过程.
(1).试求到某时刻t 时到达商场的总人数的分布;
(2). 在已知t 时刻有50人到达的条件下,试求其中恰有30位女性的概率,平均有多少个女性顾客?
3、某商店顾客的到来服从强度为4人/小时的Poisson 过程,已知商店9:00开门,试求:
(1). 在开门半小时中,无顾客到来的概率;
(2). 若已知开门半小时中无顾客到来,那么在未来半小时中,仍无顾客到来的概率。
4、设有一泊松过程{(),0}N t t ≥,若有两个时刻,s t ,且s t <,试证明 {()()}1k n k k n s s P N s k N t n C t t -⎛⎫⎛⎫===- ⎪ ⎪⎝⎭⎝⎭, 0,1,,k n =.
5、设顾客以泊松分布抵达银行,其到达速率为λ.若已知在第一个小时内有两个顾客抵达银行,试计算:
(1).此两个顾客在最初的20分钟内抵达银行的概率;
(2).至少有一个顾客在最初的20分钟内抵达银行的概率.
第四章:
1. 更新过程、更新方程及其解得存在唯一性
2. Wald 等式
3. 更新定理及其在概率计算中的应用
1、设12{1},{2}33i i P X P X ====,令1
,1n n i i T X n ==≥∑.对于更新过程()sup{:}n N t n T t =≤,计算(1)N 和(2)N 的概率分布.
2、某控制器用一节电池供电,设电池寿命),2,1( =i X i 服从(30,60)(单位:h )内的均匀分布,电池失效时需要去仓库领取,领取新电池的时间),2,1( =i Y i 服从期望为0.5小时的均匀分布.计算长时间工作时控制器更换电池的速率.
3、设有一个单服务员银行,顾客到达可看作速率为20(人/小时)的Poisson 分布,服务员为每一位顾客服务的时间是随机变量,服从均值为2(分钟/人)的指数分布.顾客到达门口只有在服务员空闲时才准进来.试求:
(1).顾客进银行的速率;
(2).服务员工作的时间所占营业时间的比例.
第五章:
1. Markov 链的定义,转移概率矩阵,C-K 方程
2. 状态的周期,常返态、非常返态的定义及判别(定理5.2.3,推论5.
3.3,5.3.4)
3. 极限定理及平稳分布
1、设明天是否有雨仅与今天的天气有关,而与过去的天气无关.又设今天下雨明天也下雨 的概率为0.7,而今天无雨明天有雨的概率为0.4,计算星期一有雨,星期四天仍有雨的概 率.
2、设某厂的商品的销售状态(按一个月计)可分为三个状态:滞销(用1表示)、正常(用2表示)、畅销(用3表示)。
若经过对历史资料的整理分析,其销售状态的变化(从这月到下月)与初始时刻无关,且其状态转移概率为ij p (ij p 表示从销售状态i 经过一个月后转为销售状态j 的概率),一步转移概率矩阵为:
1/21/201/31/95/91/62/31/6⎛⎫ ⎪ ⎪ ⎪⎝⎭
试对经过长时间后的销售状况进行分析。
3、一质点在1,2,3三个点上作随机游动,1和3是两个反射壁,当质点处于2时,下一时刻处于1,2,3是等可能的。
写出一步转移概率矩阵,判断此链是否具有遍历性,若有,求出极限分布。
4、设有一马尔可夫链,其转移状态有两种:1E 、2E ,经计算得一阶转移概率矩阵为
⎪⎪⎭
⎫ ⎝⎛=41.059.021.079.0)1(P ,求证该链具有遍历性,并求出极限分布。
5、设{1,2,3,4}I =,其一步转移概率矩阵为
1/21/2001
00001/32/301/201/20⎛⎫ ⎪ ⎪ ⎪ ⎪⎝⎭
试对其状态进行分类,确定哪些状态是常返态,并确定其周期.
6、设齐次Markov 链的转移概率矩阵为
000q p q
p q p ⎛⎫ ⎪ ⎪ ⎪⎝⎭
,1p q +=,01p <<,
证明:此Markov 链有遍历性,并求其平稳分布.
第六章
1. 鞅及停时的定义
2. 鞅的证明
1、设 ,,21X X 是一族零均值的独立随机变量序列,且∞<)(i X E ,∑==n i i n X
S 1,证明:{}n S 是关于}{n F 的鞅.
2、证明Brown 运动是鞅.
第七章
1. Brown 运动的定义及相关概率计算
2. Gauss 过程及相关概率计算
3. Brown 的最大值变量及反正弦律
1、 设}0),({≥t t B 是标准Brown 运动,计算}0)2(,0)1({≤≤B B P .
2、 设}0),({≥t t B 是标准Brown 运动,计算)3(3)2(2)1(B B B ++的分布.
3、 设}0),({≥t t B 是标准Brown 运动,计算}32)({10>⎰dt t B P .
第八章
考试范围:P157性质8.2.1第二条,伊藤公式。