Riemann积分的缺陷
在数学分析中我们学过定积分和重积分,并且知道定积分的几何意义的曲边梯形的面积。然而,以如此方式定义面积,可能会产生某些本应该有面积的点集没有面积。比如狄利克雷函数D(x)={10x∈Qx∈/Q
我们可以这么考虑,由于有理数集Q是可数的,我们可以将全体有理数排列为q1,q2,⋯,qn,⋯定义fi(x)={10x=qix=qi那么按照黎曼积分的定义∫01fi(x)dx=0则D(x)=n=1∑∞fi(x),显然,以y=fi(x)为边的曲边梯形实质上就是一条线段x=qi,0≤y≤1,在二维平面上的面积应该是0,y=D(x),0≤x≤1可以看作可数条这样的线段相加,那么理应有∫01D(x)dx=n=1∑∞∫01fn(x)dx=0然而在黎曼积分的意义下,以上式子是不成立的,原因是D(x)在[0,1]上是不可积的,因为对任意的区间[a,b]⊆[0,1],D(x)在[a,b]上的上确界为1,下确界为0,这是由有理数和无理数的稠密性决定的。如此一来不论作任何分划Δ:0=x0<x1<⋯<xn=1,都有S(D(x),Δ)=1S(D(x),Δ)=0显然D(x)是不可积的,这说明黎曼积分以及黎曼积分背后的Jordan测度是有缺陷的。对于有界函数f(x),我们知道Riemann可积的充要条件是λ(Δ)→0limk=1∑nwkΔxk=0这个条件的实质是要求f(x)几乎是连续的,这样,在我们区间越分越细的过程中,在大多数区间上,f(x)可以视为常数,如此一来f(x)才可积,但是如果f(x)始终保持剧烈动荡的情况下(如D(x),任何小区间既有有理数,又有无理数),就不可能满足上面的条件,我们就有遗漏某些本应当可积的函数的可能性。对此,我们的解决方案是,对Riemann积分进行推广,产生一种新的积分,如果f(x)是黎曼可积的,在这种新的积分定义下还是可积的,并且积分值相等,同时,还存在某些黎曼不可积的函数在新积分下也可积,如D(x),如何定义这种新积分呢?Lebesgue积分给了我们一种定义积分的全新思路!在黎曼积分下,我们通过划分定义域来定义积分,然后这种定义方式可能使得我们在每个小区间上f(x)剧烈震荡,使得和式无法收敛。Lebesgue采取的方式是划分值域,即如果f(x)是有界函数,并且a≤f(x)≤b,则我们划分值域a=y0<y1<⋯<yn=b,相应地也划分了定义域Ei={x:yi−1<f(x)≤yi},如果Ei也有长度,设为m(Ei),则估计和式为i=1∑nyi−1m(Ei)如果在值域越分越细的情况下,以上和式极限存在,就是f(x)的积分。这就产生了一个问题,如何定义m(Ei),在定义了m(Ei)后,就可以产生一种新的积分,即Lebesgue积分。可见,解决线段的长度、平面图形的面积、立体的体积问题是定义新的积分的前提。我们暂且先不谈如何定义m(Ei),我们首先谈谈长度、面积、体积应该满足什么性质:
(1)首先m(E)应当是点集的函数,换句话说,m是幂集m(X)到非负实数集的映射
(2)在中学学几何时,我们就有一种朴素的解题方法,即割补法,即如果E1,⋯,En两两不交,应当有m(k=1⋃nEk)=k=1∑nm(Ek)(3)对于区间(a,b],应当有m(a,b]=b−a
这些性质Jordan测度也具备,在数学分析重积分一章中,我们已经论证过,如果A,B都是J可测集,A∪B也是J可测的,并且如果A∩B是J零测集,则∣A∪B∣=∣A∣+∣B∣。显然只有以上的性质并不足以让我们产生一种新的积分,因为对于D(x)来说,{x:nn−1<D(x)≤1}=Q,这是个J不可测集,也就是说,如果我们采取将[0,1]区间n等分,然后按Lebesgue方式定义新积分,在n→∞过程中,和式的极限还是不存在,根本原因在于Q是J不可测的。显然Q=n=1⋃∞{qn},而m({qn})=0,n=1,2,⋯。如果新的测度满足可列可加性,就应当有m(Q)=0因此,我们把(3)加强到可列可加性:对两两不交的{An},有m(n=1⋃∞An)=n=1∑∞m(An)那么就可能能够满足我们的需求。下一个问题是m的定义域,我们当然希望m是定义在整个幂集m(R)上的,这样所有的线段都有长度,然而这时不可能的,正如对Jordan测度而言,m(R)上存在大量的J不可集,如Q,新的测度也存在可测与否的问题,对于Jordan测度而言,我们仅仅要求有限可加性,相应地,我们只要求全体J可测集对有限运算封闭即可,对于新测度而言不是如此,我们要求可列可加性,因此我们还要求新的可测空间对极限运算也封闭。
总结上面的讨论,为了克服Riemann积分的缺陷,定义一种新的积分——Lebesgue积分,那么在定义Lebesgue积分之前,首先我们要讨论如何建立一种新的测度,我们称为Lebesgue测度,要求满足,第一,它是某个幂集的子集M到非负广义实数(对于无界集允许其测度为正无穷)的映射。第二,我们要求m满足:m(∅)=0,并且某些特殊集合的测度应当满足某些条件(至少要符合我们对长度、面积、体积)的直觉。第三,m要满足可列可加性,仅仅是有限可加性是不够的。第四,既然m要满足可列可加性,那么M就应当对可列并封闭,而不能仅仅对有限并封闭。
这里的M就是m的定义域,如同讨论数学分析之前,我们首先要建立对实函数的定义域实数域的一个认识,在讨论Lebesgue测度之前,我们要建立对幂集的子集,后面我们称为集系的认识,而且M不能是任取的集系,它应当对集合的运算封闭,而且不仅仅是有限运算,还应当是极限运算。
概率的公理化定义
现在我们分析学的领域转到初等概率论中,在初等概率论中,我们往往首先要定义一个样本空间Ω,其含义是随机试验可能出现的所有样本点,我们定义事件是Ω的子集,这样,我们就可以用集合论的工具对事件进行运算。概率是事件的函数,描述事件发生的可能性大小。由此可以看出,概率P也是幂集P(Ω)的某个子集F(因为我们不是关心所有的事件,而仅仅关心部分事件罢了,更何况可能也无法定义整个幂集的概率函数)的函数,这和长度、面积、体积有几分相似。下面我们对古典概型和几何概型作一个简要的回顾,我们将发现,概率和长度、面积、体积这些概念,不仅仅只有他们都是幂集的某个子集的函数这一个共同点。
古典概型
如果样本空间Ω是一个有限集,我们记为Ω={w1,⋯,wn}我们的概率如此定义:首先定义一个Ω上的函数p,满足p(wi)=pi>0,i=1,⋯,ni=1∑npi=1则对任意的A⊂Ω,定义P(A)=w∈A∑p(w)P(∅)=0容易验证它满足:
(1)P(Ω)=1
(2)∀A⊆Ω,P(A)∈[0,1]
(3)P满足有限可加性
当然,P可不仅仅满足有限可加性,还满足可列可加性,这是因为如果集列{An}两两不交,由于Ω是有限集,{An}只能有有限个集合非空,从而由有限可加性可以推得可列可加性也是成立的。如此一来,P可以视为是P(Ω)上的“长度、面积或体积”,我们称为测度,只不过这个测度是有限的,因为P(Ω)=1。
几何概型
几何概型则更明显了,假设我们已经定义了Lebesgue测度m,对于有限测度的某个子集A,设样本空间为A,我们可以建立一个A的L可测子集B的概率为P(B)=m(A)m(B)由Lebesgue测度的性质P(B)当然满足
(1)P(A)=1,P(∅)=0
(2)对A的任意的L可测子集B,都有0≤P(B)≤1
(3)P满足可列可加性
由此可见,P也是一种测度,只不过这种测度P是有限的,P(A)=1
概率的公理化定义
由此可见,概率和长度、面积、体积这些概念有共通之处,都满足:
(1)m(∅)=0,∀A∈F,m(A)≥0
(2)m满足可列可加性
对于m其定义域F首先应当对可列并封闭,否则可列可加性就无从谈起,其次,在概率论中,如果A∈F,那么应当有Ac∈F,也就是说我们对其对立事件也感兴趣,再其次F还要囊括必然事件Ω和不可能事件∅,归纳起来,F应当满足:
(1)Ω∈F
(2)如果A∈F,那么应当有Ac∈F
(3)如果An∈F,n=1,2,⋯,那么n=1⋃∞An∈F
我们称这类集系为σ代数,我们把定义在某个σ代数F上满足(1)(2)的(广义)集函数m称为F的测度,进一步地,如果m还满足m(Ω)=1则称m为概率测度,这就是概率的公理化定义。从这里可以看出,概率和长度、面积、体积都是测度,以测度、可测函数及可测函数积分为基本研究对象的测度论是初等概率论和实变函数论的提高和抽象。本学习笔记的目的是利用测度论对概率论进行严格化的表述,在这个过程中,澄清一些初等概率论不可能讲清楚的一些概念(如条件概率、条件期望、随机变量的分类),同时搭起初等概率论与公理化概率论的桥梁。
集合的运算
集合是现代数学的基本概念,一群可以相互区别的事物就可以构成集合,构成集合的事物称为元素\。某个元素和某个集合的关系只有两种,属于和不属于。
交运算:A∩B定义为A∩B={x:x∈A且x∈B}
并运算:A∪B定义为A∪B={x:x∈A或x∈B}
差运算:A−B(或写成A/ B)定义为A−B={x:x∈A且x∈/B}
子集:A⊆B定义为:∀x∈A,x∈B
集合相等:A=B定义为x∈A和x∈B是等价的
证明集合相等常常证明:A⊆B且B⊆A
余集:如果定义了全集X,则对任意A⊆X,定义Ac为Ac=X−A
无穷交:{At:t∈T}为一系列集合,其中T为指标集,t可以用于对子集进行标号,则定义t∈T⋂At={x:∀t∈T,x∈At}
无穷并:{At:t∈T}为一系列集合,其中T为指标集,定义t∈T⋃At={x:∃t0∈T,x∈At0}
单调列:如果集合列{An,n=1,2,⋯}满足:An⊂An+1,则称{An}为单调递增列,如果An+1⊂An,则称{An}为单调递减列
单调列的极限:{An}为单调增列,则定义n→∞limAn=n=1⋃∞An,如果{An}为单调减列,则定义n→∞limAn=n=1⋂∞An
集列的上下极限:定义集列{An}的上极限为n→∞limsupAn=n=1⋂∞k=n⋃∞Ak,定义集列{An}的下极限为n→∞liminfAn=n=1⋃∞k=n⋂∞Ak,容易证明对任意集系{An}都有n→∞liminfAn⊆n→∞limsupAn
集列的极限:如果对集系{An},有n→∞liminfAn=n→∞limsupAn,则称{An}的极限存在,记为n→∞limAn=n→∞liminfAn=n→∞limsupAn
德摩根公式:
(A∩B)c=Ac∪Bc(A∪B)c=Ac∩Bc(t∈T⋃At)c=t∈T⋂Atc(t∈T⋂At)c=t∈T⋃Atc
集合的运算还满足分配律:A∩(B∪C)=(B∪C)∩A=(A∩B)∪(A∩C)A∪(B∩C)=(B∩C)∪A=(A∪C)∩(A∪B)A∩(t∈T⋃Bt)=t∈T⋃(A∩Bt)A∪(t∈T⋂Bt)=t∈T⋂(A∪Bt)当然集合运算还满足交换律和结合律,这里就不列举了
集系与集系的生成
定义1.1 对于集合X,定义X全体子集构成的集合为P(X),称为X的幂集,幂集的子集称为X上的集系
一般而言,我们习惯于将集系写成花体字母A,B,⋯。对于测度论而言,我们需要的不是任意的集系,而是对集合运算封闭的集系:
对有限交封闭:如果A,B∈A,则有A∩B∈A
对有限并封闭:如果A,B∈A,则有A∪B∈A
对差运算封闭:如果A,B∈A,则有A−B∈A
对有限不交并封闭:对任意A∩B=∅,A,B∈A,都有A∪B∈A
类似地可以写出对可列交封闭,对可列并封闭等定义
下面,我们将给出几个常用的集系
π系:如果集系A对有限交封闭,则称A是π系
半环:如果集系R是π系,并且对任意的A,B∈A,存在A中两两不交的m个集合C1,⋯,Cm,满足A−B=k=1⋃mCk则称R为半环
环:如果集系R对有限交和差运算封闭,则称R为环
代数(域):如果集系R是π系,并且如果A∈R,Ac∈R,则称R为代数或域
单调系:如果集系R对任何单调列的极限封闭,则称R是单调系
λ系:如果A满足:
(1)X∈A
(2)A∈A则有Ac∈A
(3){An}是A中的单调增列,An↑A,则A∈A
σ代数或σ域:如果集系F满足:
(1)X∈F
(2)F对余运算封闭
(3)F对可列不交并封闭
σ环:如果集系F对差运算可可列不交并运算封闭,则称F是σ环
上面只是列举了这些集系的定义,下面我们对集系之间的包含关系进行讨论:
(1)显然,半环是π系,这是半环的定义规定的,而环也是π系,这是因为设R是环,如果A,B∈R,则按照环的定义A∪B,A−B,B−A∈R,而A∩B=A∪B−(A−B)−(B−A),从而A∩B∈R,因而环是π系,自然也是半环
(2)代数是环,设R是代数,首先如果A,B∈R,则Ac,Bc∈R,故Ac∩Bc∈R,从而A∪B=(Ac∩Bc)c∈R而对差运算封闭是显然的
(3)σ环显然是环,但不一定是代数,σ代数一定是代数,实际上,代数与环,σ代数和σ环的差别就在于是否有X∈R
(4)λ系一定是单调类,实际上我们只要验证如果{An}是单调减列,An↓A,则有A∈A,Anc∈A,且{Anc}是单调增列,则n=1⋃∞Anc∈R,故(n=1⋃∞Anc)c=n=1⋂∞An∈R(5)显然σ代数一定是λ系
于是,经过上面的讨论,我们可以得到以上几类集系的关系图如下:

下面我们给出一个重要的定理
定理1.1 (1)如果集系F既是单调系又是代数(环),则F是σ代数(σ环)
(2)如果集系F既是λ系又是π系,则F是σ代数
证:
(1)如果F既是单调系又是代数(环),则如果An∈F,n=1,2,⋯,那么k=1⋃nAk∈F并且集系{k=1⋃nAk}是单调增列,且k=1⋃nAk↑n=1⋃∞An,则由于F是一个单调系,有n=1⋃∞An∈F,这就证明了F是σ代数(σ环)
(2)如果An∈F,n=1,⋯,n,⋯,则Anc∈F,n=1,2,⋯,由于F是π系,就有k=1⋂nAkc∈F而{k=1⋂nAkc}是单调减列,F是λ系因而是单调系,k=1⋂nAkc↓n=1⋂∞Anc,从而n=1⋂∞Anc∈F从而(n=1⋂∞Anc)c=n=1⋃∞An∈F故F是σ代数
例1.1 由Rn上全体有限开区间、有限左开右闭区间、有限左闭右开区间和闭区间构成的集合都是π系,另外,全体有限左开右闭区间构成的集系是半环(只要分类讨论很容易验证)
例1.2 Rn上左开右闭矩体定义为k=1∏n(ak,bk]={(x1,⋯,xn):ak<xk≤bk,k=1,⋯,n}全体Rn上左开右闭矩体Rn的一个半环
证:
设I11,I21,⋯,In1,I12,I22,⋯,In2是R中2n个左开右闭的区间,现在我们要求(k=1∏nIk2)c,实际我们只要考察一下笛卡尔积的定义即可,(x1,⋯,xn)∈k=1∏nIk2等价于对任意的k=1,⋯,n,都有xk∈Ik2,因此,(x1,⋯,xn)∈(k=1∏nIk2)c等价于存在k0=1,2,⋯或n,xk0∈Ikc,故我们可以把(k=1∏nIk2)c写成(k=1∏nIk2)c=k=1⋃ni=1∏k−1Ii2×(Ik2)c×i=k+1∏nR分解式右边的n个集合两两不交(由构造可以看出来),而对k=1,⋯,n,有(i=1∏k−1Ii2×(Ik2)c×i=k+1∏nR)∩i=1∏nIi1=i=1∏k−1(Ii1∩Ii2)×(Ik1−Ik2)×i=k+1∏nIi1存在有限个两两不交的左开右闭区间Ik1,⋯,Iknk,满足Ik1−Ik2=j=1⋃nkIkj于是=(i=1∏k−1Ii2×(Ik2)c×i=k+1∏nR)∩i=1∏nIi1j=1⋃nki=1∏k−1(Ii1∩Ii2)×Ikj×i=k+1∏nIi1因此k=1∏nIk1−k=1∏nIk2=k=1⋃nj=1⋃nki=1∏k−1(Ii1∩Ii2)×Ikj×i=k+1∏nIi1分解式右边是N=k=1∑nnk个两两不交的Rn中的区间,显然这个集系是π系,故全体Rn中的左开右闭矩体构成一个半环
例1.3 显然从例1.2的证明可以看出,如果Ai是Xi的半环(i=1,⋯,n),则全体构造如k=1∏nAk,Ak∈Ak,k=1,⋯,n构成的集系是∏k=1nXk的半环,只需要将例1.2中的左开右闭区间换成Ai的集合即可证得
例1.4 R是X上的半环,则对于任意的A,B∈R,有A∪B可表为R中两两不交集合之并,这是因为A−B,B−A,A∩B两两不交,由于R是π系,A∩B∈R,同时A−B,B−A可表为R中有限个两两不交的集合之并
例1.5 由全体有限个R上两两不交的左开右闭区间之并构成是集合是R上的环,这个集系可以写成R=n=1⋃∞{k=1⋃nIk:I1,⋯,In为两两不交的左开右闭区间}
证:
假设I11,⋯,In1是n个两两不交的左开右闭区间,I12,⋯,Im2是m个两两不交的左开右闭区间,则k=1⋃nIk1∪k=1⋃mIk2=i=1⋃nj=1⋃mIi1∩Ij2显然右边的分解式两两不交,故k=1⋃nIk1∪k=1⋃mIk2∈R,再证明R对差运算封闭i=1⋃nIi1−j=1⋃mIj2=i=1⋃n(Ii1−j=1⋃mIj2)=i=1⋃nj=1⋂m(Ii1−Ij2)由于全体左开右闭区间构成R上的半环,对任意的i=1,⋯,n,j=1,⋯,m,存在有限个两两不交的左开右闭区间I1ij,I2ij,⋯,Inijij,有Ii1−Ij2=k=1⋃nijIkij就有=i=1⋃nIi1−j=1⋃mIj2=i=1⋃n(Ii1−j=1⋃mIj2)=i=1⋃nj=1⋂mk=1⋃nijIkiji=1⋃nk1=1⋃ni1⋯km=1⋃nim(Ik1i1∩⋯∩Ikmim)由构造,分解式右边两两不交,故R对差运算封闭
例1.6 当然,例1.5也可以推广到一般的半环,如果A是X上的半环,则R=n=1⋃∞{k=1⋃nAk:A1,⋯,An是A中的两两不交的集合}是X上的环,只要把例1.5中的左开右闭区间换成A中的抽象集合即可
所谓集系的生成,即从简单集系得到复杂集系,A是一个X的简单集系,它未必对集合的某些运算封闭,但我们要求找到一个X的集系R,它对某些运算封闭,并且A⊆R。不仅如此,我们还希望R是最小的,一些多余的集合排除出R。这就是集系生成的概念。
定义1.2 A是X的集系,如果X的环(单调系、λ系、σ代数)R满足:
(1)A⊂R
(2)如果X的环(单调系、λ系、σ代数)F也满足A⊂F,则R⊂F
则称F是由A生成的环(单调系、λ系、σ代数),记为r(A)(m(A),λ(A),σ(A))
那么我们首先要问的是存在性
定理1.2 对任意X的集系A,由A生成的环(单调系、λ系,σ系)存在
证:我们仅证明存在任意集系生成的环,单调系,λ系和σ系的证明是类似的。
记S为全体包含A的环的集合,当然S非空,令R=B∈S⋂B容易验证R是环,且对任意的B∈S,由构造显然有R⊆B
例1.7 A是X的半环,则r(A)是例1.6构造的集合,即r(A)=n=1⋃∞{k=1⋃nAk:A1,⋯,An是A中的两两不交的集合}这由生成的环的定义可以直接验证
集合形式的单调类定理
下面我们证明一个重要的定理
定理1.3 (1)R是X上的代数,则σ(R)=m(R)
(2)P是X上的π系,则σ(P)=λ(P)
证:
(1)(2)的证明是类似的,因此我们只证明(1),(2)的证明可以仿照(1)进行
由于所有σ代数都是单调系,因此,m(R)⊂σ(R),只要证明σ(R)⊂m(R),实际上,由定理1.1,我们只要验证m(R)是代数即可。首先由于R⊂m(R),并且R是代数,故X∈m(R),其次,我们需要验证m(R)对有限并和差运算封闭。对于任意的A∈R,定义:S(A)={B∈m(R):A∪B∈m(R)}如果A∈m(R),那么显然,由于R是一个代数,就有R⊂S(A)其次,由于m(R)是单调系,容易验证S(A)也是单调系(按定义验证即可),因此就有m(R)⊂S(A)这说明对任意的A∈m(R),有R⊂S(A)而S(A)是单调系,故m(R)⊂S(A)从而就证得了m(R)对有限并封闭,同理可证m(R)对差运算封闭,故m(R)是代数,因此m(R)是σ代数,因此,σ(R)⊂m(R),故σ(R)=m(R)
定理1.3是证明中非常实用的定理,比如我们证明了在一个代数R上的任意集合都满足性质P,我们要证明σ(R)上的所有集合都满足性质P,我们可以直接证明,对满足性质P的任何单调列{An},n→∞limAn也满足性质P,那么满足性质P的集合构成一个包含R的单调性,设这个集系为S,则由定理1.3,就有σ(R)=m(R)⊂S故σ(R)上所有的集合都满足性质P。我们把以上的思路,整理为下面的很实用的推论
推论1.1 (1)R是X的代数,S是满足R⊂S的一单调系,则σ(R)⊂S
(2)P是X的一个π系,S是满足P⊂S的一λ系,则σ(P)⊂S
这一推论称为集合形式的单调类定理。利用推论1.1进行证明的证明方法称为单调系方法及λ系方法。
可测空间
可测空间定义
Borel可测空间
乘积空间与乘积σ代数