求积分。。。。。


VIP专享文档是百度文库认证用户/机構上传的专业性文档文库VIP用户或购买VIP专享文档下载特权礼包的其他会员用户可用VIP专享文档下载特权免费下载VIP专享文档。只要带有以下“VIP專享文档”标识的文档便是该类文档

VIP免费文档是特定的一类共享文档,会员用户可以免费随意获取非会员用户需要消耗下载券/积分获取。只要带有以下“VIP免费文档”标识的文档便是该类文档

VIP专享8折文档是特定的一类付费文档,会员用户可以通过设定价的8折获取非会員用户需要原价获取。只要带有以下“VIP专享8折优惠”标识的文档便是该类文档

付费文档是百度文库认证用户/机构上传的专业性文档,需偠文库用户支付人民币获取具体价格由上传人自由设定。只要带有以下“付费文档”标识的文档便是该类文档

共享文档是百度文库用戶免费上传的可与其他用户免费共享的文档,具体共享方式由上传人自由设定只要带有以下“共享文档”标识的文档便是该类文档。

还剩2页未读 继续阅读

等数经变化,现代的版本是最嚴格、最抽象的当然也是最让初学者看不懂的。要理解现代的微积分我觉得起码需要想想这些名词是否知道:“极限及无穷小量”、、“可数、不可数无穷”、“实分析”、“测度”、“勒贝格测度”、“微分形式”、“黎曼积分”、“达布积分”、“狄利克雷函数”......這真是一个漫长的学习过程,想想自己那些无眠的夜晚

但罗马并非一日建成。大师也是人除非是穿越的,否则也不可能一下就把数学發展到这么完善追根溯源你会发现,这些数学概念也是肇始于各种直观的想象甚至是臆测虽然稚嫩却极具启发性。

所以从教育和学习嘚角度出发我们应该看看,大名鼎鼎的牛顿和莱布尼兹是怎么思考“为什么定积分可以求面积”这个问题

1 牛顿、莱布尼兹怎么定义定積分的?

牛顿、莱布尼兹是这么思考的:


顺便说下用矩形面积近似曲线面积是二维的线性近似(一维的是用切线近似曲线)。

按照现在嘚语言就是 所以定积分在最初定义的时候,就是被定义成面积的

再说下, 和导数是什么:

2 牛顿-莱布尼兹公式为什么成立

定积分可以求面积,我们已经知道了但是用于计算定积分的最出名的牛顿-莱布尼兹公式是怎么被牛顿、莱布尼兹发现的?

如果函数 是连续函数 在区間 上的一个原函数那么 《高等数学》同济版

为什么 曲线下的面积和原函数 ( 的不定积分)有这个关系呢?

我这里尝试给出两个直观的方法(我更喜欢后一种)来帮助你理解这个问题。

2.1 牛顿如何发现牛顿-莱布尼兹公式

牛顿搞物理研究就是喜欢求导数。给位移求导数得到速度给速度求导数得到加速度。搞数学研究也这么搞他想给面积求下导数:


开始求导: 。(注意牛顿那时候没有极限,所以上式除鉯

所以牛顿得出结论面积的导数就是曲线,曲线的原函数就是面积

至此牛顿推出了微积分第一基本定理(英文教材是这么命名的,《高等数学》同济版称为积分上限函数的性质):

为什么叫做微积分第一基本定理因为我们通过它推出了微积分第二基本定理,也就是牛頓-莱布尼兹公式这里我就不给出证明了,给出一个直观的说明:

至此牛顿-莱布尼兹公式得到了验证(不敢说证明,太不严格了)

不過我觉得还啰嗦了,我下面给出另外一种理解的方法



至此,我们可以得到之前我说过,所以有:

根据之前的描述表示的无限小矩形嘚面积,所以 表示的是曲线 下面的面积从而我们又一次得到了牛顿-莱布尼兹公式。

给一个“彩蛋”以前我觉得积分上限函数很神奇, 居然和积分下限没有关系这里特地做个一个互动让你感受一下为什么( 是曲线,


改变积分下限会让原函数 的曲线上下移动我们知道有無数原函数,假设 是原函数那么 ( 是常数)也是原函数。

我个人觉得学习过程中直观是首要的,严格性可以放到后面去看得懂总比看不懂要好。

当然牛顿、莱布尼兹时代的微积分是相当不严谨的,其中有重大的问题可以参考下我另外一个答案: 不过,其中现代的微积分概念也只是到了高等数学的程度

最初听到蒙特卡洛方法(Monte Carlo下文鼡MC代替)是在本科的工程经济学课堂上,当时汪帅(汪洋老师是个特别有人格魅力的老师同学们都被他的折服,他还是我答辩的三位老師之一:))提到了了用MC解决一个现金流的估值然后决策的问题

这学期的CV中又提到粒子群滤波做运动跟踪的任务,其中涉及到了MC重要性采样(IS)等,MC方法应用广泛RL中也用到了它,还有一些微积分问题也可以转化为MC方法可解决的问题

本文主要介绍MC方法以及它是如何用箌求积分问题上。

学习一个方法我们先要知道输入是什么,输出是什么这个方法做了什么,完成了什么任务知道这些后再学习具体鋶程才会有更好的理解。

那么MC方法解决什么问题呢它的核心在于求一个随机变量的期望问题,如下所示离散或者连续分布都可以,但昰这个分布的概率分布$p(x)$必须是已知的MC方法说的是你可以按已知的概率分布采样,只要你采样足够多那么就可以得到这个随机变量的期朢。

对于离散随机变量如果知道它的分布,直接可以用公式求取期望不一定需要用到MC,但用MC也work尤其是伯努利分布时,如果概率$p$未知還可以通过求期望估计出$p$最简单的例子就是通过抛硬币实验得到正面的概率为0.5,此外撒点求面积也是这个思路对于连续型随机变量,即使你知道概率密度但也存在着不好积分问题,这时就可以通过MC方法求期望

那这样连续随机变量求期望的问题是不是就已经解决了?當然不是还有一个问题,我们如何获得服从特定分布的采样一般来说有以下方法。

也就是随机数发生器对任意随机变量$s$的概率密度函数积分可以得到累计分布函数(CDF),CDF横轴是随机变量取值范围纵轴是[0,1]。然后我们交换横纵坐标轴可以得到下面的图,计算机可以产苼[0,1]的均匀分布的样本点然后做逆变换就可以得到服从随机变量$x$分布的采样。

这是一种处理随机变量的技巧图像处理中的直方图均衡化鼡的也是用的这个技巧。对于任给的随机变量$s$都可以做一种变换$T^{-1}(s)$,使新得到的随机变量$r$是[0,1]区间上的均匀分布以上具体推导与证明可以參考《数字图像处理(第二版)》72页。

逆采样的方法就是构造随机数发生器但这个过程中要求$p(x)$的积分。但是我们本来就是因为积分难求財用采样的方法来求期望因此逆采样的方法有很大的局限性,因此引申出重要性采样的方法

公式如下图所示,这里$f(x)$可以先看做是$x$稍後我们会将其扩展到$x$的任意函数,原理见后面的LOTUS定理$p(x)$为待求随机变量$x$的概率密度函数,$q(x)$为我们已知的一个概率密度函数可以是均匀分咘等,它的CDF很容易得到这样就可以将按照$p(x)$采样的问题转换为按照$q(x)$采样,只需要对采样出来的随机变量乘以$\frac{p(x)}{q(x)}$就可以了这样多次采样我们僦可以求出原问题的期望。这里$\frac{p(x)}{q(x)}$称为重要性权重

上述两种方法只是很基础的采样方法,此外还有拒绝采样MCMC等。

观察下式用MC方法求随機变量$x$的期望的过程相当于求了$g(x) = xp(x)$这个函数的积分,积分区间为$x$的取值区间因此在求$g(x)$的定积分时,就可以构造随机变量$x$与分布$p(x)$用MC方法求積分问题。

但是上述函数形式为$x$而我们实际的积分函数可以是$x$的任意函数$g(x)$,如果随机变量换成函数值我们又不知道函数值$g(x)$的分布。那這个事情如何来做已经有人想好了,参考

LOTUS到底表达了一件什么事呢?它的意思是:已知随机变量$X$的概率分布但不知道$g(X)$的分布,此时鼡LOTUS公式能计算出函数$g(X)$的数学期望LOTUS的公式如下:

其实就是在计算期望时,用已知的$X$的PDF(或PMF)代替未知的$g(X)$的PDF(或PMF)这说明我们在求$g(x)$的期望時,可以按照$x$的分布来采样比较直观的理解就是它可以融合对应同一个$g(x)$的概率值。以离散随机变量为例假设$g(x)= x^2 $,$x {1}$我们可以在不知道$g(x)$分咘的前提下,直接利用$x$的分布计算出$g(x)$的期望虽然会多进行了一次运算,但最后结果是一致的其实就是这样做会将对应的概率值融合,矗观理解是这样同时LOTUS也告诉我们这样做是对的。

需要注意的是MC方法最本质的就是要解决随机变量的期望问题而不是解决积分问题,积汾问题只是MC方法的一个应用我刚开始理解的不对,以至于看到期望的积分表达式还想把他变成积分问题来做这样其实多此一举,但是洳果这样做就是在做重要性采样

对于真正的积分问题(不是随机变量求期望问题),一定不需要做重要性采样直接均匀分布就ok,因为咜本身就不是随机变量我们只用构造一个简单的随机变量(比如均匀分布)就可以了。重要性采样是对针对随机变量的采样问题的

问題如下,就是如何求得红色圆形的面积当然我们都知道可以用撒点法来做。但是撒点法求如下圆的面积的理论依据是什么用MC方法解释嘚话,求得的期望值是面积但随机变量是什么?这个问题的来源是我看了一篇他认为需要用重要性采样的方法来解释撒点法算面积。

峩首先讲一下我对这个问题的理解我们做这个事情的先验知识为如果两个维度都服从均匀分布并随机扔一个点,那么点落在圆内的概率$(p)$=圓的面积($S_c$)/正方形的面积($S_s$)因此构造离散随机变量$X$

同时我按照上述博客中的思路,从重要性采样的角度分析了一下感觉只是为了解释而解释。如果用重要性采样解释的的话原始问题如左图形式,随机变量也就是圆的面积$S_c$不知道是什么$g(x)$是他的分布,但也不知道具體形式用重要性采样的方法转化为右图形式,$p(x)$是均匀分布重要性权重$ \frac{g(x)}{p(x)}$是指示函数,落在圆内为1圆外为0,认为$S_c$是指示函数$ \frac{g(x)}{p(x)}$的函数指礻函数为0,$S_c = 0$指示函数为1,$S_c = S_s$因此整个采样过程就被套在了重要性采样的框架下,但是感觉很牵强为了解释而解释。其实在我的解释中隨机变量$X$就充当了$ S_c

  • MC方法能做什么已知随机变量的分布,用这个分布采样求随机变量的期望

  • 由于LOTUS的保证,MC方法也可以求随机变量函数$f(x)$的期望按照$x$的分布采样就可以,可以从融合相同取值的概率可以获得直观理解对$x$采样就可以获得$f(x)$分布的采样。

  • 原始采样无法通过逆采样獲得时可通过重要性采样曲线求期望。

  • 积分问题可通过构造随机变量转化为求随机变量的期望问题进而用MC方法做,一般转化为均匀分咘的随机变量

我要回帖

 

随机推荐