马尔可夫不等式、切比雪夫不等式、柯西-施瓦茨不等式

马尔可夫不等式、切比雪夫不等式、柯西-施瓦茨不等式一 马尔可夫不等式马尔可夫不等式描述的是非负随机变量绝对位置的概率上限对于非负随机变量 X a gt 0 有证明 原式可化为注意到 因为 X 非负 右边二 切比雪夫不等式切比雪夫不等式描述的是随机变量距期望相对位置偏离的概率上限证明 记右边注意到 在中 因此有三 柯西 施瓦茨不等式

一、马尔可夫不等式(Markov)

马尔可夫不等式描述的是非负随机变量绝对位置的概率上限

对于非负随机变量X,a >= 0,有  P(X\geq a)\leq \frac{EX}{a}

证明:原式可化为

 \int_{a}^{\infty}f(x)dx\leq \int_{0}^{\infty}\frac{x}{a}f(x)dx

注意到,因为 X 非负,右边 \int_{0}^{\infty}\frac{x}{a}f(x)dx\geq \int_{a}^{\infty}\frac{x}{a}f(x)dx\geq \int_{a}^{\infty}f(x)dx=P(X\geq a)

二、切比雪夫不等式(Chebyshev)

切比雪夫不等式描述的是随机变量距期望相对位置偏离的概率上限

P(|X-EX|\geq \varepsilon )\leq \frac{Var(X)}{\varepsilon^2}

证明:记 \Phi =\{|x-EX|\geq \varepsilon \}

\int_{\Phi}^{ }f(x)dx\leq \frac{E(X-EX)^2}{\varepsilon^2}

右边 \frac{E(X-EX)^2}{\varepsilon^2}=\int_{-\infty}^{\infty}(x-EX)^2f(x)dx/\varepsilon^2\geq \int_{​{\Phi}^{ }}(x-EX)^2f(x)dx/\varepsilon^2

注意到,在 \Phi 中,(x-EX)^2\geq \varepsilon ^2,因此有

\int_{​{\Phi}^{ }}(x-EX)^2f(x)dx/\varepsilon^2\geq \int_{​{\Phi}^{ }}f(x)dx

三、柯西-施瓦茨不等式(Cauchy-Schwarz)

柯西-施瓦茨不等式描述的是协方差与方差之间的不等关系

Cov(X,Y)^2\leq \sigma _{X}^2\sigma _{Y}^2

证明:上式可化为 E^2(X-EX)(Y-EY)\leq E(X-EX)^2E(Y-EY)^2

可以看到组成部分只有 2 个:X-EX 与 Y-EY

因此构造函数 f(t)=E[t(X-EX)+(Y-EY)]^2

=E[(X-EX)^2t^2+2(X-EX)(Y-EY)t+(Y-EY)^2]

显然有 f(t)\leq 0,所以上述二次函数 \Delta =4E^2(X-EX)(Y-EY)-4E(X-EX)^2E(Y-EY)^2\leq 0

即柯西-施瓦茨不等式

 

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/231077.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • 超详细VSCode安装教程(Windows)「建议收藏」

    本文基于Windows系统博主的VSCode专栏:分享使用VSCode的基本操作与各种技巧

    2022年4月4日
    151
  • 在Anaconda下安装Pytorch的超详细步骤「建议收藏」

    在Anaconda下安装Pytorch的超详细步骤「建议收藏」近几年来,pytorch的发展速度越来越快,在github、CSDN等开源网站上下载的源代码逐渐由tensorflow向pytorch转变。近期在看论文时需要对代码进行复现,在安装pytorch时遇到了很多问题,将整个过程写出来供大家借鉴学习。注:在进行安装的过程中,通过cmd命令框输入命令发现找不到文件,说明环境变量没有配置好。此方法不需要配置环境变量。

    2022年10月7日
    3
  • DS-5/RVDS4.0变量初始化错误

    DS-5/RVDS4.0变量初始化错误

    2022年1月13日
    54
  • 记忆化搜索(搜索+dp思想)

    记忆化搜索(搜索+dp思想)一:简介(1)记忆化搜索即搜索+动态规划数组记录上一层计算结果,避免过多的重复计算算法上依然是搜索的流程,但是搜索到的一些解用动态规划的那种思想和模式作一些保存;一般说来,动态规划总要遍历所有的状态,而搜索可以排除一些无效状态。更重要的是搜索还可以剪枝,可能剪去大量不必要的状态,因此在空间开销上往往比动态规划要低很多。记忆化算法在求解的时候还是按着自顶向下的顺序,但是每求解

    2022年7月26日
    12
  • java子窗口获取父窗口句柄_java获得窗口句柄[通俗易懂]

    java子窗口获取父窗口句柄_java获得窗口句柄[通俗易懂]学会用按键精灵获取子窗口句柄来源:按键学院【按键精灵】电脑的桌面是最顶级的…Windows通过句柄(Handle)识别每个窗体、控件、菜单和菜单项,当程序运行时,它所包含的每个部件都有一个惟一确定的句柄同其他的部件相区别句柄在WindowsAPI中具有举足……其实呢,“抓抓”抓句柄的功能,实现起来是很容易的,我们一起来操作看看。实现功能点击图片控件之后鼠标不松开,到了需要…

    2022年7月14日
    19
  • 【转载】第四章、架构设计

    【转载】第四章、架构设计

    2021年8月15日
    58

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号