首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >机器学习数学笔记|概率论基础常见概型分布期望与方差

机器学习数学笔记|概率论基础常见概型分布期望与方差

作者头像
演化计算与人工智能
发布2020-08-14 11:22:24
8870
发布2020-08-14 11:22:24
举报

本博客为七月在线邹博老师机器学习数学课程学习笔记

为七月在线打 call!!

课程传送门[1]

概率论

  • 对概率的认识,x 表示一个事件,则 P(x)表示事件发生的概率,其中不可能发生的事件 P(x)=0,一定会发生的事件 P(x)=1.
P(x)\in{[0,1]}
  • 累计分布函数:
\phi{(x)}=P(x<=x_{0})

计算的是

x<=x_{0}

的概率值的和.

  • 因为
P(x)\in{[0,1]}

,是正数,所以

\phi{(x)}

一定是 单增函数

min(\phi{(x)})=0,max(\phi{(x)})=1

  • 因此可以将值域为[0,1]的单调递增函数 y=f(x)看成 x 事件的累积概率(cumulative distribution function,CDF),若 y=f(x)可导,则 p(x)=
f^{'}(x)为概率密度函数(probability density function, pdf)

古典概型

  • 如果一个随机试验所包含的单位事件是有限的,且每个单位事件发生的可能性均相等,则这个随机试验叫做拉普拉斯试验,这种条件下的概率模型就叫古典概型。
  • 遇到古典概型的问题,首先计算出所有可能的情况,然后计算出满足条件的情况,将两者相除后得到的即为事件的概率.
N(N-1)(N-2)(N-3)(N-4)...(N-n+1)=P^{n}_{N}
P(A)=\frac{P^n_{N}}{N^{n}}

概率公式

贝叶斯概率公式

百度词条[2]以下内容部分或全部摘自百度词条

定义--摘自百度
  • 贝叶斯的统计学中有一个基本的工具叫贝叶斯公式、也称为贝叶斯法则, 尽管它是一个数学公式,但其原理毋需数字也可明了。如果你看到一个人总是做一些好事,则那个人多半会是一个好人。这就是说,当你不能准确知悉一个事物的本质时,你可以依靠与事物特定本质相关的事件出现的多少去判断其本质属性的概率。用数学语言表达就是:支持某项属性的事件发生得愈多,则该属性成立的可能性就愈大。
  • 贝叶斯公式又被称为贝叶斯定理、贝叶斯规则是概率统计中的应用所观察到的现象对有关概率分布的主观判断(即先验概率)进行修正的标准方法。
  • 所谓贝叶斯公式,是指当分析样本大到接近总体数时,样本中事件发生的概率将接近于总体中事件发生的概率。但行为经济学家发现,人们在决策过程中往往并不遵循贝叶斯规律,而是给予最近发生的事件和最新的经验以更多的权值,在决策和做出判断时过分看重近期的事件。面对复杂而笼统的问题,人们往往走捷径,依据可能性而非根据概率来决策。这种对经典模型的系统性偏离称为“偏差”。由于心理偏差的存在,投资者在决策判断时并非绝对理性,会行为偏差,进而影响资本市场上价格的变动。但长期以来,由于缺乏有力的替代工具,经济学家不得不在分析中坚持贝叶斯法则。
条件概率:P(A|B)=\frac{P(AB)}{(B)}
全概率公式=P(A)=\sum_{i}P(A|B_{i})P(B_{i})
贝叶斯(Bayes)公式:P(B_{i}|A)=\frac{P(B_{i},A)}{P(A)}=\frac{P(A|B_{i})P(B_{i})}{\sum_{j}P(A|B_{j})P(B_{j})}
  • P(A)是 A 的先验概率或边缘概率,之所以成为"先验"是因为它不考虑任何 B 方面的概率.
  • P(A|B)是已知 B 发生后 A 的条件概率,也由于得自于 B 的取值,而称为 A 的后验概率.
  • P(B|A)是已知 A 发生后 B 的条件概率,也由于得自于 A 的取值,而称为 B 的后验概率.
  • P(B)是 B 的先验概率或边缘概率,也称为"标准化常量"

Example

两种认识下的两个学派

分布

Logistic 函数/Sigmoid 函数

参考资料

[1]

课程传送门: http://www.julyedu.com/video/play/38

[2]

百度词条: https://baike.baidu.com/item/%E8%B4%9D%E5%8F%B6%E6%96%AF%E5%85%AC%E5%BC%8F/9683982?fr=aladdin

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2020-05-03,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 DrawSky 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 概率论
    • 古典概型
      • 概率公式
        • 贝叶斯概率公式
        • Example
        • 两种认识下的两个学派
      • 分布
        • Logistic 函数/Sigmoid 函数
          • 参考资料
      领券
      问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档