深度学习 --- 应用数学和机器学习基础（概率论与信息论）

一、概率论 概率论是用于表示不确定性声明的数学框架。它不仅提供了量化不确定性的方法，也提供了用于导出新的不确定性声明的公理。 概率论两种用途：首先，概率法则告诉我们AI系统如何推理，据此我们设计一些算法来计算或者估算由概率论导出的表达式；其次，可以用概率和统计从理论上分析我们提出的AI系统的行为。 概率论使我们能够提出不确定性的声明以及在不确定性存在的情况下进行推理，而信息论使我们能够量化概率分布

>>阅读原文<<