统计学习是什么？

是一种计算机基于数据构建概率统计模型，也是运用模型对数据进行预测和分析的方法

统计学习的三种问题

统计学习的数据

数据集

• 训练数据：用来学习模型
• 测试数据：进行预测
• 训练数据和测试数据均由输入与输出对（又叫做样本或样本点）构成

训练集：通常表示为：$T={(x_1,y_1),(x_2,y_2),…,(x_N,y_N)}$，${x_i,y_i}$即样本或样本点。

统计学习方法三要素

方法 = 模型 + 策略 + 算法

基本概率公式

• 加法规则：$P(x)=\Sigma_yP(x,y)$
• 乘法规则：$P(x,y)=P(x)P(y|x)$
• 其中 x 和 y 是随机变量