跳至正文
Wener Notes

Statistics

约 1 分钟阅读
标签:Statistics
  • 统计、回归模型和预测评估指标。
  • :统计与回归常用术语、缩写和符号。

评估指标

    • 模型相对均值基线解释目标变量波动的程度。
    • 预测误差的典型规模,对较大误差更敏感。

模型与方法

  • Ordinary Least Squares (OLS) - 普通最小二乘法。
  • Weighted Linear Regression (WLR) - 加权线性回归。
    • 处理异方差性、降低异常值影响,或反映数据聚合时的权重。
    • Cost=∑i=1nwi⋅(yi−y^i)2\text{Cost} = \sum_{i=1}^{n} w_i \cdot (y_i - \hat{y}_i)^2
    • 以多个基础模型的 OOF 预测为特征,用 Ridge 元模型组合最终预测。

工具

关联信息

反向链接、本文链接的其他页面和外部资料。

反向链接

  • 算法
    笔记 · Statistics

    Statistics

  • R-squared
    笔记 · Statistics

    Statistics · $R^2$ 是评估回归模型拟合优度(Goodness of Fit)的指标,衡量模型相对于“始终预测目标均值”的基线,解释目标变量波动的程度。 · $$ · R^2 = 1 - \frac{SS{res}}{SS{tot}}

  • RMSE
    笔记 · Statistics

    Statistics · RMSE(Root Mean Square Error)用于衡量回归模型的预测值与真实值之间的误差大小。它先对误差求平方、取平均,再开平方,因此最终单位与目标变量相同。 · $$ · \mathrm{RMSE} = \sqrt{\frac{1}{n}\sum{i=1}^{n}(yi - \hat{y}i)^2}

  • Stacked Ridge
    笔记 · Statistics

    Statistics · Stacked Ridge 是 Stacking(堆叠泛化)的一种实现:先由多个基础模型产生预测结果,再以这些预测结果作为特征训练 Ridge Regression 元模型,输出最终预测。 · “Staged Ridge”不是常见的标准名称;本页使用 Stacked Ridge 指以 Ridge 作为 stacking 元学习...

  • Statistics Glossary
    笔记 · Statistics

    Statistics · | abbr. | stand for | cn | · | OLS | Ordinary Least Squares | 普通最小二乘法 | · | WLR | Weighted Linear Regression | 加权线性回归 |

站内链接

  • R-squared
    笔记 · R-squared ($R^2$, 决定系数)

    Statistics · $R^2$ 是评估回归模型拟合优度(Goodness of Fit)的指标,衡量模型相对于“始终预测目标均值”的基线,解释目标变量波动的程度。 · $$ · R^2 = 1 - \frac{SS{res}}{SS{tot}}

  • RMSE
    笔记 · RMSE ($\mathrm{RMSE}$, 均方根误差)

    Statistics · RMSE(Root Mean Square Error)用于衡量回归模型的预测值与真实值之间的误差大小。它先对误差求平方、取平均,再开平方,因此最终单位与目标变量相同。 · $$ · \mathrm{RMSE} = \sqrt{\frac{1}{n}\sum{i=1}^{n}(yi - \hat{y}i)^2}

  • Stacked Ridge
    笔记 · Stacked Ridge(堆叠 Ridge)

    Statistics · Stacked Ridge 是 Stacking(堆叠泛化)的一种实现:先由多个基础模型产生预测结果,再以这些预测结果作为特征训练 Ridge Regression 元模型,输出最终预测。 · “Staged Ridge”不是常见的标准名称;本页使用 Stacked Ridge 指以 Ridge 作为 stacking 元学习...

  • Statistics Glossary
    笔记 · Glossary

    Statistics · | abbr. | stand for | cn | · | OLS | Ordinary Least Squares | 普通最小二乘法 | · | WLR | Weighted Linear Regression | 加权线性回归 |

参考资料

Wikipedia1 条
其他外链2 条
最近更新commit 8bcd518编辑