1. 笔记目录
  2. 机器学习与泛化
  3. 当前词条

首页 › 机器学习与泛化 › 正文

特征缩放会影响部分算法的优化过程|无监督学习探索数据中的结构和分布|损失函数量化预测与目标之间的差异

· 来源:松岬生活网 · 作者:陈念桐
责任编辑:邬若茉 · 二审:喻言芮 · 三审:乐沐禾

笔记摘要

机器学习与泛化

数据泄漏会使评估结果高于真实应用水平

数据泄漏会使评估结果高于真实应用水平。特征是模型用于表达输入的重要属性。特征缩放会影响部分算法的优化过程。缺失值处理需要考虑缺失产生的机制。过拟合表示模型学习了不易泛化的细节。欠拟合表示模型未充分表达数据规律。正则化通过约束或惩罚降低过拟合倾向。交叉验证利用多个划分估计模型表现。

时间序列验证应避免未来信息进入训练

时间序列验证应避免未来信息进入训练。损失函数量化预测与目标之间的差异。梯度下降沿损失减小的方向更新参数。学习率控制每次更新的步长大小。学习率过大可能导致训练振荡或发散。批大小影响梯度噪声和资源使用方式。超参数由训练过程外部设定或搜索。参数量多不保证模型在目标任务上更好。

机器学习通过数据构建能够执行任务的模型

机器学习通过数据构建能够执行任务的模型。监督学习使用带有目标标签的样本训练。无监督学习探索数据中的结构和分布。强化学习通过环境反馈学习行动策略。训练集用于拟合模型的参数和内部状态。验证集帮助选择模型和调整超参数。测试集用于评估未参与选择过程的表现。

笔记类型说明

来源:松岬生活网

相关新闻

日常百科 · 梳理知识与概念 · h5.ddjuqg.cn日常百科 · 相关词条 · h5.ddjuqg.cn行业资料网 · 整理行业公开资料 · 3g.ddjuqg.cn行业资料网 · 相关资料 · 3g.ddjuqg.cn城市生活指南 · 社区生活与实用资料 · m.ddjuqg.cn城市生活指南 · 相关生活资料 · m.ddjuqg.cn