数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。
数据挖掘的别名机器学习和统计学习一样，数据挖掘的实质是通过计算机的计算能力在一堆数据中发掘出规律并加以利用的过程。因此对数据挖掘而言，就需要经历规则学习、规则验证和规则使用的过程。
规则学习又称为模型训练，在这个步骤中有一个数据集将作为训练集。按照相关的算法和输出规则的要求，从训练集中筛选出需要使用的变量，并根据这些变量生成相关的规则。有的时候是将过去已经发生的数据作为训练集，在对比已知的结果和输入的变量的过程中，以尽可能降低输出误差的原则拟合出相应的模型。
当产生了规则后就需要验证规则的效果和准确度，这个时候就需要引入验证集。验证集和训练集具有相同的格式，既包含了已知的结果也包含了输入的变量。数字化转型网www.szhzxw.cn
与训练集不同的是对验证集的应用是直接将规则应用于验证集中，去产生出相应的输出结果，并用输出的结果去对比实际情况，以来确定模型是否有效。如果有效的话就可以在实际的场景中应用。如果效果不理想则回头去调整模型。
测试集是将模型在实际的场景中使用是直接应用模型的步骤。在测试集中，只包含输入变量却没有像其他两个数据一样存在的已知结果。正因为结果未知，就需要用测试集通过模型去产生的输出的结果。这个输出结果将在为结果产生以后进行验证，只要有效模型就会一直使用下去。
声明：本文来自网络，版权归作者所有。文章内容仅代表作者独立观点，不代表数字化转型网立场，转载目的在于传递更多信息。如有侵权，请联系我们。数字化转型网www.szhzxw.cn
数字化转型网数据专题包含哪些内容
数字化转型网数据专题将关注数据治理、数据质量管理、数据架构、主数据管理、数据仓库、元数据管理、数据备份、数据挖掘、数据分析、数据安全、大数据、数据合规、等数据相关全产业链相关环节。
数字化转型网数据专题包含： 数字化转型网（www.szhzxw.cn）
1、数据相关外脑支持：100+数据相关专家、100+数据实践者、1000+相关资料
2、数据研习社：与全球数据相关专家、实践者共同探讨相关问题，推动产业发展！
3、国际认证培训：目前已引进DAMA国际认证CDMP，其他国内外认证也在逐步引进中
4、典型案例参考：与数字化转型网数据要素X研习社社员一起学习典型案例，共探企业数据落地应用
本文由数字化转型网（www.szhzxw.cn）转载而成，来源于全栈云技术架构；编辑/翻译：数字化转型网Jack。
