正则化---提高深度学习模型的泛化能力

2020-07-23

前面文章小编简单给大家介绍了泛化能力的一些基础知识，今天给大家带来的是提高模型泛化能力的方法--正则化。 一、首先来回顾一下什么是泛化能力 泛化能力(generalization ability)，百科给出的定义是：机器 ...

机器学习中的泛化能力指的是什么？

2020-07-03

概括地说，泛化能力(generalization ability)是指机器学习算法对新鲜样本的适应能力。学习的目的是学到隐含在数据对背后的规律，对具有同一规律的学习集以外的数据，经过训练的网络也能给出合适的输出，该能力称为 ...

交叉验证：评估模型的泛化能力表现

2020-06-16

注明：本文章所有代码均来自scikit-learn官方网站 在实际情况中，如果一个模型要上线，数据分析员需要反复调试模型，以防止模型仅在已知数据集的表现较好，在未知数据集上的表现较差。即要确保模型的泛化能力 ...

神经网络的泛化能力差吗？

2020-05-21

泛化能力，英文全称generalization ability，指机器学习算法对新鲜样本的适应能力，一种预测新的input类别的能力。 通过学习找到隐含在数据背后的规律，并对具有同一规律的学习集以外的数据，这种经过训练的网络可 ...

为什么有的神经网络加入注意力机制后效果反而变差了？

2023-03-23

注意力机制是一种在神经网络中应用广泛的技术，能够帮助模型更好地理解输入数据，提高模型的性能和精度。然而，有时候加入注意力机制后模型的效果并没有得到明显的提升，甚至会变差。那么，为什么有的神经网络加入注 ...

神经网络如何进行回归预测？

2023-03-23

神经网络是一种模拟人脑神经元工作方式的机器学习算法，具有强大的非线性建模能力和自适应性。在回归预测问题中，神经网络通常被用来对输入数据进行函数拟合，从而预测相关的输出值。本文将介绍神经网络进行回归预测 ...

神经网络训练时如何找到最优的那个随机种子？

2023-03-23

在神经网络训练中，随机种子是一个非常重要的超参数，因为它可以影响模型的最终性能。找到一个优秀的随机种子可以提高模型的稳定性和泛化能力。但是，如何找到这个最优的随机种子呢？本文将介绍一些常用的方法。 首 ...

如何用神经网络实现连续型变量的回归预测？

2023-03-22

神经网络是一种强大的机器学习工具，已被广泛应用于各种预测和分类问题。其中一个常见的应用是使用神经网络进行连续型变量的回归预测。本文将介绍如何使用神经网络完成这个任务。 数据准备 首先，我们需要准备数据 ...

基于深度卷积神经网络进行人脸识别的原理是什么？

2023-03-22

人脸识别是一种常见的生物特征识别技术，它通过计算机视觉技术来识别人脸并将其与已知的人脸进行比对，从而实现身份验证或识别。在过去几年中，深度卷积神经网络（CNN）已经成为人脸识别领域取得重要进展的核心技术 ...

LSTM如何来避免梯度弥散和梯度爆炸？

2023-03-22

LSTM（Long Short-Term Memory）是一种常用的循环神经网络架构，主要应用于序列数据的处理。在训练LSTM模型时，由于网络层数和时间步长的增加，会出现梯度弥散和梯度爆炸的问题。本文将介绍LSTM是如何通过一系列的改 ...

神经网络加上注意力机制，精度反而下降，为什么会这样呢？

2023-03-14

近年来，神经网络和注意力机制的结合已经成为了自然语言处理领域中的研究热点。但是，在实际应用中，有时候我们会发现，当将注意力机制加入到神经网络中时，模型的精度反而下降了。为什么会出现这种情况呢？本文将从 ...

神经网络为什么可以（理论上）拟合任何函数？

2023-03-08

神经网络是一种基于多层非线性变换的模型，由于其强大的拟合能力和广泛的应用，成为了机器学习领域中的热门算法之一。在理论上，神经网络可以拟合任何函数，这得益于神经网络的复杂结构和参数优化方法。 首先，神经 ...

数据分析之数据挖掘入门指南

2022-10-25

数据分析 探索性数据分析（Exploratory Data Analysis，EDA）是指对已有数据在尽量少的先验假设下通过作图、制表、方程拟合、计算特征量等手段探索数据的结构和规律的一种数据分析方法。 常用的第三方库 ...

数据分析师之数据挖掘入门

2022-10-19

数据分析 探索性数据分析（Exploratory Data Analysis，EDA）是指对已有数据在尽量少的先验假设下通过作图、制表、方程拟合、计算特征量等手段探索数据的结构和规律的一种数据分析方法。 常用的第三方库 ...

CDA Level Ⅲ 数据分析认证考试模拟题库（第十三期）

2021-08-16

不过，在出题前，要公布上一期Level Ⅲ 中61-65题的答案，大家一起来看！ 62、ABD 64、ABD A.树长得太高容易过拟合 C.可以通过剪枝限制过拟合 67.决策树模型是一种描述对实例进行分类的树形结构 ...

CDA LEVEL 1 考试，知识点《机器学习基本概念》

2021-03-15

一、什么是机器学习 机器学习研究如何让计算机不需要明确的程序也能具备学习能力。(—— Arthur Samuel,1959) 一个计算机程序在完成了任务T之后，获得经验E，其表现效果为P，如 果任务T的性能表现，也就是用 ...

当数据分析成了一门显学，算法会左右你的终身大事

2016-10-17

当数据分析成了一门显学，算法会左右你的终身大事 你愿意你的终身大事被算法安排吗？如果有一天算法将比你更加了解你自己，你准备好相应的心智模块了吗？本期数据侠将比较机器学习和传统数据建模的区别，并用最 ...

数据挖掘与数据分析梳理

2016-10-11

数据挖掘与数据分析梳理 一、数据挖掘和数据分析概述 数据挖掘和数据分析都是从数据中提取一些有价值的信息，二者有很多联系，但是二者的侧重点和实现手法有所区分。 数据挖掘和数据分析的不同之处： ...

2017校招数据分析岗位笔试/面试知识点

2016-09-30

2017校招数据分析岗位笔试/面试知识点 2017校招正在火热的进行，后面会不断更新涉及到的相关知识点。尽管听说今年几个大互联网公司招的人超少，但好像哪一年都说是就业困难，能够进去当然最好，不能进去是不是 ...

数据挖掘系列决策树分类算法

2016-08-15

数据挖掘系列决策树分类算法 从这篇开始，我将介绍分类问题，主要介绍决策树算法、朴素贝叶斯、支持向量机、BP神经网络、懒惰学习算法、随机森林与自适应增强算法、分类模型选择和结果评价。 这篇先介绍 ...