R语言通过loess去除某个变量对数据的影响

2017-06-10

R语言通过loess去除某个变量对数据的影响 当我们想研究不同sample的某个变量A之间的差异时，往往会因为其它一些变量B对该变量的固有影响，而影响不同sample变量A的比较，这个时候需要对sample变量A进行标准化之 ...

R语言-回归之简单线性回归

2017-05-31

R语言-回归之简单线性回归 8.1 回归的多面性 回归是一个令人困惑的词，因为它有许多特殊变种（见表8-1）。对于回归模型的拟合， R提供的强大而丰富的功能和选项也同样令人困惑。例如， 2005年Vito Ricc ...

SPSS分析技术：多重线性回归模型；极端值与多重共线性的识别与处理

2017-05-28

SPSS分析技术：多重线性回归模型；极端值与多重共线性的识别与处理 如果拟合质量不好，可能存在的问题主要有以下两个方面： 极端值（强点）的影响。我们都知道，在线性回归分析中，自变量回归系数的确定主 ...

SPSS分析技术:最小一乘法;制造企业如何合理安排生产计划

2017-05-28

SPSS分析技术:最小一乘法;制造企业如何合理安排生产计划 最小二乘法的原理是以预测值和实测值之差（残差）的平方和达到最小作为判断模型优劣的评判标准，应用十分广泛。没有放之四海而皆准的真理，最小二乘法同 ...

关于如何解释机器学习的一些方法

2017-05-20

关于如何解释机器学习的一些方法 到现在你可能听说过种种奇闻轶事，比如机器学习算法通过利用大数据能够预测某位慈善家是否会捐款给基金会啦，预测一个在新生儿重症病房的婴儿是否会罹患败血症啦，或者预测一位 ...

机器学习的道、法、术、势、器

2017-05-13

机器学习的道、法、术、势、器 “道、法、术、器”出于老子的《道德经》，后人又加了一个“势”，并且也有了不同的排列。很多人习惯用“道、法、术、势、器”的顺序，原因很简单：道以明向、法以立本、术以立策 ...

机器学习中的范数规则化之 L0、L1与L2范数

2017-05-11

机器学习中的范数规则化之 L0、L1与L2范数 今天我们聊聊机器学习中出现的非常频繁的问题：过拟合与规则化。我们先简单的来理解下常用的L0、L1、L2和核范数规则化。最后聊下规则化项参数的选择问题。这里因为篇 ...

SPSS分析技术：多重线性回归模型；极端值与多重共线性的识别与处理

2017-05-10

SPSS分析技术：多重线性回归模型；极端值与多重共线性的识别与处理 如果拟合质量不好，可能存在的问题主要有以下两个方面： 极端值（强点）的影响。我们都知道，在线性回归分析中，自变量回归系数的确定主要 ...

使用Python进行线性回归

2017-05-09

使用Python进行线性回归 线性回归是最简单同时也是最常用的一个统计模型。线性回归具有结果易于理解，计算量小等优点。如果一个简单的线性回归就能取得非常不错的预测效果，那么就没有必要采用复杂精深的模型了 ...

大数据等最核心的关键技术：32个算法

2017-05-09

大数据等最核心的关键技术：32个算法 奥地利符号计算研究所（Research Institute for Symbolic Computation，简称RISC）的Christoph Koutschan博士在自己的页面上发布了一篇文章，提到他做了一个调查，参与者 ...

模式识别和机器学习、数据挖掘的区别与联系

2017-05-05

模式识别和机器学习、数据挖掘的区别与联系 （一）模式识别的诞生与人工智能 自动控制起始是从工业革命之后，人们就希望设计出减少人工干预，能自己进行调节(regulate)的机器，工程领域开始想出了根轨迹等等 ...

数据挖掘算法（logistic回归，随机森林，GBDT和xgboost）

2017-05-04

数据挖掘算法（logistic回归，随机森林，GBDT和xgboost） 面网易数据挖掘工程师岗位，第一次面数据挖掘的岗位，只想着能够去多准备一些，体验面这个岗位的感觉，虽然最好心有不甘告终，不过继续加油。 不过 ...

机器学习:形如抛物线的散点图在python和R中的非线性回归拟合方法

2017-04-28

机器学习:形如抛物线的散点图在python和R中的非线性回归拟合方法 对于样本数据的散点图形如函数y=ax2+bx+c的图像的数据， 在python中的拟合过程为： ##最小二乘法 import numpy as np import scipy as sp impor ...

R语言与格式、日期格式、格式转化

2017-04-20

R语言与格式、日期格式、格式转化 R语言的基础包中提供了两种类型的时间数据，一类是Date日期数据，它不包括时间和时区信息，另一类是POSIXct/POSIXlt类型数据，其中包括了日期、时间和时区信息。基本总结如下 ...

岭回归分析及其SPSS实现方法

2017-04-05

岭回归分析及其SPSS实现方法 近日有医院的小伙伴问起岭回归分析的SPSS操作，在此与大家一起复习一下。 岭回归分析（RidgeRegression）是一种改良的最小二乘估计方法，它是用于解决在线性回归分析中自变量存 ...

简单易学的机器学习算法—岭回归(Ridge Regression)

2017-03-24

简单易学的机器学习算法—岭回归(Ridge Regression) 一、一般线性回归遇到的问题     在处理复杂的数据的回归问题时，普通的线性回归会遇到一些问题，主要表现在： 预测精度：这里要处理好这样 ...

斯坦福机器学习实现与分析之二（线性回归）

2017-03-15

斯坦福机器学习实现与分析之二（线性回归） 回归问题提出 首先需要明确回归问题的根本目的在于预测。对于某个问题，一般我们不可能测量出每一种情况（工作量太大），故多是测量一组数据，基于此数据去预 ...

线性回归与梯度下降算法

2017-03-12

线性回归与梯度下降算法 1.1   线性回归 在统计学中，线性回归(Linear Regression)是利用称为线性回归方程的最小平方函数对一个或多个自变量和因变量之间关系进行建模的一种回归分析。这种函 ...

干货 | 基础机器学习算法

2017-03-10

本篇内容主要是面向机器学习初学者,介绍常见的机器学习算法，当然,欢迎同行交流。 哲学要回答的基本问题是从哪里来、我是谁、到哪里去，寻找答案的过程或许可以借鉴机器学习的套路：组织数据->挖掘知识->预测未来。 ...

R语言学习笔记三

2017-02-17

R语言学习笔记三 10)求解线性方程组和逆矩阵 Solve函数求出a %*% x = b中的x向量值，即求解线性方程组，通常使用前2个参数，第一个是a，为系数矩阵  ，第二是b为常数项，当b ...