R语言中样本平衡的几种方法

2017-06-07

R语言中样本平衡的几种方法 在对不平衡的分类数据集进行建模时，机器学习算法可能并不稳定，其预测结果甚至可能是有偏的，而预测精度此时也变得带有误导性。在不平衡的数据中，任一算法都没法从样本量少的类中 ...

说说什么是数据挖掘

2017-05-13

说说什么是数据挖掘 数据挖掘就是指从数据中获取知识。 好吧，这样的定义方式比较抽象，但这也是业界认可度最高的一种解释了。对于如何开发一个大数据环境下完整的数据挖掘项目，业界至今仍没有统一的规范 ...

【案例】数据挖掘与生活：算法分类和应用

2017-05-06

【案例】数据挖掘与生活：算法分类和应用 本文，主要想简单介绍下数据挖掘中的算法，以及它包含的类型。然后，通过现实中触手可及的、活生生的案例，去诠释它的真实存在。 一、数据挖掘的算法类型 一 ...

数据挖掘的常用方法、功能和一个聚类分析应用案例

2017-05-04

数据挖掘的常用方法、功能和一个聚类分析应用案例 一、数据挖掘的常用方法 利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等，它们分别从不 ...

数据挖掘:手把手教你做文本挖掘

2017-05-03

数据挖掘:手把手教你做文本挖掘 1文本挖掘定义 文本挖掘指的是从文本数据中获取有价值的信息和知识，它是数据挖掘中的一种方法。文本挖掘中最重要最基本的应用是实现文本的分类和聚类，前者是有监督的挖掘算 ...

机器学习中的降维算法：ISOMAP & MDS

2017-03-11

机器学习中的降维算法：ISOMAP & MDS 降维是机器学习中很有意思的一部分，很多时候它是无监督的，能够更好地刻画数据，对模型效果提升也有帮助，同时在数据可视化中也有着举足轻重的作用。 一说到降维，大家第 ...

非常值得收藏的 IBM SPSS Modeler 算法简介

2017-03-08

非常值得收藏的 IBM SPSS Modeler 算法简介 IBM SPSS Modeler 以图形化的界面、简单的拖拽方式来快速构建数据挖掘分析模型著称，它提供了完整的统计挖掘功能，包括来自于统计学、机器学习、人工智能等方面 ...

数据挖掘方法功能和聚类分析案例

2017-03-01

数据挖掘方法功能和聚类分析案例 一、数据挖掘的常用方法 利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等，它们分别从不同的角度对数据进行 ...

聚类分析案例之市场细分

2017-02-24

聚类分析案例之市场细分 从实际应用的角度看，聚类分析是数据挖掘的主要任务之一。而且聚类能够作为一个独立的工具获得数据的分布状况，观察每一簇数据的特征，集中对特定的聚簇集合作进一步地分析。 聚 ...

这一年来，数据科学家都用哪些算法

2017-01-31

这一年来，数据科学家都用哪些算法 在“数据为王”的今天，越来越多的人对数据科学产生了兴趣。数据科学家离不开算法的使用，那么，数据科学家最常用的算法，都是哪些呢？ 最近，著名的资料探勘信息网站KDnu ...

6个公司的大数据岗位的面试经验

2017-01-15

6个公司的大数据岗位的面试经验 本人住在有人间天堂之称的城市，6年多开发经验，最近2年主要在做大数据相关的开发，最近考虑换工作，基本也只考虑大数据相关岗位。目前新工作已经找好，但想分享一下最近面试的 ...

机器学习、大数据等岗位面试时遇到的各种问题总结

2016-10-12

机器学习、大数据等岗位面试时遇到的各种问题总结 自己的专业方向是机器学习、数据挖掘，就业意向是互联网行业与本专业相关的工作岗位。各个企业对这类岗位的命名可能有所不同，比如数据挖掘/自然语言处理/机器 ...

数据挖掘与数据分析梳理

2016-10-11

数据挖掘与数据分析梳理 一、数据挖掘和数据分析概述 数据挖掘和数据分析都是从数据中提取一些有价值的信息，二者有很多联系，但是二者的侧重点和实现手法有所区分。 数据挖掘和数据分析的不同之处： ...

《大数据的“道”“术”“释”》----读书摘录+思考

2016-09-28

《大数据的“道”“术”“释”》----读书摘录+思考 这本书是看到我老师的朋友圈推荐才买的，看了一下目录，比较喜欢。就认真的读了下去，这不是一本讲什么是大数据的书，而是一本为什么要用到大数据分析的书。 ...

BAT三巨头大数据优劣势与策略分析

2016-09-27

BAT三巨头大数据优劣势与策略分析 阿里巴巴CTO即阿里云负责人王坚博士说过一句话：云计算和大数据，你们都理解错了。实际上，对于大数据究竟是什么业界并无共识。大数据并不是什么新鲜事物。信息革命带来 ...

对业务和用户的理解,是数据挖掘“皇冠上的明珠”

2016-09-06

对业务和用户的理解,是数据挖掘“皇冠上的明珠” 这篇文章不是数据挖掘教程，而是让用研、产品、运营及其它相关岗位的同学了解： 数据挖掘的特点； 数据挖掘可以做哪些事情、有什么应用价值； 要发挥 ...

数据挖掘是对业务和用户的理解

2016-09-02

数据挖掘是对业务和用户的理解 数据挖掘有很高的专业门槛；然而用研、产品、运营们也不一定就会被数据科学家们“碾压”了。这篇文章不是数据挖掘教程，而是让用研、产品、运营及其它相关岗位的同学了解： 数 ...

异常检测算法--Isolation Forest

2016-08-17

异常检测算法--Isolation Forest 提到森林，自然少不了树，毕竟森林都是由树构成的，看Isolation Forest（简称iForest）前，我们先来看看Isolation Tree（简称iTree）是怎么构成的，iTree是一种随机二叉树，每 ...

机器学习的大数据分析成绩斐然，却令数学家大惑不解

2016-07-19

机器学习的大数据分析成绩斐然，却令数学家大惑不解 这篇文章原刊登于《量子杂志》（Quanta Magazine），分析了机器学习在大数据中的一些数学原理和问题，作者Ingrid Daubechies是杜克大学数学、电子和计 ...

一家商业数据分析公司SAS，如何保持了40年的持续增长?

2016-06-23

一家商业数据分析公司SAS，如何保持了40年的持续增长? 有这样一家神奇的软件公司，从40年前创业伊始，就专注于创造数据分析的商用消费市场，为此开发了一整套软件平台以及230多种软件产品，把深奥数学原理广泛 ...