大数据时代对统计学的挑战

2017-04-17

大数据时代对统计学的挑战 一除了机遇还有挑战 世界潮流，浩浩荡荡，不可阻挡，国人讲究识时务者为俊杰，信息时代，数据爆炸。大数据大势当前，究竟采取什么样的态度才是真正的“识时务”? 大数据时代并 ...

大数据时代传统社会调查过时了吗

2017-04-17

大数据时代传统社会调查过时了吗 大数据时代是否需要社会调查？大数据时代凭借智能设备，通过数据挖掘技术可以获得海量数据，利用这些数据由此还兴起了计算社会学这一学科。有学者提出，依赖于问卷调查的传统社 ...

一种基于数据挖掘的通用CRM系统框架及关键技术研究

2017-04-14

一种基于数据挖掘的通用CRM系统框架及关键技术研究 随着客户信息量的增加，客户与公司的关系变得越来越复杂，单纯操作性的客户关系管理CRM(Customer Relationship Management)已难以满足用户的需要。在CRM中 ...

我用6.5万条公开数据分析了一下人民眼中的人民的名义

2017-04-12

最近在看人民的名义这部剧，但是有一点我不是很满意：如果错过了七点过的电视直播（我从来没准时看过），那么就只能等到凌晨十二点，视频网站才会更新。我理解电视台想保证收视率的这点小心思，但这么做也太折磨人了 ...

“大数据”可以解决什么样的实际问题

2017-04-11

“大数据”可以解决什么样的实际问题 “大数据”是我们天天挂在嘴边的词儿，但是若要让你说一说大数据可以解决哪些现实生活中的实际问题，可能你的大脑里是一片空白。因此，我们采访了20多位大数据厂商和提供大 ...

想提高数据分析工作效率？有技巧

2017-04-10

想提高数据分析工作效率？有技巧 我刚和一位老友恢复了联系。她一直对数据科学很感兴趣，但10个月前才涉足这一领域——作为一个数据科学家加入了一个组织。我明显感觉到她已经在新的岗位上学到了很多东西。然而 ...

数据分析方法：非正态数据转化成正态数据

2017-04-10

数据分析方法：非正态数据转化成正态数据 大部分的数据分析都希望原始数据是满足正态分布的定距变量。然而，显示是残酷的，在各种研究中，常常需要面对非正态分布的定距数据。为了解决数据的正态性问题，数学家 ...

岭回归分析及其SPSS实现方法

2017-04-05

岭回归分析及其SPSS实现方法 近日有医院的小伙伴问起岭回归分析的SPSS操作，在此与大家一起复习一下。 岭回归分析（RidgeRegression）是一种改良的最小二乘估计方法，它是用于解决在线性回归分析中自变量存 ...

谷歌微软等科技巨头数据科学岗位面试题（108道）

2017-04-05

来自 Glassdoor 的最新数据可以告诉我们各大科技公司最近在招聘面试时最喜欢向候选人提什么问题。首先有一个令人惋惜的结论：根据统计，几乎所有的公司都有着自己的不同风格。由于 Glassdoor 允许匿名提交内容，很 ...

简单易学的机器学习算法—岭回归(Ridge Regression)

2017-03-24

简单易学的机器学习算法—岭回归(Ridge Regression) 一、一般线性回归遇到的问题     在处理复杂的数据的回归问题时，普通的线性回归会遇到一些问题，主要表现在： 预测精度：这里要处理好这样 ...

简单易学的机器学习算法—分类回归树CART

2017-03-22

简单易学的机器学习算法—分类回归树CART 分类回归树（Classification and Regression Tree，CART）是一种典型的决策树算法，CART算法不仅可以应用于分类问题，而且可以用于回归问题。 一、树回归的概念   ...

机器学习-回归模型-欠拟合和过拟合

2017-03-20

机器学习-回归模型-欠拟合和过拟合 1. 什么是欠拟合和过拟合 先看三张图片，这三张图片是线性回归模型 拟合的函数和训练集的关系 第一张图片拟合的函数和训练集误差较大，我们称这种情况为 欠拟合 ...

斯坦福机器学习实现与分析之二（线性回归）

2017-03-15

斯坦福机器学习实现与分析之二（线性回归） 回归问题提出 首先需要明确回归问题的根本目的在于预测。对于某个问题，一般我们不可能测量出每一种情况（工作量太大），故多是测量一组数据，基于此数据去预 ...

大数据时代企业管理面临的挑战及对策

2017-03-14

大数据时代企业管理面临的挑战及对策 随着移动网络、云计算、物联网等新兴技术迅猛发展，全球数据呈爆炸式增长，标志着我们迎来又一伟大时代——大数据时代，它的到来在不知不觉中改变着人们的生活方式和思维方 ...

大数据征信的发展背景及与传统征信的比较

2017-03-12

大数据征信的发展背景及与传统征信的比较 传统征信在方便个人信贷、辅助金融授信决策、防范信用风险和提升金融获得性等方面发挥着关键作用，但其在互联网金融领域的局限性也不容忽视。一是全国还有5亿左右人口 ...

机器学习中特征选择概述

2017-03-11

机器学习中特征选择概述 1. 背景 1.1 问题 在机器学习的实际应用中，特征数量可能较多，其中可能存在不相关的特征，特征之间也可能存在相关性，容易导致如下的后果：  （1） 特征个数越多，分析特征 ...

论大数据的泡沫、价值与应用陷阱

2017-03-11

论大数据的泡沫、价值与应用陷阱 大数据源起：对未来不确定性的恐惧 　　我们所生活的世界，就像一片混沌（chaos），大数据时代，我们周围更是充斥着各种不同的理论、知识、信息和噪音，数据爆炸式增长和科技高 ...

机器学习入门:K-近邻算法

2017-03-11

机器学习入门:K-近邻算法 先来一个简单的例子，我们如何来区分动作类电影与爱情类电影呢？动作片中存在很多的打斗镜头，爱情片中可能更多的是亲吻镜头，所以我们姑且通过这两种镜头的数量来预测这部电影的主题 ...

五大尴尬掣肘大数据

2017-03-08

五大尴尬掣肘大数据 1.预测后不敢用 如果把大数据比作算命显然有点欺负了这位IT新宠，但从目前的大数据分析领域看，在很多行业应用上还存在敢测不敢用的尴尬，预测结果更多是印证而不是代替决策，除了大数据 ...

IBM SPSS Modeler算法系列--决策树CHAID算法

2017-03-06

IBM SPSS Modeler算法系列--决策树CHAID算法 谈到算法，大家都觉得挺神秘的，对没有学过统计学相关知识的朋友来说，太多的数学公式没法理解，很多书籍介绍的也比较表象，看得云里雾里的，那么今天，我们将尝试 ...