在大数据行业工作两年是怎样一种体验

2018-07-04

在大数据行业工作两年是怎样一种体验 写在前面 今年广州的初夏在经历了大雨的洗礼之后，一切都变得更加明朗起来，新的工作，新的人和事。懒惰让我变得更焦虑，焦虑促使我进步，程序员的焦虑大家应该都有共同 ...

谈谈数据挖掘的常用方法、功能及其应用实例

2018-06-25

数到数据挖掘，大家肯定会联想到数据分析。数据挖掘与数据分析两者各有交叉，无须区分太明显，但两者侧重点不同，我们一定要根据自身特点来选择数据挖掘培训或数据分析培训。不过说到数据挖掘培训，我们还是要 ...

数据挖掘的六大主要功能

2018-06-25

数据挖掘的六大主要功能 数据挖掘的历史虽然较短，但从20世纪90年代以来，它的发展速度很快，加之它是多学科综合的产物，目前还没有一个完整的定义，人们提出了多种数据挖掘的定义，例如：SAS研究所（1997）： ...

R语言︱决策树族——随机森林算法

2018-06-15

R语言︱决策树族——随机森林算法 一、随机森林理论介绍 1.1 优缺点 优点。 (1)不必担心过度拟合； (2)适用于数据集中存在大量未知特征； (3)能够估计哪个特征在分类中更重要； (4)具有很好的抗噪声能力； (5) ...

机器学习的第一步：先学会这6种常用算法

2018-06-15

机器学习的第一步：先学会这6种常用算法 机器学习领域不乏算法，但众多的算法中什么是最重要的?哪种是最适合您使用的?哪些又是互补的?使用选定资源的最佳顺序是什么?今天笔者就带大家一起来分析一下。 通用 ...

一文搞定数据科学和机器学习的最常见面试题

2018-06-13

一文搞定数据科学和机器学习的最常见面试题 去的几个月中，我参加了一些公司数据科学、机器学习等方向初级岗位的面试。 我面试的这些岗位和数据科学、常规机器学习还有专业的自然语言处理、计算机视觉相关。 ...

一文简述如何使用嵌套交叉验证方法处理时序数据

2018-06-08

一文简述如何使用嵌套交叉验证方法处理时序数据 本文讨论了对时序数据使用传统交叉验证的一些缺陷。具体来说，我们解决了以下问题： 　　在不造成数据泄露的情况下，对时序数据进行分割; 　　在独立测试集上使 ...

机器学习模型可解释的重要及必要性

2018-06-06

机器学习模型可解释的重要及必要性 不管你是管理自己的资金还是客户资金，只要你在做资产管理，每一步的投资决策都意义重大，做技术分析或基本面分析的朋友很清楚地知道每一个决策的细节，但是通过机器学 ...

一篇文章让你知道什么是大数据挖掘技术

2018-06-02

一篇文章让你知道什么是大数据挖掘技术 大数据如果想要产生价值，对它的处理过程无疑是非常重要的，其中大数据分析和大数据挖掘就是最重要的两部分。在前几期的科普中，小编已经为大家介绍了大数据分析的相关情 ...

R语言泊松Poisson回归模型分析案例

2018-05-31

R语言泊松Poisson回归模型分析案例 这个问题涉及马蹄蟹研究的数据。研究中的每只雌性马蹄蟹都有一只雄性螃蟹贴在她的巢穴中。这项研究调查了影响雌蟹是否有其他男性居住在她附近的因素。被认为影响这一点的解释 ...

大数据时代政府治理变革之道

2018-05-27

大数据时代政府治理变革之道 以大数据和大数据处理技术为基础的新信息技术革命的兴起是人类历史上一场新的重大变革。大数据以其独有的特质正逐渐影响着人类的生活方式和思维方式, 影响着经济社会的发展脉象以 ...

python机器学习案例教程—K最近邻算法的实现

2018-05-22

python机器学习案例教程—K最近邻算法的实现 K最近邻属于一种分类算法，他的解释最容易，近朱者赤，近墨者黑，我们想看一个人是什么样的，看他的朋友是什么样的就可以了。当然其他还牵着到，看哪方面和朋友比 ...

一文详解计算机视觉五大技术

2018-05-16

一文详解计算机视觉五大技术 目前，计算机视觉是深度学习领域最热门的研究领域之一。计算机视觉实际上是一个跨领域的交叉学科，包括计算机科学（图形、算法、理论、系统、体系结构），数学（信息检索、机器学习 ...

R语言深度学习不同模型对比分析案例

2018-05-16

R语言深度学习不同模型对比分析案例 深度学习是机器学习最近的一个趋势，模拟高度非线性的数据表示。在过去的几年中，深度学习在各种应用中获得了巨大的发展势头（Wikipedia 2016a）。其中包括图像和语音识别 ...

数据科学家需要掌握的十大统计技术详解

2018-05-15

数据科学家需要掌握的十大统计技术详解 「数据科学家比程序员擅长统计，比统计学家擅长编程。」本文介绍了数据科学家需要掌握的十大统计技术，包括线性回归、分类、重采样、降维、无监督学习等。 不管你对数 ...

Python连接MySQL并使用fetchall()方法过滤特殊字符

2018-05-11

Python连接MySQL并使用fetchall()方法过滤特殊字符 来一个简单的例子，看Python如何操作数据库，相比Java的JDBC来说，确实非常简单，省去了很多复杂的重复工作，只关心数据的获取与操作。 准备工作 需要有相应 ...

资本资产定价模型简介-多因子寻找Alpha&统计套利

2018-05-04

资本资产定价模型简介-多因子寻找Alpha&统计套利 今天简单分享一下现在最为流行的两种量化方法，和量化方法本身需要注意的问题。资本资产定价模型将投资组合的期望收益由两部分组成：alpha收益为投资组合超越市 ...

利用Python进行异常值分析实例代码

2018-04-29

利用Python进行异常值分析实例代码 异常值是指样本中的个别值，也称为离群点，其数值明显偏离其余的观测值。常用检测方法3σ原则和箱型图。其中，3σ原则只适用服从正态分布的数据。在3σ原则下，异常值被定义 ...

数据挖掘的常用方法、功能和一个聚类分析应用案例

2018-04-20

数据挖掘的常用方法、功能和一个聚类分析应用案例 一、数据挖掘的常用方法 利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等，它们分别从不同 ...

一个初级python web后端开发工程师的面试总结

2018-04-18

一个初级python web后端开发工程师的面试总结 先介绍下我的情况：通信背景，工作一年多不到两年。 之前一直在做C++的MFC软件界面开发工作。公司为某不景气的国企研究所。（喏，我的工作经验很水：1是方向不 ...