文本主题模型之潜在语义索引(LSI)

2017-12-22

文本主题模型之潜在语义索引(LSI) 在文本挖掘中，主题模型是比较特殊的一块，它的思想不同于我们常用的机器学习算法，因此这里我们需要专门来总结文本主题模型的算法。本文关注于潜在语义索引算法(LSI)的原理。 ...

数据分析中的缺失值处理

2017-12-01

数据分析中的缺失值处理 没有高质量的数据，就没有高质量的数据挖掘结果，数据值缺失是数据分析中经常遇到的问题之一。当缺失比例很小时，可直接对缺失记录进行舍弃或进行手工处理。但在实际数据中，往往 ...

为什么说大数据一定会从ABC里最先掉队

2017-11-27

为什么说大数据一定会从ABC里最先掉队 人工智能（AI），大数据（big data）和云计算（cloud computing）三大技术被认为是当今互联网争夺的关键点。而三大技术中中争议最多的在于大数据技术，被夸大的 ...

深度学习已成功应用于这三大领域

2017-11-20

深度学习已成功应用于这三大领域 在本章中，我们将介绍如何使用深度学习来解决计算机视觉、语音识别、自然语言处理以及其他商业领域中的应用。首先我们将讨论在许多最重要的AI 应用中所需的大规模神经网络的实 ...

以数据清洗为例,聊聊人工智能的配套服务产业

2017-09-28

以数据清洗为例,聊聊人工智能的配套服务产业 从商业模式来说，人工智能的相关企业有三种：第一种是提供人工智能技术的公司，比如机器视觉、NLP等等；第二种是将人工智能与具体行业应用结合的公司，比如fintech ...

数据精准营销的七个关键要素

2017-08-26

数据精准营销的七个关键要素 说到大数据精准营销，不得不先提个性化的用户画像，我们针对每一类数据实体，进一步分解可落地的数据维度，刻画TA的每一个特征，在聚集起来形成人群画像。 01用户画像 ...

学会数据分析背后的挖掘思维，分析就完成了一半

2017-08-09

学会数据分析背后的挖掘思维，分析就完成了一半 在数据分析中,模型是非常有用和有效的工具和数据分析应用的场景,在建立模型的过程中,数据挖掘很多时候能够起到非常显著的作用。伴随着计算机科学的发展,模型也越 ...

如何利用大数据做金融风控

2017-07-12

如何利用大数据做金融风控 随着金融科技、科技金融等概念的热起，以及互联网金融、无金融服务群体的刚性需求下，大数据风控技术也获得越来越广泛地重视和应用。但是，如何利用大数据、机器学习等前沿技术做金融 ...

R语言中样本平衡的几种方法

2017-06-07

R语言中样本平衡的几种方法 在对不平衡的分类数据集进行建模时，机器学习算法可能并不稳定，其预测结果甚至可能是有偏的，而预测精度此时也变得带有误导性。在不平衡的数据中，任一算法都没法从样本量少的类中 ...

说说什么是数据挖掘

2017-05-13

说说什么是数据挖掘 数据挖掘就是指从数据中获取知识。 好吧，这样的定义方式比较抽象，但这也是业界认可度最高的一种解释了。对于如何开发一个大数据环境下完整的数据挖掘项目，业界至今仍没有统一的规范 ...

【案例】数据挖掘与生活：算法分类和应用

2017-05-06

【案例】数据挖掘与生活：算法分类和应用 本文，主要想简单介绍下数据挖掘中的算法，以及它包含的类型。然后，通过现实中触手可及的、活生生的案例，去诠释它的真实存在。 一、数据挖掘的算法类型 一 ...

数据挖掘的常用方法、功能和一个聚类分析应用案例

2017-05-04

数据挖掘的常用方法、功能和一个聚类分析应用案例 一、数据挖掘的常用方法 利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等，它们分别从不 ...

数据挖掘中的分类问题

2017-05-03

数据挖掘中的分类问题 分类（classification）问题是数据挖掘领域研究的历史最为悠长，也是研究的较为透彻的问题。在数据挖掘领域，分类可以看成是从一个数据集到一组预先定义的、非交叠的类别的映射过程。其中 ...

非常值得收藏的 IBM SPSS Modeler 算法简介

2017-03-08

非常值得收藏的 IBM SPSS Modeler 算法简介 IBM SPSS Modeler 以图形化的界面、简单的拖拽方式来快速构建数据挖掘分析模型著称，它提供了完整的统计挖掘功能，包括来自于统计学、机器学习、人工智能等方面 ...

大数据开启个性化教育新时代

2017-03-05

大数据开启个性化教育新时代 近年来，随着信息技术与教育的深度融合，特别是在线教育的大规模兴起，使教育领域中的大数据获得了更为广阔的应用空间。教育大数据使教育研究从宏观群体走向微观个体，提供精准、个 ...

数据挖掘方法功能和聚类分析案例

2017-03-01

数据挖掘方法功能和聚类分析案例 一、数据挖掘的常用方法 利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等，它们分别从不同的角度对数据进行 ...

用R语言建立学生的学习表现和性格特征数据模型

2017-02-26

用R语言建立学生的学习表现和性格特征数据模型 一、项目介绍： 方法包括以下步骤 S1：将个体表现数据输入到数据库； S2：建立学习者的学习表现数据库和性格特征数据库； S3：建立学习者的学习表现 ...

聚类分析案例之市场细分

2017-02-24

聚类分析案例之市场细分 从实际应用的角度看，聚类分析是数据挖掘的主要任务之一。而且聚类能够作为一个独立的工具获得数据的分布状况，观察每一簇数据的特征，集中对特定的聚簇集合作进一步地分析。 聚 ...

这一年来，数据科学家都用哪些算法

2017-01-31

这一年来，数据科学家都用哪些算法 在“数据为王”的今天，越来越多的人对数据科学产生了兴趣。数据科学家离不开算法的使用，那么，数据科学家最常用的算法，都是哪些呢？ 最近，著名的资料探勘信息网站KDnu ...

大数据行业人士必知十大数据思维原理

2017-01-05

大数据行业人士必知十大数据思维原理 大数据思维原理是什么?简单概括为10项原理，当样本数量足够大时，你会发现其实每个人都是一模一样的。对于“大数据”研究机构Gartner给出了这样的定义。“大数据”是需要新 ...