大道至简的数据体系构建方法论

2018-07-10

大道至简的数据体系构建方法论 由上至下地梳理数据指标体系 1.确定目标 这是第一个应该问自己的问题。花大力气做数据分析，最终为了什么呢？如果这都没想清楚，那数据体系肯定无从下手。 ...

python原始套接字编程示例分享

2018-07-09

python原始套接字编程示例分享 在实验中需要自己构造单独的HTTP数据报文，而使用SOCK_STREAM进行发送数据包，需要进行完整的TCP交互。因此想使用原始套接字进行编程，直接构造数据包，并在IP层进 ...

R实现大文本文件数据过滤的方法

2018-07-09

R实现大文本文件数据过滤的方法 使用R语言过滤文件数据是很普遍的操作，但有时我们会遇到比较大的文件，这类文件无法全部读入内存处理，需要采用分批读取、分批过滤、拼合结果的办法来解决。下面用一个例子来说 ...

在大数据行业工作两年是怎样一种体验

2018-07-04

在大数据行业工作两年是怎样一种体验 写在前面 今年广州的初夏在经历了大雨的洗礼之后，一切都变得更加明朗起来，新的工作，新的人和事。懒惰让我变得更焦虑，焦虑促使我进步，程序员的焦虑大家应该都有共同 ...

听说你立志要做数据分析，不如先听听老司机的建议

2018-06-29

听说你立志要做数据分析，不如先听听老司机的建议 每年总有很多人，怀揣着对世界的一知半解、满腔似火的热情、还有对美好生活的向往，走出象牙塔，投身社会。 世界很大，诱惑很多。对于未来，甚至在工作多年 ...

打造高性能的大数据分析平台

2018-06-25

大数据时代，大数据的应用与挖掘，大数据的分析和决策，大数据在经济社会的运行轨道上发挥着愈来愈重要的作用。对于大数据分析，现在好多互联网金融公司和传统的商业银行、证券基金公司都非常看重。个个都想在 ...

数据挖掘的六大主要功能

2018-06-25

数据挖掘的六大主要功能 数据挖掘的历史虽然较短，但从20世纪90年代以来，它的发展速度很快，加之它是多学科综合的产物，目前还没有一个完整的定义，人们提出了多种数据挖掘的定义，例如：SAS研究所（1997）： ...

R语言数据集行列互换技巧

2018-06-24

R语言数据集行列互换技巧 现在给大家介绍的数据处理技巧是长转宽，也就相当于Excel中的转置，不过用R语言实现的长转宽还有数据合并的功能，自然比Excel强大多了。 这里给大家介绍4个函数，其中melt()、d ...

Python中elasticsearch插入和更新数据的实现方法

2018-06-23

Python中elasticsearch插入和更新数据的实现方法 这篇文章主要介绍了Python中elasticsearch插入和更新数据的实现方法,需要的朋友可以参考下 首先，我的索引结构是酱紫的。 存储以n ...

Excel数据分析，万金油函数是它

2018-06-23

Excel数据分析，万金油函数是它 在职场江湖中，流传着一个Excel菜鸟与非菜鸟的判断标准，就是看他会不会用vlookup函数（请自觉地角色代入~~~）。Vlookup函数的特点是易学好用，而且会上瘾……当然对于我们常做 ...

盘点丨2018 年热门 Python 库丨TOP20

2018-06-20

盘点丨2018 年热门 Python 库丨TOP20 在解决数据科学任务和挑战方面，Python继续处于领先地位。去年，我对当时热门的Python库进行了总结。今年，我在当中加入新的库，重新对2018年热门Python库进行全面盘点。 ...

在Python中使用lambda高效操作列表的教程

2018-06-08

在Python中使用lambda高效操作列表的教程 这篇文章主要介绍了在Python中使用lambda高效操作列表的教程,结合了包括map、filter、reduce、sorted等函数,需要的朋友可以参考下 介绍 lambda Python用于支持 ...

Python编码时应该注意的几个情况

2018-06-06

Python编码时应该注意的几个情况 在编程过程中，多了解语言周边的一些知识，以及一些技巧，可以让你加速成为一个优秀的程序员。 对于Python程序员，你需要注意一下本文所提到的这些事情。你也可以看看Zen of Py ...

python实现对excel进行数据剔除操作实例

2018-06-02

python实现对excel进行数据剔除操作实例 学习Python的过程中，我们会遇到Excel的各种问题。下面这篇文章主要给大家介绍了关于python对excel进行数据剔除操作的相关内容，分享出来供大家参考学习，下面话不多说 ...

一篇文章让你知道什么是大数据挖掘技术

2018-06-02

一篇文章让你知道什么是大数据挖掘技术 大数据如果想要产生价值，对它的处理过程无疑是非常重要的，其中大数据分析和大数据挖掘就是最重要的两部分。在前几期的科普中，小编已经为大家介绍了大数据分析的相关情 ...

维度建模的基本概念及过程

2018-05-27

维度建模的基本概念及过程 与流行的说法不同，RalphKimball本人并没有定义“维度”和“事实”这样的术语。术语“维度”与“事实”，最初是20世纪60年代在一个由GeneralMills与Dartmouth大学主持的联合研究计划 ...

分析Python中解析构建数据知识

2018-05-25

分析Python中解析构建数据知识 Python 可以通过各种库去解析我们常见的数据。其中 csv 文件以纯文本形式存储表格数据，以某字符作为分隔值，通常为逗号；xml 可拓展标记语言，很像超文本标记语言 Html ，但主要 ...

轻松看懂什么是以太坊

2018-05-24

轻松看懂什么是以太坊 虽然\"比特币\"和\"以太坊\"这两个术语常常一起出现，但实际上这两者有很大的区别。以太坊与比特币的唯一联系在于，两者均为成功的区块链技术应用。 以太坊不像比特币仅仅是作为加密货 ...

从哪些方面加速数据库效能

2018-05-24

从哪些方面加速数据库效能 随着近期市场对于非结构化数据的重视，可能会让人忽略在数据库中更常见的结构化数据，其中通常包含着企业运营的核心。数据库处理着一个企业业务运转的各类数据，并且在一些情况下，例 ...

企业大数据工作的任务、工具及挑战

2018-05-13

企业大数据工作的任务、工具及挑战 随着互联网、移动互联网和物联网的广泛而深入地应用，人类活动的踪迹加快在网络空间的映射，网络浏览、行车轨迹、物等等均留下数据记录。 目前，全球数据呈现爆发式 ...