数据仓库之门向Hadoop开启

2015-12-27

数据仓库之门向Hadoop开启 在大数据时代，Hadoop分布式处理架构为IT、数据管理以及数据分析团队带来了新生机的同时，也带来了新的挑战。随着Hadoop生态系统的不断发展壮大，企业需要对快速更新换代的技术做 ...

【无线生活(北京)信息技术有限公司】招聘数据分析师

2015-12-26

【无线生活(北京)信息技术有限公司】招聘数据分析师 欢迎来到口袋一家，我们是一家专注于移动电子商务的创业大家庭~我们的家族使命就是做一款最智能的手机购物软件，让人们轻松享受随时随地购物的乐趣~ 职 ...

大数据概念：史上最全大数据解析

2015-12-24

大数据概念：史上最全大数据解析 现如今，我们身边很多人对一些热门的新技术、新趋势往往趋之若鹜却又很难说得透彻，比如大数据，如果被问大数据和你有什么关系，估计很少能说出一二三来。究其原因，一是因为 ...

大数据落地正当时

2015-12-24

大数据落地正当时 当前，大数据技术的发展早已不再停留于概念普及和技术热炒阶段，更多的企业用户密切关注其落地问题，尤其是行业用户，他们更期望大数据能够为行业发展带来较大的助推力、创新力，而好消息是 ...

九个成为数据科学家的必备技能

2015-12-24

九个成为数据科学家的必备技能 Works详细列举了从雇主角度看来，数据科学家加强自身市场竞争力所必备的9个数据科学技能。 过去一年中人们对数据科学的兴趣骤然增长。Nate Silver这个名字已经家喻户晓 ...

sparkSQL是什么，如何理解？

2020-08-11

一、sparkSQL简介 1.sparkSQL定义 sparkSQL是Spark用来处理结构化数据的一个模块，它提供了一个编程抽象叫做DataFrame并且作为分布式SQL查询引擎的作用。 2.sparkSQL来源 要想了解sparkSQL来源， ...

这些基本的维度表技术,你都了解吗？

2020-08-10

上一篇文章给大家分享了一些关于维度表和事实表的内容，今天给大家带来的是关于维度表技术的一些内容，希望对大家有所帮助。 一、维度表结构 1.每个维度表都包含单一的主键列。 2.维度表的主键可以 ...

Hadoop数据倾斜产生的原因是什么？如何进行处理？

2020-07-20

大数据处理时我们经常会遇到数据倾斜的问题，尤其是在数据量过大时，数据倾斜可能会导致各种各样的问题。Hadoop数据倾斜主要表现为：ruduce阶段卡在99.99%，而且是一直99.99%不能结束。 具体来说就是：mapreduc ...

数据分析认证证书，为啥成了香饽饽？百度搜不到的答案来了！

2022-04-03

2020年是特殊的一年，突如其来的疫情，阻断了全球经济高速发展的步伐，很多城市经济陷入低迷。同样，对很多人而言，2020年亦是充满机遇的一年。 古有云：时势造英雄。在遭遇重大危机时，安于现状者无法独善其身 ...

数据分析师的发展方向有哪几方面？

2020-06-30

数据分析行业大火，很多小伙伴都想转行成为数据分析师，入行容易，但重要的需要确定未来的一个发展方向，不能盲目入行。下面小编给大家分享几种数据分析师的发展方向，大家可以参考一下，首先确定好自己的目标。 ...

CDA大数据分析师的报考条件是什么，任何人都可以报考吗？

2020-06-29

“CDA数据分析师认证”是一套专业化，科学化，国际化，系统化的人才考核标准，分为CDA LEVELⅠ ，LEVEL Ⅱ，LEVEL Ⅲ。其中CDA Level II大数据分析师，指政府、金融、电信、零售、互联网、电商、医学等行业专门从 ...

400多项职业资格证被取消，究竟怎样的资格证不容易被取代？

2022-04-03

为减轻各类人才和用人单位的负担，降低社会就业创业的门槛，国务院分7批取消了职业资格许可和认定事项共400多项，涉及专业技术人员职业资格154项，技能人员职业资格280项。 部分取消的名单 连国际金融 ...

从Hadoop到ClickHouse，现代BI系统有哪些问题？如何解决？

2020-06-24

导读：一次机缘巧合，在研究BI产品技术选型的时候，我接触到了ClickHouse，瞬间就被其惊人的性能所折服。这款非Hadoop生态、简单、自成一体的技术组件引起了我极大的好奇。那么ClickHouse好在哪呢?本文带你做一个 ...

CDA数据分析师的考核能力的标准是什么

2020-06-22

CDA(Certified Data Analyst)，亦称“CDA数据分析师”，指在互联网、零售、金融、电信、医疗、旅游等行业专门从事数据的采集、清洗、处理、分析并能制作业务报告、提供决策的新型数据分析人才。“CDA数据分析师认 ...

sparkSQL和spark有什么区别？

2020-05-14

Spark为结构化数据处理引入了一个称为Spark SQL的编程模块。简而言之，sparkSQL是Spark的前身，是在Hadoop发展过程中，为了给熟悉RDBMS但又不理解MapReduce的技术人员提供快速上手的工具。 sparkSQL提供了一 ...

kudu是什么意思？

2020-05-12

Kudu是一个列式存储的用于快速分析的NoSQL数据库，提供了类似SQL的查询语句，与RDBMS十分类似，有**PRIMARY KEY **，基于主键查询而不是HBase的RowKey。 kudu拥有毫秒级延迟 与其他大数据数据库不同，Kud ...

千亿数据优化，如何绕过数据倾斜这头拦路虎？

2020-04-21

作者：dantezhao 前言： 数据倾斜是大数据领域绕不开的拦路虎，当你所需处理的数据量到达了上亿甚至是千亿条的时候，数据倾斜将是横在你面前一道巨大的坎。 迈的过去，将 ...

机器学习入门必读：6种简单实用算法及学习曲线、思维导图

2020-03-26

作者 | 卢誉声 大部分的机器学习算法主要用来解决两类问题——分类问题和回归问题。在本文当中，我们介绍一些简单但经典实用的传统机器学习算法，让大家对机器学习算法有一个基本的感性认识。 ...

当下大数据发展的 8 个要点

2019-11-04

作者 | 章剑锋 笔者从 2008 年开始工作到现在也有 11 个年头了，一路走来都在和数据打交道，做过大数据底层框架内核的开发（Hadoop，Pig，Tez，Spark，Livy），也做过上层大数据应用开发（写 MapRedu ...

一文带你完全了解，什么是数据科学

2019-10-15

作者 | CDA数据分析师 数据科学是一个研究领域，涉及通过使用各种科学方法，算法和过程从大量数据中提取见解。它可以帮助您从原始数据中发现隐藏的模式。 由于数理统计，数据分析和大数据的发展 ...