如何通俗地理解Hive的工作原理？

2023-03-23

Hive是一个基于Hadoop的数据仓库工具，可以让用户通过类SQL语言查询和分析大规模的分布式数据集。下面将介绍Hive的工作原理及其通俗易懂的解释。 首先，我们需要了解Hadoop和MapReduce的概念。Hadoop是一个开源的分 ...

HBase 和 Hive 的差别是什么，各自适用在什么场景中？

2023-03-22

HBase和Hive都是在Hadoop生态系统中常用的数据存储和分析工具，它们各自具有独特的特点和适用场景。本文将从以下几个方面探讨HBase和Hive的差别和使用场景。 数据模型 HBase是一种基于列族的NoSQL数据库，它以行为 ...

Hbase是什么？与Hive有哪些区别？

2020-07-14

HbaseE是一个具有高可靠性、高性能特点、面向列、可伸缩的分布式存储系统。利用Hbase技术能够在廉价PC Server上搭建起大规模结构化存储集群。Hbase的目标为：存储并处理大型的数据。更进一步说就是仅需通过普通的 ...

Hive基本介绍及安装应用方法

2020-07-14

Hive是一款基于Hadoop的数据仓库工具，通常被用于数据提取、转化、加载，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive最大的优点是学习成本低， ...

大数据之HiveSQL安装配置！

2020-05-14

hive默认将元数据存储到本地内嵌的Derby数据库中，但是Derby不支持多会话链接，因此我们使用mysql数据库来存储hive的元数据。配置完成hiveSQL的元数据库之后再开始安装、配置hive。 1、在线安装mysql ...

Hadoop+Hive常用知识总结

2017-05-24

Hadoop+Hive常用知识总结 1、什么是Hadoop？什么是hive？ Hadoop：一个分布式系统基础架构，由Apache基金会开发，用户可以在不了解分布式底层细节的情况下，开发分布式程序，充分利用集群的威力告诉运算和存 ...

大数据零基础学习

2022-11-07

虽说人生没有白走的路，新的一年来到，会的还是原来的知识，人的身价就摆在那里，无论怎么折腾，也不会拿到更好的offer。所以在年轻还有拼劲的时候多学学知识，寻找自身的不足，查漏补缺非常重要。今天小编给大家 ...

大数据工程师的必备技能有哪些

2022-11-07

1、大数据平台 目前很火，数据源头，各种炫酷新技术，搭建Hadoop、Hive、Spark、Kylin、Druid、Beam~，前提是你要懂Java，很多平台都是用Java开发的。 目前很多企业都把数据采集下来了，对于传统的业务数据 ...

Hadoop招聘面试常见的问题和答案详解

2022-10-18

Q1.什么是 Hadoop? Hadoop 是一个开源软件框架，用于存储大量数据，并发处理/查询在具有多个商用硬件(即低成本硬件)节点的集群上的那些数据。总之，Hadoop 包括以下内容： HDFS(Hadoop Distributed File Sys ...

数据分析师是做什么的？数据分析师岗位职责介绍

2022-10-09

当今社会对于数据分析的爆炸性需求，对从数据分析中收益的企业来说是美事一桩。数据分析师也变得炙手可热。那数据分析师是做什么的？数据分析师岗位职责又是什么呢？为了帮助您了解数据分析师的日常工作，学掌门为您 ...

常见的数据分析工具

2022-09-19

Step1：Excel学习掌握 所用的工具正是职场中最常用的Excel！ ①重点函数学习 重点是了解各种函数：Vlookup、sum，count，sumif，countif，find，if，left/right，时间日期函数、文本函数 ②数据透视 ...

数据工程的构建技巧

2022-03-30

由解决方案架构师和数据工程师Mohammed M Jubapu撰写 数据工程是当今市场上最受欢迎的工作之一。数据无处不在，被认为是新时代的石油。企业从不同的来源产生大量的数据，数据工程师的任务就是组织数据信 ...

找到你的完美适合：数据世界中的工作角色快速指南

2022-03-30

阿隆·梅-拉兹，副总裁数据与洞察，银行Hapoalim 几个星期前，我带着我的狗出去散步时，偶然发现了我的邻居。她来自统计学背景，她问我在数据世界中的不同角色，试图找出她下一步的职业发展方向。在我 ...

作为文科生，我是如何转行数据挖掘工程师的 | 附电信用户实战案例

2022-02-23

随着大数据的时代的来临，各个行业都受到了数据分析不同程度的影响和作用。尤其是在电信行业，数据分析已经逐渐成为电信运营商的战略优势之一。 大家好，我是一名CDA持证人，今天想跟大家分享一下，我如何 ...

作为一名数据科学家，你的职业生涯有什么期望

2022-02-18

数据科学是一个激动人心的领域。在申请和工作机会方面，它的可能性都在扩大。无论您是否正在考虑进入这个领域，已经有了第一份数据科学工作，或者您已经工作了几年，这里有一个概述，当您希望留在数据科学领 ...

作为文科生，我是如何转行数据挖掘工程师的 | CDA持证人分享

2022-01-19

大家好，今天跟大家带来一个分享，主题是关于我如何从文科生转行为数据挖掘工程师的。 第一部分讲一下我作为文科生转行数据挖掘的历程； 第二部分是关于目前从事数据挖掘，主要针对商业数据挖 ...

十年芳华，逐梦前行 | 记录我的数据科学家成长之路

2021-12-13

作者：Roll 本文为「心中有数」CDA征文作品 小学时， 老师经常问：“你长大以后想当什么？” 我说，我想当一名科学家。 工作后， 领导经常问：“你的职业规划是什么？” ...

《2021中国新兴职位趋势报告》：“数据分析”被高频提起

2021-09-24

近日，领英发布了《2021 年中国新兴职位趋势报告》。今天我们来一起看一下，人力市场的大势。 （文章内容转载自：《2021 年中国新兴职位趋势报告》） 中国是 2020 年全球唯一实现正增长的主要经济体&nbs ...

适合做副业的技能，缺人、高薪、门槛不高，且越老越值钱！

2020-12-02

人力资源和社会保障部发布的《新职业—大数据工程技术人员就业景气现状分析报告》显示：2020年中国大数据行业人才需求规模预计将达210万，未来5年需求仍将保持30%-40%的增速，需求总量在2000万人左右。 大数据 ...

干货 | 你想知道的数据仓库知识，这里都有！

2020-11-19

数据仓库（Data Warehouse）是一个面向主题的（Subject Oriented）、集成的（Integrate）、稳定的（Non-Volatile）、反映历史变化的（Time Variant）数据集合，用于支持管理决 ...