CDA数据科学研究院 CDA考试中心 CDA人工智能学院 企业服务 关于CDA

cda

全国校区

首页 > 行业图谱 > Hadoop

<font color=Hadoop是什么意思,有哪些作用?" class="wztu">

Hadoop是什么意思,有哪些作用?
2020-07-07
Hadoop是一种分析和处理大数据的软件平台,是Appach的一个用Java语言所实现的开源软件的加框,可编写和运行分布式应用处理大规模数据,是专为离线和大规模数据分析而设计的,对那种对几个记录随机读写的在线事务处 ...

从<font color=Hadoop到ClickHouse,现代BI系统有哪些问题?如何解决?" class="wztu">

Hadoop到ClickHouse,现代BI系统有哪些问题?如何解决?
2020-06-24
导读:一次机缘巧合,在研究BI产品技术选型的时候,我接触到了ClickHouse,瞬间就被其惊人的性能所折服。这款非Hadoop生态、简单、自成一体的技术组件引起了我极大的好奇。那么ClickHouse好在哪呢?本文带你做一个 ...

<font color=Hadoop:伪分布模式环境变量的配置" class="wztu">

Hadoop:伪分布模式环境变量的配置
2020-06-05
单节点集群模式(a Single Node Cluster)又称伪分布模式,只需一个节点即可运行。这种模式一般只是用来学习或者开发、测试使用。实际使用中还是使用多节点的分布式。 1、环境变量配置 为了方便的执行Hadoop ...

<font color=Hadoop:伪分布模式参数配置指南" class="wztu">

Hadoop:伪分布模式参数配置指南
2020-06-04
Hadoop通过改变其配置文件来更改运行模式,我们通过修改如下四个配置文件core-site.xml、hdfs-site.xml、mapred-site.xml和yarn-site.xml即可让Hadoop以伪分布模式运行。 Hadoop的配置文件是 xml 格式,每个配 ...

<font color=Hadoop:集群网络介绍,及相关文件配置指南" class="wztu">

Hadoop:集群网络介绍,及相关文件配置指南
2020-06-05
上篇文章中我们已经将之前配置好的伪分布集群虚拟机复制出来做为master节点的虚拟机,接下来我们还需对该虚拟机做进一步的配置来达到我们的要求。对master虚拟机的配置将从网络、hostname、更改Hadoop相关配置等几 ...

<font color=Hadoop:分布式集群HDFS 、YARN等初次启动!" class="wztu">

Hadoop:分布式集群HDFS 、YARN等初次启动!
2020-06-03
上篇文章中我们通过克隆已有虚拟机并修改相应的参数配置将hadoop分布式集群搭建完成,接下来我们启动Hadoop分布式集群。 1、ssh免密登录 首先打开虚拟机软件VMware然后开启master、slave1、slave2三个虚拟机 ...

<font color=Hadoop:伪分布模式启动步骤分解及HDFS基本操作" class="wztu">

Hadoop:伪分布模式启动步骤分解及HDFS基本操作
2020-06-03
1、格式化HDFS 在运行伪分布式前,需先对NameNode进行格式化,在命令行中输入 hdfs namenode -format          # 格式化hdfs 若出现successfully formatted字 ...

大数据:<font color=Hadoop多节点集群搭建指南" class="wztu">

大数据:Hadoop多节点集群搭建指南
2020-06-04
1、多节点集群架构设计 后续介绍的Hadoop多节点集群由三台计算机构成:一台主节点为master,两台从节点为slave1、slave2。 master节点上主要运行namenode、Resourcemanager 进程;slave节点上运行datanode、 ...

<font color=Hadoop相关:学习工具JDK,在线安装指南" class="wztu">

Hadoop相关:学习工具JDK,在线安装指南
2020-06-01
hadoop是使用Java语言开发的并且Hadoop运行需要有Java环境的支持,因此在安装hadoop之前需要安装Java开发环境即JDK(Java Development Kit)。安装前首先向大家介绍以一下本文会用到的几个词: JAVA_HOME: 一 ...

大数据分析:学习工具<font color=Hadoop,基本安装指导" class="wztu">

大数据分析:学习工具Hadoop,基本安装指导
2020-06-01
Hadoop版本主要分为原生Apache Hadoop版和Hadoop商业发行版两种,而其中商业发行版Hadoop多为原生Apache Hadoop的集群模式下的优化版,除少数社区版外,商业发行版大多需要付费使用,且对于初学者而言使用难度较大 ...

shuffle在Spark及<font color=Hadoop中的作用大吗?" class="wztu">

shuffle在Spark及Hadoop中的作用大吗?
2020-05-13
shuffle是一个能产生奇迹的地方,不管是在 Spark 还是 Hadoop 中,它们的作用都是至关重要的。 在Spark中,一般在执行reduceByKey、groupByKey、sortByKey、countByKey、join、cogroup等操作时 ...

<font color=Hadoop常见问题解答" class="wztu">

Hadoop常见问题解答
2018-07-23
Hadoop常见问题解答 (1)Hadoop适不适用于电子政务?为什么? 电子政务是利用互联网技术实现政府组织结构和工作流程的重组优化,建成一个精简、高效、廉洁、公平的政府运作信息服务平台。因此电子政务 ...

常见的七种<font color=Hadoop和Spark项目案例" class="wztu">

常见的七种Hadoop和Spark项目案例
2018-06-28
常见的七种Hadoop和Spark项目案例 如果你的Hadoop项目将有新的突破,那么它必定与下边介绍的七种常见项目很相像。 有一句古老的格言是这样说的,如果你向某人提供你的全部支持和金融支持去做一些不同的和创 ...

<font color=Hadoop生态上几个技术的关系与区别:hive、pig、hbase 关系与区别" class="wztu">

Hadoop生态上几个技术的关系与区别:hive、pig、hbase 关系与区别
2017-12-19
Hadoop生态上几个技术的关系与区别:hive、pig、hbase 关系与区别 Pig 一种操作hadoop的轻量级脚本语言,最初又雅虎公司推出,不过现在正在走下坡路了。当初雅虎自己慢慢退出pig的维护之后将它开 ...

嫌弃<font color=Hadoop?可能是你的打开方式有问题" class="wztu">

嫌弃Hadoop?可能是你的打开方式有问题
2017-08-14
关于 Hadoop 所谓的消亡,以及它跌落神坛的报道数不胜数。有很多人放马后炮说,Hadoop 从一开始就没有意义。还有人说“Hadoop 对于小型,临时的工作来说很慢”、“ Hadoop 很难”、“ Hadoop 已经死了 ...

除了<font color=Hadoop,其他6个你必须知道的热门大数据技术" class="wztu">

除了Hadoop,其他6个你必须知道的热门大数据技术
2017-06-13
你知道新的市场领导者和曾经的领导者之间的关键区别是什么吗? 那就是“数据管理”。任何无法处理数据并将其投入使用的企业,很可能会让位给那些能够更好处理数据的。 事实上,大数据和其流动性的力量能促使企业发 ...

<font color=Hadoop常见错误和处理方式" class="wztu">

Hadoop常见错误和处理方式
2017-05-28
Hadoop常见错误和处理方式   常见问题及处理 mysql版本,必须是MYSQL5.1。 查询办法mysqladmin version 在建立hive数据库的时候,最好是:create database hive; oozie的数据库,同样:create ...

<font color=Hadoop之HDFS与小文件" class="wztu">

Hadoop之HDFS与小文件
2017-05-24
Hadoop之HDFS与小文件 Hadoop有一个名为“HDFS”的分布式文件系统,它的设计目的是提供一个高容错,且能部署在廉价硬件的分布式系统;它的设计参照了Google的GFS(Google分布式文件系统);它能支持高吞吐量, ...

<font color=Hadoop+Hive常用知识总结" class="wztu">

Hadoop+Hive常用知识总结
2017-05-24
Hadoop+Hive常用知识总结 1、什么是Hadoop?什么是hive? Hadoop:一个分布式系统基础架构,由Apache基金会开发,用户可以在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的威力告诉运算和存 ...

0基础搭建<font color=Hadoop大数据处理-环境" class="wztu">

0基础搭建Hadoop大数据处理-环境
2017-05-21
0基础搭建Hadoop大数据处理-环境 由于Hadoop需要运行在Linux环境中,而且是分布式的,因此个人学习只能装虚拟机,本文都以VMware Workstation为准,安装CentOS7,具体的安装此处不作过多介绍,只作需要用到的知 ...

OK