如何通俗地理解Hive的工作原理？

2023-03-23

Hive是一个基于Hadoop的数据仓库工具，可以让用户通过类SQL语言查询和分析大规模的分布式数据集。下面将介绍Hive的工作原理及其通俗易懂的解释。 首先，我们需要了解Hadoop和MapReduce的概念。Hadoop是一个开源的分 ...

FPGA为什么适合做神经网络的计算加速？

2023-03-23

FPGA（Field Programmable Gate Array）是一种灵活的硬件加速器，与传统的CPU和GPU相比，它可以提供更高效的计算加速。神经网络是一种广泛应用于人工智能领域的技术，其基于大量的矩阵运算和向量乘法来进行计算，这 ...

HBase 和 Hive 的差别是什么，各自适用在什么场景中？

2023-03-22

HBase和Hive都是在Hadoop生态系统中常用的数据存储和分析工具，它们各自具有独特的特点和适用场景。本文将从以下几个方面探讨HBase和Hive的差别和使用场景。 数据模型 HBase是一种基于列族的NoSQL数据库，它以行为 ...

数据挖掘方法大全

2022-10-25

1、数据挖掘的分析方法——决策树法 决策树在解决归类与预测上有着极强的能力，它以法则的方式表达，而这些法则则以一连串的问题表示出来，经由不断询问问题最终能导出所需的结果。典型的决策树顶端是一个树根 ...

Hadoop招聘面试常见的问题和答案详解

2022-10-18

Q1.什么是 Hadoop? Hadoop 是一个开源软件框架，用于存储大量数据，并发处理/查询在具有多个商用硬件(即低成本硬件)节点的集群上的那些数据。总之，Hadoop 包括以下内容： HDFS(Hadoop Distributed File Sys ...

为什么以及如何学习“生产性数据科学”？

2022-02-28

数据科学和机器学习可以以不同程度的效率和生产力进行实践。无论应用领域或专业，数据科学家--初学者或经验丰富的专业人员--都应努力提高他/她在典型数据科学任务的所有方面的效率, 统计分析， ...

数据科学家的武器库（数理统计技术）

2021-09-06

干货 | 你想知道的数据仓库知识，这里都有！

2020-11-19

数据仓库（Data Warehouse）是一个面向主题的（Subject Oriented）、集成的（Integrate）、稳定的（Non-Volatile）、反映历史变化的（Time Variant）数据集合，用于支持管理决 ...

数据库一体机与大数据技术区别何在

2018-08-29

数据库一体机与大数据技术区别何在 作为近期信息管理领域最为热门的两项技术，数据库一体机与大数据技术的硬件架构基本相同，但软件体系有着本质的区别，这也导致了两者拥有不同的特征表现。     ...

云计算和大数据、物联网、AI分别有何关系

2018-08-29

云计算和大数据、物联网、AI分别有何关系 物联网 1、什么是物联网? 物联网在之前被定义为通过射频识别(RFID)、红外线感应器、全球定位系统、激光扫描器、气体感应器等信息传感设备按约定的协议把任何物品 ...

企业构建大数据平台的痛点、思路与解决路径

2018-08-28

企业构建大数据平台的痛点、思路与解决路径 随着大数据技术的到来，企业会问自己：大数据是否是我的业务问题的正确解决方案，或者它是否为我提供了业务机会?大数据中是否隐藏着业务机会? CIO在考虑创建大数 ...

人工智能与机器学习有哪些不同

2018-08-11

人工智能与机器学习有哪些不同 人工智能早已不是一个新名词，它的发展历史已经有几十年。从80年代早期开始，当时计算机科学家设计出可以学习和模仿人类行为的算法。在学习方面，最重要的算法是神经网络，但由于 ...

Spark是什么？用Spark进行数据分析

2018-07-18

Spark是什么？用Spark进行数据分析 1什么是Apache Spark？ Apache Spark是一个为速度和通用目标设计的集群计算平台。 从速度的角度看，Spark从流行的MapReduce模型继承而来，可以更有效地支持多种类型的 ...

大数据的五大神话

2018-07-14

大数据的五大神话 尽管大数据正在被广泛的讨论，目前看来，其仍然是一个很大的谜一样的神话。事实上，围绕大数据的误解似乎已经达到了神话般的境界。如下便是五大神话。    1、大数据仅仅是海量 ...

大数据提供实时分析 积极响应客户互动

2018-06-21

大数据提供实时分析 积极响应客户互动 如果你的企业也和越来越多的企业一样，正在想办法更深入地了解客户和业务，那么你就会明白‘大数据’的重要性了。无论是改善客户服务质量，还是使服务定位更精准，都为实 ...

数据工程师，解救混乱大数据中的数据科学家

2018-06-15

数据工程师，解救混乱大数据中的数据科学家 最近《福布斯》发表了一篇关于对2018“人工智能、大数据和分析”10大预测的文章中指出，数据工程师即将取代数据科学家的角色，成为炙手可热的新一代职位。Gil Press ...

大数据系统计算技术展望

2018-06-06

大数据系统计算技术展望 1  引言 　　大数据是新一代信息技术的核心方面和竞争前沿，也是制约大数据产业快速发展的关键瓶颈。大数据技术创新能力已经成为后信息时代衡量国家竞争力的重要指标。与传统信息 ...

大数据自上而下提升统计和算法的效率

2018-05-25

大数据自上而下提升统计和算法的效率 我们在去开发这些计算体系时，不管是软件、计算，其实都是在谈大数据分析的概念性，什么时候出现问题，我们如何达到高准确度，这只是这个问题的开始。其实作为一个计算科学 ...

解析大数据市场格局

2018-05-24

解析大数据市场格局 随着时间的推移，大数据的能量将逐步引起更多的关注，企业需要相关的分析能力以取得竞争优势进而改善运营效率，而相关的技术以及服务会相继部署，大数据市场规模将大幅壮大，从现在到2017年 ...

部署大数据业务七步走

2018-05-23

部署大数据业务七步走 对于大数据，有三个重要的事实。首先，它并不是新趋势。亚马逊、微软和谷歌自上世纪90年代就开始进行大数据工作。事实上，几十年来，很多公司都一直在挖掘数据。可能由于当时只有资金雄厚 ...