什么是flume?它在大数据处理中起到什么作用？

2020-07-16

Flume 是 Apache 旗下的一款，开源，可靠性高，扩展性高，管理简单，并且能够支持客户扩展的数据采集系统。 Flume 是使用 JRuby 来构建的，因此依赖于 Java 运行环境。Flume 起初是由 Cloudera 的工程师设计出来， ...

关于巡检结果统计分析:flume是主流吗？

2020-05-13

      最近项目需要一个数据收集分析的功能，做了一些调研。我们一起来看看flume是主流吗？ 目前做网络统计的方式有两大类： 1. Page Tagging， 即页面埋点；web端用js，移动 ...

大数据环境下该如何优雅地设计数据分层

2017-06-11

大数据环境下该如何优雅地设计数据分层 最近出现了好几次同样的对话场景： 问：你是做什么的？ 答：最近在搞数据仓库。 问：哦，你是传统行业的吧，我是搞大数据的。 答：...... 发个牢骚，搞大数据的 ...

大数据就是占有数据?错,如何使用更重要!

2017-06-07

大数据就是占有数据?错,如何使用更重要! 发个牢骚，搞大数据的也得建设数据仓库吧。而且不管是传统行业还是现在的互联网公司，都需要对数据仓库有一定的重视，而不是谈一句自己是搞大数据的就很厉害了。数据仓 ...

一文汇总大数据四大方面十五大关键技术

2017-05-01

一文汇总大数据四大方面十五大关键技术 近年来，大数据来势汹汹，渗透到各行各业，带来了一场翻天覆地的变革。让人们越发认识到，比掌握庞大的数据信息更重要的是掌握对含有意义的数据进行专业化处理的技术。 ...

大数据跨界,从这里开始

2017-04-13

大数据跨界,从这里开始 首先，如题，这篇是写给那些从其他领域跨界到大数据领域的朋友的，当然，初入大数据领域，或者对大数据领域有所兴趣的朋友，也可一观。 想起要写这个话题，已经很久了，直到最近私密 ...

关于大数据四大方面的十五大关键技术详解

2016-12-22

关于大数据四大方面的十五大关键技术详解 大数据关键技术涵盖从数据存储、处理、应用等多方面的技术，根据大数据的处理过程，可将其分为大数据采集、大数据预处理、大数据存储及管理、大数据分析及挖掘等环节。 ...

直播丨大数据引领未来 让企业的数据价值最大化

2016-12-05

丨直播简介 大数据时代，企业面临着数据爆炸式增长且多样性裂变的新常态，数据在企业和整个商业世界中发挥的作用和产生的能量都发生了质的变化。与此同时，互联网数据化运营中的用户行为路径分析与网站 ...

一文梳理大数据四大方面十五大关键技术

2016-11-30

一文梳理大数据四大方面十五大关键技术  近年来，大数据来势汹汹，渗透到各行各业，带来了一场翻天覆地的变革。让人们越发认识到，比掌握庞大的数据信息更重要的是掌握对含有意义的数据进行专业化处理的技 ...

【上海瀚正信息科技股份有限公司】招聘数据分析师

2016-07-20

【上海瀚正信息科技股份有限公司】招聘数据分析师 公司具有雄厚的技术资源和市场资源，集软件产品研发、技术服务、产品销售为一体；可为用户提供先进的、具有独立知识产权的软硬件系列产品、行业完整解决方案和专业 ...

【北京启元信息技术有限公司】招聘数据分析师

2016-06-04

【北京启元信息技术有限公司】招聘数据分析师 北京启元信息技术有限公司是专注于ERP项目的咨询、实施、运维服务的专业咨询公司，提供管理咨询服务、专业产品、行业解决方案、企业信息化整体规划解决方案等。公司致力 ...

大数据跨界，从这里开始

2017-12-07

大数据跨界，从这里开始 想起要写这个话题，已经很久了，直到最近私密群建立起来，才发现这个话题应该是更急切需要被讨论一下的。 虽然我对于大数据培训市场一直不算太感冒，但是，如果说对于那些想要跨 ...

数据工作的科普总结

2017-11-28

数据工作的科普总结 首先说，这是一篇关于数据工作的科普文字，是我从事数据工作三年的一个小总结，因为不时会有人咨询我一些小问题，于是我大致整理了一下，主要是说了数据工作到底都包含了什么，其中关于数据 ...

大数据环境下该如何优雅地设计数据分层

2017-11-28

大数据环境下该如何优雅地设计数据分层 发个牢骚，搞大数据的也得建设数据仓库吧。而且不管是传统行业还是现在的互联网公司，都需要对数据仓库有一定的重视，而不是谈一句自己是搞大数据的就很厉害了。数据仓库 ...

【武汉晴蜂科技有限公司】招聘数据分析师

2017-07-03

【武汉晴蜂科技有限公司】招聘数据分析师 武汉晴蜂科技股份有限公司.是一家专业从事网络直播推广服务的科技公司.公司以高科技为起点、以技术为核心、以强大的技术队伍为支撑,致力于为各网络直播平台和主播提供网络推 ...

大数据技术深观察：从具体场景说开去

2016-10-27

这几年，随着大数据技术的日益成熟，越来越多的公司和产品引入大数据技术；同时也有越来越多的大数据技术、框架以及产品被推向市场；目前大数据产品市场已进化到V3.0，产品繁多，数不胜数。 这个现象充分 ...

【易福润德(北京)科技有限公司】招聘数据分析师

2016-06-17

【易福润德(北京)科技有限公司】招聘数据分析师 易福润德（北京）科技有限公司是一家以对日软件外包为主营业务的高新技术企业。公司业务以日本软件受托开发为主。拥有一支掌握国际标准软件开发规范、高素质、团结协 ...

6款大数据采集平台，您值得拥有！

2016-01-28

来源 | 36大数据 随着大数据越来越被重视，数据采集的挑战变的尤为突出。今天为大家介绍几款数据采集平台： Apache Flume Fluentd Logstash Chukwa Scribe Splunk Forwarder 大数据 ...

大数据之安全漫谈

2015-11-01

大数据之安全漫谈 大数据(big data)、数据科学(data science)、数据挖掘(data mining)、机器学习(machine learning)、深度学习(deep learning)、模式识别(pattern recognition)、可视化(visualization)、自 ...

大数据Big Data技术综述_数据分析师

2014-11-24

大数据Big Data技术综述_数据分析师 Big Data是近来的一个技术热点，但从名字就能判断它并不是什么新词。毕竟，大是一个相对概念。历史上，数据库、数据仓库、数据集市等信息管理领域的技术，很大程度上也是为 ...