京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据 及若干问题的讨论_数据分析师考试
1、大数据的发展趋势。Gartner2014年发布了技术成熟度曲线,把一项技术的发展分为:创新的萌芽期,膨胀期望的高峰期,幻灭的低谷期,光阴的爬升期,和生产率的稳定期五个阶段。大数据技术经历了2011年的萌芽期,2012、2013的膨胀期,现在慢慢进入幻灭的低谷期,实际上,2014年大数据炒作的热度开始降温,大数据还有5到10年才会达到稳定期,这样一个判断。
2、大数据、大数据技术的认识误区。数据量大是不是就可以成为大数据呢?这里面有一些认识上的误区。宁波的某个区,花2亿元,在全区装三千多个高清摄像头,每天产生5PB数据,是不是就是大数据?网上也流传过一些段子,比如说卖包子的开店,通过分析人流量进行选址,也叫大数据分析。我们在调研的过程中发现,有些企业把历史的交易数据、财务数据等进行整合、统计分析,然后得出一些曲线图,统计图等。传统数据的统计分析,我们称为具备数据思维。这很好,但还远远不够。一般认为大数据有4个特点,4V,即数据量大、数据类型繁多、高速处理、价值密度低。但我们认为,大数据,一定要有不同类型数据的融合,比如卫生局的数据和人口方面、地理数据等的融合,可以有新的发现,产生新的价值。这才是大数据真正奇妙的地方所在。宁波某区区长直言大数据就是烧钱,没有钱是玩不起的。显然这种认识也是片面的,如果大数据技术只是盲目上设备、大搞建设,却不知价值所在,当然会入不敷出。但大数据真正的价值除了服务民生,还要应用于产业,从而产生经济价值、带来经济效益。
3、数据的开放和共享问题。这里面既包括政府数据,也有企业数据。原来我以为,信息孤岛现象主要存在于政府部门,因为大家各自为政,同时受IBM白皮书的影响(将智慧城市分为:智慧交通、智慧医疗、智慧环保等7个智慧板块),国内各级政府一窝蜂的上项目,因为没有统一的规划和协调,上一个项目便成为一个信息孤岛。但调研过后我们发现,其实政府部门的数据做到内部的互联互通、融合、共享还是比较容易的,比如卫生局可以来协调所有医院的数据,因为有行政的手段可以干预和协调,比如宁波卫生局的大数据应用就是一个很好的案例。而企业的数据共享就比较难,比如腾讯很难把自己的数据共享给阿里,或者中移动。对于一些企业来说,包括中小企业,数据就是命脉,自己可能还没有好好利用,一般是不愿意公开给别人的。所以这个互联互通是很难的。因此在企业界,更容易出现信息孤岛现象。
我们的建议
针对以上两个问题,我们有两点建议:政府数据共享,目前证明,内部开放和共享是可能的,但对企业和公众开放还没有很好的案例。因为也牵扯到涉密的问题。国内某市长就曾直言,我把数据公开了,如果有人挖掘出国家机密,算谁的责任?数据开放没有依据和标准。所以我们的建议是,将数据进行分级,包括密级和轻重缓急,哪些数据可以马上开放、哪些可以逐步开放、哪些不能开放。当然,开放不等于公开,有些数据可以完全公开使用,有些经过申请和审批可以使用等等。
企业数据共享,我们认为,数据既然有价值,就可以作为资产,可以设立数据银行进行交易,企业可以对自己的数据进行存取,租用等。形成数据产业价值链,让企业的数据可以实现增值和共享,这样来方便大家把数据贡献出来,进行流动,融合以及产生更大的价值,当然具体商业模式可能还需要探索,还要解决数据的所有权问题等。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 多表进阶与 DDL/DML 连接 · 子查询 · 合并 · 建表与书写规范 ” 三、DQL 多表进阶:连 ...
2026-11-20 前面讲了怎么搭指标体系,但很多团队卡在最后一步:高层定了一个漂亮的目标,往下一层层写进周报,最后却落不到任何人的具体 ...
2026-11-20 很多团队做数据分析的现状是:老板要一个数就拉一个数,周报里堆满了 GMV、DAU、转化率,却没人说得清这些数之间是什么关系 ...
2026-11-20这周你大概又经历过一次:报表自己跑了,SQL 让 AI 写了,连周报初稿都不用自己动手。你一边松口气,一边心里发慌——那我还剩什 ...
2026-11-20 做产品立项、写商业计划书、规划市场进入策略时,"市场调研"和"竞品分析"几乎总是被绑在一起说,甚至被当成同一件事。但实际 ...
2026-11-19 在做数据治理、搭数据中台或者梳理数据库表结构时,"主数据"和"参考数据"是被提及频率最高、也最容易被混为一谈的两个概念。 ...
2026-11-19“纲举目张,执本末从。”若想在数据分析领域有所收获,一套合适的学习教材至关重要。一套优质且契合需求的学习教材无疑是那关键 ...
2026-11-19一、什么是本体 在知识图谱和语义建模里,本体(Ontology)是对一个领域内概念、属性、关系和实例的形式化描述。它回答三个问题 ...
2026-11-18一、K-S 曲线解决什么问题 风控评分卡、客户流失模型、欺诈识别模型建好之后,最核心的一个问题是:模型能不能把"会变坏"和"不会 ...
2026-11-18核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-18核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-18产品上线之后,真正回答"用户是谁、想要什么、卡在哪里"的,往往不是调研问卷,而是用户留下的一条条行为记录。点击、浏览、停留 ...
2026-11-17在日常数据库开发与报表查询中,日期格式几乎是最高频的"打交道"对象:页面上要展示 yyyy-MM-dd,接口要返回 ISO 8601 字符串, ...
2026-11-17核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-17一、销售行业为什么离不开大数据分析 销售行业的本质是"把合适的产品,在合适的时间,卖给合适的人,并持续复购"。传统销售靠经 ...
2026-11-16一、什么是频数分布 拿到一批连续数据(员工年龄、商品价格、考试分数、订单金额),最想先看的往往不是平均值,而是数据集中在 ...
2026-11-16教育部办公厅关于成立全国数据职业教育教学指导委员会(2026—2030年)的通知 教职成厅函〔2026〕25号 各省、自治区、直辖市教 ...
2026-11-16CDA数据分析师 出品 作者:李诗怡 基础与单表查询 四大类语言 · 数据库基础 · DQL 单表查询 ” 一、SQL 四大类语言与数据 ...
2026-11-13核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-13一、问题从哪来 财务分析里算增长率,常规公式所有人都会写: 增长率本年数上年数上年数 这个公式在"上年为正"时完全成立。但一 ...
2026-11-12