京公网安备 11010802034615号
经营许可证编号:京B2-20210330
工业大数据的收集不能乱来
自从“大数据”、“工业大数据”流行起来,就有一种常见的观点:“先把能收集的数据收集起来再说”。 也就是说,不对数据收集做认真的策划,就急着上系统。在笔者看来,这种做法的问题很大。
问题之一是关联信息容易丢失。比如,产品开发需要很多指标的测试数据,但每个实验室只记录自己的测试数据,却没有把它们串起来。这就好比,测血压的只记录血压指标、测体重的只记录体重指标,但是没有记录血压和体重是哪个人的,两个数据就丢失了关联关系。这样的数据收集再多也无法用来发现规律。
另一个问题是数据质量难以保证。在很多地方,数据收集的目的只是完成某个特定的任务(如管理的需要),对数据质量的要求不高。但是,搞工业数据分析,往往是为了发现质量问题、发现规律,对数据质量的要求就高了。
分析工业过程时,数据质量非常重要。数据质量不仅仅是精度问题,关键数据不能缺失、数据对应关系要准确、数据关联要完整。数据质量不高,就不能有效地描述和分析我们所关心的问题。有些数据不好,就像木桶有了短边,严重影响后面的使用。
但是,提高数据质量是需要成本的。不仅是设备投资,还要加强人工的维护。如果生产现场的条件差,设备维护是相当费劲的,没有大量人力投入是不行的。但是,人力和资金的投入,能带来多少效益,却往往是不确定的。这就让决策者非常为难。
笔者认为:要搞工业大数据,事先一定要做好策划:该收集什么、对数据的要求是什么、哪些数据必须联系起来。还要尽量把价值创造的道理说清楚。这时再推进可能容易一些。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 多表进阶与 DDL/DML 连接 · 子查询 · 合并 · 建表与书写规范 ” 三、DQL 多表进阶:连 ...
2026-11-20 前面讲了怎么搭指标体系,但很多团队卡在最后一步:高层定了一个漂亮的目标,往下一层层写进周报,最后却落不到任何人的具体 ...
2026-11-20 很多团队做数据分析的现状是:老板要一个数就拉一个数,周报里堆满了 GMV、DAU、转化率,却没人说得清这些数之间是什么关系 ...
2026-11-20这周你大概又经历过一次:报表自己跑了,SQL 让 AI 写了,连周报初稿都不用自己动手。你一边松口气,一边心里发慌——那我还剩什 ...
2026-11-20 做产品立项、写商业计划书、规划市场进入策略时,"市场调研"和"竞品分析"几乎总是被绑在一起说,甚至被当成同一件事。但实际 ...
2026-11-19 在做数据治理、搭数据中台或者梳理数据库表结构时,"主数据"和"参考数据"是被提及频率最高、也最容易被混为一谈的两个概念。 ...
2026-11-19“纲举目张,执本末从。”若想在数据分析领域有所收获,一套合适的学习教材至关重要。一套优质且契合需求的学习教材无疑是那关键 ...
2026-11-19一、什么是本体 在知识图谱和语义建模里,本体(Ontology)是对一个领域内概念、属性、关系和实例的形式化描述。它回答三个问题 ...
2026-11-18一、K-S 曲线解决什么问题 风控评分卡、客户流失模型、欺诈识别模型建好之后,最核心的一个问题是:模型能不能把"会变坏"和"不会 ...
2026-11-18核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-18核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-18产品上线之后,真正回答"用户是谁、想要什么、卡在哪里"的,往往不是调研问卷,而是用户留下的一条条行为记录。点击、浏览、停留 ...
2026-11-17在日常数据库开发与报表查询中,日期格式几乎是最高频的"打交道"对象:页面上要展示 yyyy-MM-dd,接口要返回 ISO 8601 字符串, ...
2026-11-17核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-17一、销售行业为什么离不开大数据分析 销售行业的本质是"把合适的产品,在合适的时间,卖给合适的人,并持续复购"。传统销售靠经 ...
2026-11-16一、什么是频数分布 拿到一批连续数据(员工年龄、商品价格、考试分数、订单金额),最想先看的往往不是平均值,而是数据集中在 ...
2026-11-16教育部办公厅关于成立全国数据职业教育教学指导委员会(2026—2030年)的通知 教职成厅函〔2026〕25号 各省、自治区、直辖市教 ...
2026-11-16CDA数据分析师 出品 作者:李诗怡 基础与单表查询 四大类语言 · 数据库基础 · DQL 单表查询 ” 一、SQL 四大类语言与数据 ...
2026-11-13核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-13一、问题从哪来 财务分析里算增长率,常规公式所有人都会写: 增长率本年数上年数上年数 这个公式在"上年为正"时完全成立。但一 ...
2026-11-12