京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据会带来越来越细的标准_数据分析师
我们经常谈大数据,什么是大数据呢?大数据首先它体积非常大,有各种各样的数据,另外还有非常复杂,还包括数据传输的速度。在2000年的时候,我们的因特网的大小规模大概21Tb,用现在的技术,放在四页A4纸上就能储存下来。2012年,这个数据达到了2.1个Zb,如果把地球上所有海滩的沙粒放在一起的话,数量就相当于2.1Zb。
从过去到今天,进步很快,大家都知道生日卡,这种技术在二战时候开始流行。后来我们发明了手机,手机里面有电脑的成分来做这个功能,现在手机的功能比美国宇航局探索月球的时候使用的计算机还要强。现在我们普通的电脑功能比以前强大很多,所以我们现在的计算能力比以前强大了很多。
在中国每天有13万新人用互联网,到2016年,使用互联网的人会越来越多。另外如何使用大数据,会影响到我们思考生活和工作的方式。比如说我们的一些新的技术,新的技术可以收集储存数据,并且把它用在新的用途上进行分析。我们会有新的知识,因为更多的个人行为都可以变成数据。这些数据可以在网上进行交流,可以在大学里面使用因特网进行远程的教育。
大的数据会影响到我们现在解决问题、看待问题和处理信息的能力,另外也会有新的挑战。大数据有一些不完美的地方。如何来将计算和人的本能判断进行均衡?另外你的个人的隐私和信息的安全,从这个方面你要考虑到这些新的挑战。
现在我们经常是生产很多产品,然后把它放到亚马逊或者其它一些网上平台上,如果说你预测做的好的话,你就可以知道如何来最大程度地减少库存。市场有一个需求,你进行设计,进行定制。其次要将商店与你的办公场所结合起来,这样的话每个人都可以很好地进行交流。另外就是营销和投资决定的时候也需要使用数据分析。
我们都需要大数据帮助我们进行研究设计,进行好的生产供应和服务。这也就意味着我们需要对数据进行探索挖掘和分析,这样连结和优化产品价值链,提供适时的信息,更好地进行改建,同时也可以改善工厂的生产质量,增加透明度,在我们的生产销售各个环节进行连结。最终减少待机的时间,减少库存,减少废料。我们产品的质量会更高,并且消费者他们的满意度也会更高。
工业革命是什么意思呢?首先是工厂的自动化,然后使用工艺,工艺制造的更加自动化,更加有效率,然后联网。另外就是使用机器人、物流,还有横向地和纵向地整合。关于机器人,我们可以对它进行更好地控制。这就需要电脑的作用,因为机器人本身不会,我们需要用电脑来控制它们,用电脑让它们去做。另外我们有些老年人在家里,可以有一些智能的方式来帮助他们,比如说他们可以在窗户外面放一个信号,然后机器人就可以发现,根据人的需求来提供必要的服务。
这也就意味着我们需要进行整合,整合也是工业革命的核心。首先是横向的整合,我们需要有这个生命周期的整合。另外有纵向的整合,需要有很高的弹性,对订单的处理能既涵盖生产也涵盖配送。
另外我们谈互联网的时候,以前我们可以有人的互联网,东西的互联网,物联网或者服务联网,我们可以有智能的家庭、智能工厂、智能电网。在将来我们会有智能的因特网,我们把它叫做适时的智能因特网,就是说它能提供适时的信息,这样的话每个时候你就可以把一个工厂跟另外的工厂结合起来,也就是每个工厂都是智能的,而且信息都是适时的,我想这个是我们将来通过因特网可以做到的,我们把它叫做数字化智能因特网.本文来自:http://cda.pinggu.org/
这么多里面有一个关键问题,就是标准化。我在德国的DKE工作,就是一个标准化机构,是负责电气电子产品的标准化,我们希望通过标准化促进工厂的自动化和技术的创新。另外我们所谓制造业的生态系统里面,大数据是非常重要的,因为我们只有处理好了大数据才能够实现转型。所以说我们如何来解决这个问题呢?在解决这个问题的过程当中,标准化会起到关键的作用。
在德国我们就是为工业革命做标准化的路线图。第一步就是我们要对工业革命做一个定义,然后找到现在已经有的一些现成的标准,这些标准是可以被我们所用的。在这个工作做完了之后,我们要有一个新的工业形态的模型,因为这是一个复杂的体系,比如几年之前我们做过一个智能电网,这是一个非常复杂的体系,你要理解它的复杂性,而且要减少它的复杂性,我们就必须改革我们的标准体系。我们要做到,首先要知道什么算是智能电网,在信息方面,在通讯领域,在其他的电厂和变电站,各个领域里面什么是智能,他们是如何组成智能电网的。我们通过研究这些问题,来让我们对智能电网有一个更好地了解。现在我们还没有开发出来相关的标准,但是我们正在做工作。
另外我们还可以为制造业,其它的工业领域也做同样的标准,有些标准已经有了,有些标准还要进一步的来开发。我们要确定,由谁来开发或者制定这些标准,比如说你是由大学来做,还是由第三方来做,以及开发出来标准以后会不会起到促进工业形态的效果。
德国对于电器技术标准工作的兴趣,主要是因为我们希望能够移除标准中各种阻碍性的因素,因为德国毕竟是电子电气产品比较大的出口国,因为我们认为在行业发展过程中,标准化是一个非常重要的工作。
我们有很多在德国内部自己做出来的标准,听起来好像说做本地标准不太可能,其实我们有很多都是本地的标准,但是我们也有不少的标准是国际化的标准。欧洲层面有一些人可能对国际标准不感兴趣,所以在欧洲层面会做一些高标准。德国的本地标准一般比较低,这当然和德国的电力发展的历史有关。
我们经常说要从国际的视角来做标准的工作,我们有一些倡议,中国也有很多的倡议,去执行一些新的技术。比如说中国在机器人方面就有一些新的倡议,我们和中国一起在国际的层面做这些标准的工作。另外我们在这个领域还做一些共同的修订工作。中国现在也在做一些共同修订工作,很多中国的标准现在已经接近于国际标准。我们和中国很多领域都开展了工作,比如说在智能电网这一块,我们和中国国家电网保持着非常好的关系。中国国家电网,主要的技术一般都是用于电力传输的,我们这些正在从中国那里学习经验。德国说2020年会关闭所有的核能电厂电站,所以我们要学习很多。现在欧洲正在使用大数据,使用网络来把更多的可再生能源发到电网上,我们也在这方面开始制定一些标准。
20世纪是一个人移动的世纪,我们发明了那么多交通工具,让我们哪里都可以去。21世纪的重点是物的流动,如果我们抓住了机会,那么这个时机就是一个大数据的时机,是一个工业4.0和物联网的时机。
根据摩尔定律,信息的增长周期是18个月一翻,实际上现在我们看到的情况比这个更加迅速,数据正快速的呈几何级数增长,带动整个IT行业也必须不断的生产更加快速,更大的数据存储设备已及更有效率的数据组织形式,所以大数据行业会越来越容易被人们所感知,在日常的生活中也会越来越重要。
未来,也许我们的信息会越来越透明,因为大数据会无处不在,现在我们已经可以看到,凡是我们在线所做的任何操作,发送的任何信息,实际上都在被不同的平台、公司所搜集,为的都是更全面的勾画出用户的全景,或者用户在某一属性上的全景,更好的帮助到制定用户更加容易接受的产品、服务,或者判断用户的信用情况。
实际上现在已经在某些行业的工厂实现了由数据推动生产的智能制造,工厂的制造辅助系统根据前端市场的数据、用户订单数据及生产设备数据等有效数据来自动的对工厂产能进行调整,对制造设备的制造工艺参数进行调整,以应对用户越来越多的个性化要求,这是一个大的趋势,很多传统制造业也有了这方面的意识,主动的寻求改变,也许在不久的将来,我们在某个网站下的订单或者提出对产品的要求,在下一秒,工厂的设备已经自动的开始生产用户个性需求的产品了。
标准化是智能工厂的一个必要的条件,试想如果某个零件的公差过大,是很难用自动化设备进行装配的,但是智能工厂必须是要做到全自动的生产及物流,所以在智能之前,标准必须先行。
互联网细分出许多垂直行业,行业细分形成后会有一段野蛮成长期,标准化是引导行业发展规范、繁荣的必要手段。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在用户行为分析实践中,很多从业者会陷入一个核心误区:过度关注“当前数据的分析结果”,却忽视了结果的“泛化能力”——即分析 ...
2026-03-13在数字经济时代,用户的每一次点击、浏览、停留、转化,都在传递着真实的需求信号。用户行为分析,本质上是通过收集、整理、挖掘 ...
2026-03-13在金融、零售、互联网等数据密集型行业,量化策略已成为企业挖掘商业价值、提升决策效率、控制经营风险的核心工具。而CDA(Certi ...
2026-03-13在机器学习建模体系中,随机森林作为集成学习的经典算法,凭借高精度、抗过拟合、适配多场景、可解释性强的核心优势,成为分类、 ...
2026-03-12在机器学习建模过程中,“哪些特征对预测结果影响最大?”“如何筛选核心特征、剔除冗余信息?”是从业者最常面临的核心问题。随 ...
2026-03-12在数字化转型深度渗透的今天,企业管理已从“经验驱动”全面转向“数据驱动”,数据思维成为企业高质量发展的核心竞争力,而CDA ...
2026-03-12在数字经济飞速发展的今天,数据分析已从“辅助工具”升级为“核心竞争力”,渗透到商业、科技、民生、金融等各个领域。无论是全 ...
2026-03-11上市公司财务报表是反映企业经营状况、盈利能力、偿债能力的核心数据载体,是投资者决策、研究者分析、从业者复盘的重要依据。16 ...
2026-03-11数字化浪潮下,数据已成为企业生存发展的核心资产,而数据思维,正是CDA(Certified Data Analyst)数据分析师解锁数据价值、赋 ...
2026-03-11线性回归是数据分析中最常用的预测与关联分析方法,广泛应用于销售额预测、风险评估、趋势分析等场景(如前文销售额预测中的多元 ...
2026-03-10在SQL Server安装与配置的实操中,“服务名无效”是最令初学者头疼的高频问题之一。无论是在命令行执行net start启动服务、通过S ...
2026-03-10在数据驱动业务的当下,CDA(Certified Data Analyst)数据分析师的核心价值,不仅在于解读数据,更在于搭建一套科学、可落地的 ...
2026-03-10在企业经营决策中,销售额预测是核心环节之一——无论是库存备货、营销预算制定、产能规划,还是战略布局,都需要基于精准的销售 ...
2026-03-09金融数据分析的核心价值,是通过挖掘数据规律、识别风险、捕捉机会,为投资决策、风险控制、业务优化提供精准支撑——而这一切的 ...
2026-03-09在数据驱动决策的时代,CDA(Certified Data Analyst)数据分析师的核心工作,是通过数据解读业务、支撑决策,而指标与指标体系 ...
2026-03-09在数据处理的全流程中,数据呈现与数据分析是两个紧密关联却截然不同的核心环节。无论是科研数据整理、企业业务复盘,还是日常数 ...
2026-03-06在数据分析、数据预处理场景中,dat文件是一种常见的二进制或文本格式数据文件,广泛应用于科研数据、工程数据、传感器数据等领 ...
2026-03-06在数据驱动决策的时代,CDA(Certified Data Analyst)数据分析师的核心价值,早已超越单纯的数据清洗与统计分析,而是通过数据 ...
2026-03-06在教学管理、培训数据统计、课程体系搭建等场景中,经常需要对课时数据进行排序并实现累加计算——比如,按课程章节排序,累加各 ...
2026-03-05在数据分析场景中,环比是衡量数据短期波动的核心指标——它通过对比“当前周期与上一个相邻周期”的数据,直观反映指标的月度、 ...
2026-03-05