京公网安备 11010802034615号
经营许可证编号:京B2-20210330
做好大数据在治霾中面临很多挑战
1月31日,由经济参考报牵头,中国工业环保促进会发起,并与新华社等多家媒体联合主办的“治霾在行动”年度论坛暨2014中国治霾典型案例发布会在北京国家会议中心举行。图为国家超级计算天津中心应用研发部部长孟祥飞作主旨发言。
以下为文字实录:
各位朋友大家下午好,在此我对大数据治理雾霾提出一些自己的感受,为治霾提供基础数据工作。我重点在技术方面谈一下对治霾的一些理解。在技术上治霾提供两个方面的支持:一个是雾霾预警预报,再一个就是为治霾决策提供技术支持或者数据支撑。做好大数据在治霾中面临很多挑战。
首先是如何获取大数据。我们原来认识这个世界都是传统的因果论来认识世界,大数据给我们提供一个新的方式,用统计印证这个大数据。在雾霾治理领域,面临最大挑战如何获取完善和高质量这些基础数据的分析,同一个地区内我们要真正进行雾霾决策的分析,需要的数据种类包括,污染源数据,气象、地理、水文这些数据,当地经济发展数据,我们治霾取得什么效果,大众对它的反映,或者我们哪些决策,和舆论导向,这些都是为治霾决策提供支撑,数据来源多种多样。跨出不同的区域要进行数据的整合。第一个就是面临如何获取完整高质量治霾决策的支撑数据。
第二个就是分析处理这块在技术上带来的要求。我们需要对大数据进行基础化。我们并不是大数据拿过来就可以做这个分析,大数据要做分析处理,得到指导性的意义,应该是标准化的数据,进入到这个模型,才能得出结论出来。这是我们面临第二个挑战。
第三个挑战就是来自支撑平台的数据。在构建支撑平台过程当中,我们分区域或者分地方,各自搞各自的,最终还是形成不了有效数据。
我们中国的高端信息技术走在了世界先进的行列,这是国际同行给的结论。在信息技术领域,在治霾领域也要政府有力度,社会有行动,全民有信心,也会取得非常好的效果。我们采用大数据与云计算,超级计算融合技术,然后构建支撑大数据的平台。解决数据多种源,多种格式采集的这些问题,提供多元化的这些服务。对云存储带来的挑战,综合这些技术应该说现在大数据领域已经在基因、政府管理和交通等等各个方面取得显著成效。下一步因为我们有个发改委重点实验室,在大气环境大数据也是我们重点研究方向,希望在公共服务平台,对治霾这方面发挥一些重要作用。公共服务平台有几个典型优势,第一个可以实现公共大数据平台实现资源和数据共享;第二个避免数据孤立;还有一块可以实现政府的管控,建立第三方公信力平台。我们现在在治霾方面的大数据,可能涉及个人隐私社会安全,需要有政府平台来支持,民众需要对这个数据产生信心。第三方公信力的服务平台对治霾决策应该会发挥重要的作用。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
平均数是数据分析、数理统计与日常运算中最基础、最常用的统计量,核心作用是浓缩一组数据的整体水平、刻画数据集中趋势。在众多 ...
2026-08-24在MySQL数据库中,InnoDB存储引擎作为主流事务型引擎,默认事务隔离级别为可重复读(Repeatable Read,RR),这与SQL Server、Or ...
2026-08-24 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-08-24 很多数据分析师画过趋势图、做过业绩预测,但当被问到“这个月销售额增长20%,到底是长期趋势自然增长,还是促销活动的短期 ...
2026-08-21在数据分析与数据可视化工作中,直方图是展示数据分布特征、离散程度、集中区间的核心图表,能够直观呈现数值数据的频次分布规律 ...
2026-08-20在数据分析领域有一句核心准则:垃圾数据进,垃圾数据出。数据清洗是数据分析、数据建模、数据可视化之前的必经前置工序,也是保 ...
2026-08-20 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-08-20在Python数据分析与数据清洗工作中,Pandas是最核心的数据处理库,DataFrame是结构化数据的标准存储格式。在实时数据采集、循环 ...
2026-08-19在零售行业大数据分析与精细化运营领域,纸尿裤旁摆放啤酒是最经典、最具代表性的商业案例。两种看似毫无关联的商品,一个是婴幼 ...
2026-08-19 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-08-19在数据分析、业务监控、质量检测与风险管控工作中,数据波动性是衡量数据稳定性、业务健康度、结果可信度的核心依据。数据波动代 ...
2026-08-18很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当导致 ...
2026-08-18在数据分析、业务评价、产品评级、用户分层与综合决策场景中,单一指标往往无法全面、客观地评价事物整体水平。现实中的评价对象 ...
2026-08-18在数理统计、假设检验、数据分析与机器学习领域中,卡方分布(χ²分布)是继正态分布、t分布之后最重要的连续型概率分布之一。 ...
2026-08-17在Python数据清洗、文本校验、账号密码规则校验、脏数据过滤、字符串规整化处理中,正则表达式是最高效、最常用的文本匹配工具。 ...
2026-08-17 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-08-17手游行业具备用户迭代快、竞争激烈、用户粘性易流失的典型特征。随着新游持续上线、玩家审美升级、玩法疲劳等问题出现,存量用户 ...
2026-08-14在数字化产品运营、商业数据分析、业务增长管理中,零散的指标统计无法支撑系统性的业务决策。单一的点击率、转化率、销量数据只 ...
2026-08-14 很多数据分析师每天都在写SQL,但当被问到“数据查询语言(DQL)的本质是什么”“SELECT语句中各子句的书写顺序与实际执行顺 ...
2026-08-14在数据库数据分析、数据清洗、报表统计与业务查询场景中,日期时间是最高频、最核心的基础字段。数据库中存储的日期格式多样,包 ...
2026-08-13