京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据时代 这些问题待解决
在网络时代的今天,数据信息是否安全时刻触动着每个人的心弦。有关专家告诉《中国科学报》记者,尽管大数据已使用多年,但在技术监管领域,各环节仍存在诸多技术难点。
数据来源是否可靠待鉴定
据了解,此次大数据安全整治检查中一项重点工作是对合法采集内容与非法采集内容进行分类。其中,对于非法采集信息,将进行集中打击、销毁;对合法、合规采集的信息,则纳入保护监管范围。
浙江大学网络空间安全研究中心主任任奎表示,从网络安全的角度来看,首先,大数据在采集的过程中一方面需要考虑对数据源进行认证,确保数据本身的可靠性,如何在不增加负荷的情况下,特别是针对物联网中计算处理能力相对较弱的设备,实现有效的认证还有待研究。另一方面需要重视隐私保护,如何有效地对数据进行脱敏仍然存在挑战,当前比较热门的方法诸如差分隐私技术仍在积极发展中。
“公民的信息是公民的私有财产,如果不对数据进行溯源来证明数据来源渠道,那么很可能助长非法数据来源的气焰。”上海交通大学计算机科学与工程系教授朱浩瑾说。
中国科学院信息工程研究所DCS中心副研究员王跃武告诉记者,对于大数据而言,关键还是尽量将技术做到更完善,来保证数据分析结果的真实性、可靠性。
提及目前大数据存储环节存在的问题,任奎告诉记者,目前的主要问题是如何在有效保护数据的前提下,完整支持传统的功能,诸如常见的搜索、排序、聚合分析等,当前相关安全技术与明文应用相比,尚存在功能和性能上的差距,有待提高。
“此外,还应该考虑如何进行安全去重等实际需求,从而减轻数据存储的压力,但这与‘备份’这种主动的防灾机制是不同的,相关安全技术在安全与性能的平衡方面仍然需要进一步研究。”任奎补充道。
采访中,针对大数据的存储技术,王跃武与任奎一致认为,从软件层面比较主流的是基于分布式系统的非关系型数据库。
据了解,非关系型数据库的优点主要在于易扩展、高性能等,但是也存在诸如标准化不足、功能支持不够丰富等缺点。常见的分类有键值存储、列存储、文档存储以及图存储。但是,如何权衡实际应用中的需求,比如系统的一致性、可用性以及分区容错性等,并提供定制化的技术,仍有大量工作要做。
如何避免“中间人”的攻击?
任奎表示,数据在网络中进行传输,也需要防止监听、篡改这类传统的“中间人”攻击等,因此端到端加密是很有必要的。但是,端到端加密技术仍然面临很多新型侧信道攻击来窥探隐私的挑战,尤其是最近一些以人工智能方法来展开的侧信道分析工作也说明了这一领域仍然有很多问题需要解决。“除此以外,端对端加密虽然好用,但同时也给网络入侵检测、加密数据防火墙的设计带来更多的挑战,如何安全、高效地支持这类应用还需要进一步研究。”任奎说。
360安全专家刘洋曾在接受记者采访时表示,传统的网络安全思路已经无法保障大数据时代的安全。传统网络安全的防护思路是划分边界,将内网、外网分开,业务网和公众网分离,用终端设备将潜在风险隔离。通过在每个边界设立网关设备和网络流量设备来守住“边界”,以期解决安全问题。但随着移动互联网、云服务的出现,移动终端在4G信号、Wi-Fi信号、电缆之间穿梭,网络边界实际上已经消亡。
大数据销毁并非简单的“删除”“清空”
在朱浩瑾看来,在我国,数据销毁仍是一个不小的问题。他指出,欧盟出台的《通用数据保护条例》中明文规定了用户的“被遗忘权”,即用户个人可以要求责任方删除关于自己的数据记录,而国内的法律无此规定。此外,企业究竟有无对数据进行销毁,在技术上并不好验证。“比如你的手机移动端可以进行一些设置,但是服务器端你怎么知道有没有销毁?”朱浩瑾补充道。
任奎指出,大数据的销毁是实现数据有效管理的必要过程,其过程并非简单的“删除”“清空”,如何保证指定的内容确实被“清除”与“销毁”,除了技术层面的发展,仍需要建立行之有效的规范,例如美国国防部的DoD 5220.22-M规范。
对此,王跃武表达了不同意见。他表示,大数据时代,数据来源是一个由线到面的过程,销毁从本质上来讲是一种消极的做法。“大数据如同金矿,我们尽力从中淘出金子,然后将其保护好,这才是我们该做的。”王跃武说。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在Python Pandas数据分析中,DataFrame是承载结构化数据的核心载体,数据清洗、数据修正、条件赋值、字段更新等实操场景,都离不 ...
2026-09-09 很多数据分析师掌握了Excel函数、会写SQL查询,但当被问到“数据从哪里来”“数据加工有哪些步骤”“如何使用分析工具连接数 ...
2026-09-09卡方检验(Chi-Square Test)是统计学中针对分类数据的经典显著性检验方法,核心用于判断两个离散分类变量是否相互独立、数据实 ...
2026-09-09CDA数据分析师 出品 作者:李诗怡 1. 销售漏斗阶段判断 题目:销售漏斗模型中,通过广告、社交媒体等方式触达品牌信息(如浏览品 ...
2026-09-07在Python数据分析中,Pandas库的DataFrame是最核心、最常用的结构化数据表对象,类似于Excel的二维表格,具备规整的行列结构、字 ...
2026-09-07在数据分析、经营复盘、业绩预测与经济统计工作中,平均增速(平均增长率)是衡量数据长期变化趋势、业务发展快慢的核心指标。不 ...
2026-09-07 很多数据分析师精通Excel单元格操作,但当被问到“表结构数据的基本处理单位是什么”“字段和记录的本质区别”“为什么表结 ...
2026-09-07随着大数据技术的快速发展,商业竞争逐步从传统的经验式经营转变为数据驱动的精细化运营。海量的用户行为数据、交易数据、运营数 ...
2026-09-04CDA数据分析师 出品 作者:李诗怡 1. 波士顿矩阵(BCG Matrix) 定义: BCG于1970年提出的业务组合分析工具,以"市场增长率"(纵 ...
2026-09-04 数据分析师八成以上的时间在和数据表格打交道,但许多人拿到Excel后习惯性地先算、先分析,结果回头发现漏了一列关键数据, ...
2026-09-04数据透视表是Excel与Power BI中最核心的数据分析工具,具备快速汇总、维度拆分、动态筛选的能力,可高效完成数据归类与统计展示 ...
2026-09-03在Power BI数据分析可视化场景中,堆积柱状图+折线图是最常用的复合图表组合。堆积柱状图适合展示各细分维度当期数值、结构占比 ...
2026-09-03 很多数据分析师每天与Excel打交道,但当被问到“表格结构数据的基本处理单位是什么”“数据类型误判会引发哪些分析错误”“ ...
2026-09-03CDA数据分析师 出品 作者:李诗怡 一、8个核心数据清洗函数 1. TRIM:一键清除多余空格(最常用) 作用:仅保留文本中"单词/字 ...
2026-09-02数据分析的核心并非单纯操作工具、整理报表或绘制图表,而是依靠科学的思维逻辑挖掘数据价值、解释业务现象、指导经营决策。在完 ...
2026-09-02在社会经济、产业研究、区域治理与大数据实证分析中,面板数据是最具研究价值的数据类型。面板数据同时包含截面维度与时间维度信 ...
2026-09-02 很多数据分析师能熟练计算均值、标准差,但当被问到“如何用一张图让业务方3秒内看懂核心结论”“面对不同数据类型该怎么选 ...
2026-09-02在数据驱动决策的体系中,数据分析按照分析目的可分为描述性分析、诊断性分析、预测性分析与指导性分析四大类型。其中,诊断性分 ...
2026-09-01网络请求是Python爬虫开发、接口测试、数据拉取的核心基础功能,Python生态中主要依靠 urllib 和 requests 两大库实现HTTP请求操 ...
2026-09-01 很多数据分析师面对业务问题时,常常感到“知道要分析,却不知道用什么方法”。其实,数据分析并非无章可循——从三大基础范 ...
2026-09-01