
大数据分析技术将用于推进文化资源管理_数据分析师培训
近年来,随着互联网、物联网、云计算、三网融合等技术的发展,大数据(Big Data)及其挖掘利用问题,成为了产业界、学术界与政府部门各方面关注的热门话题,并正在从不同方面促进着我们的生活、工作和思维方式的改变。如何加强对具有文化内涵和特征的大数据的利用,也是需要我们,特别是从提高对各类文化资源管理和利用水平的角度,进一步加以关注的问题。
什么是大数据
所谓大数据是指数据量大。但究竟怎样的量才算大,目前并没有统一的定义。一般认为,大数据的数量级至少应该达到“太字节”(Terabyte, TB)以上。因为达到了这个量级以上的数据,利用现有IT技术和软硬件工具将难以实现在可容忍的时间内,对其进行有效的感知、获取、管理、处理和利用,必须要开发新的数据管理和处理软硬件技术,才能满足应用需求。
除了数据量浩大外,大数据还有两个特点,一是模态繁多,包括结构化数据、半结构化数据和非结构化数据;二是生成快速,大数据往往以数据流的形式动态、快速地产生,具有很强的时效性,用户只有把握好对数据流的掌控才能有效利用这些数据,充分挖掘其中的价值。
从战略高度重视文化资源管理
关于文化资源及其管理的内涵,学术界有着不同的认识。按照维基百科的解释,所谓文化资源管理(Cultural Resource Management, CRM)是针对任何与文化相关的资产的管理,主要包括历史的、技术的、社会的、建筑的或科学价值的文化遗产等,也包括当代的、创新的科技与文化资产。
由此可以看出,对于一个国家和民族来讲,文化资源是其文明发展的历史过程中沉积形成的独有资产,具有唯一性和不可扩展性等特点,因此,具有不可估量的文化、经济、社会价值和意义,是代表一个国家文化软实力的核心内容和象征要素,也是各类文化艺术产品创作的基础资料和源泉。所以,我们应该从战略的高度来重视文化资源的管理和保护问题。
用大数据技术推进文化资源管理
仅从数据量大这一特点,可将大数据分为两类,一类是基于互联网、物联网而不断快速、随机产生的大量多形态的数据,可称为非结构化数据或随机大数据;另一类则是按照一定的计划和规则,有意识地采集的大量具有不同形态的数字化信息和数据,可称为结构化数据或有序大数据。从文化资源管理的角度看,这两类大数据都存在,并具有很大的利用价值。
其中一类大数据是由大量的网络搜索、下载、点击、上传等而形成的随机大数据。对这些数据进行挖掘分析的一个基本用途之一,就是对文化消费行为的分析。
通过对不同互联网用户群体的文化消费特点和偏好的分析,将有利于更全面地了解各类文化产品、文化活动的市场需求,更有针对性地开发创作相关内容、形式的文化产品,以满足各类消费者的需要,这对于提高文化产业的生产效率是具有重要意义的。
另一类大数据是有计划地采集的各类历史文化资源数字化信息。对这类数据的有效管理和充分挖掘、利用,或许是大数据及其分析技术更为重要的应用角度和需求。
随着数字化技术在文化资源管理中的应用,各类博物馆、图书馆,以及其他社会组织,都在对各类物质与非物质文化遗产开展数字化保护工作,以便更好地实现对历史文化资源的保护、保存和利用。
这些数字化文化资源信息的不断产生和完善,在客观上为我们建立了一个庞大的、具有大数据特征的数据库和资源库的同时,为我们进一步加强对中华民族的社会、文化发展历史和特点的系统研究,加深对中华文化精髓的认知,辨识“基因”,延续文脉,确定我国文化建设应加强保护、传承、传播的中华文化重点内容,制定国家文化发展战略,提供了前所未有的基础和条件,从而不但可以大大提高我们对于中华文化内涵、特点和历史的研究效率,更有可能实现与得到很多仅依靠传统的研究方法所无法得到的,甚至难以想象的效果和结果。
但由于这些数据资源分散在不同的单位、部门,又没有统一的格式标准,能否在现行体制下,采用技术手段,按照一定的共享共建机制,通过一个实际或虚拟数据交汇中心或平台的构建,整合各类数据资源,并在此基础上,进一步发挥计算机中文信息处理、模式识别、知识挖掘等大数据分析技术的优势,面向各类文化研究、文化艺术创作、文化管理等用户提供更为优质、高效的信息服务,便成为了一个值得文化与科技相关领域共同探讨和推进的任务。
为了实现以上文化资源管理目标,更好地发挥大数据分析技术的优势,促进文化发展,除应鼓励各类文化信息数据拥有部门、企业,结合需求加强对相关软、硬件及应用系统的开发外,通过实施跨部门的“中华文化资源保护与传承促进工程”等方式,在促进相关文化资源数据信息资源建设的同时,促进大数据分析相关先进信息技术的应用,加强对于中华文化的系统研究和传承利用。这对于推动文化体制改革、提升我国文化资源管理与利用水平、加强文化建设、促进文化产业发展、保障文化安全都将具有重要的意义。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在使用 Excel 数据透视表进行多维度数据汇总时,折叠功能是梳理数据层级的核心工具 —— 通过点击 “+/-” 符号可展开明细数据或 ...
2025-09-28在使用 Pandas 处理 CSV、TSV 等文本文件时,“引号” 是最容易引发格式混乱的 “隐形杀手”—— 比如字段中包含逗号(如 “北京 ...
2025-09-28在 CDA(Certified Data Analyst)数据分析师的技能工具箱中,数据查询语言(尤其是 SQL)是最基础、也最核心的 “武器”。无论 ...
2025-09-28Cox 模型时间依赖性检验:原理、方法与实战应用 在生存分析领域,Cox 比例风险模型(Cox Proportional Hazards Model)是分析 “ ...
2025-09-26检测因子类型的影响程度大小:评估标准、实战案例与管控策略 在检测分析领域(如环境监测、食品质量检测、工业产品合规性测试) ...
2025-09-26CDA 数据分析师:以数据库为基石,筑牢数据驱动的 “源头防线” 在数据驱动业务的链条中,“数据从哪里来” 是 CDA(Certified D ...
2025-09-26线性相关点分布的四种基本类型:特征、识别与实战应用 在数据分析与统计学中,“线性相关” 是描述两个数值变量间关联趋势的核心 ...
2025-09-25深度神经网络神经元个数确定指南:从原理到实战的科学路径 在深度神经网络(DNN)的设计中,“神经元个数” 是决定模型性能的关 ...
2025-09-25在企业数字化进程中,不少团队陷入 “指标困境”:仪表盘上堆砌着上百个指标,DAU、转化率、营收等数据实时跳动,却无法回答 “ ...
2025-09-25MySQL 服务器内存碎片:成因、检测与内存持续增长的解决策略 在 MySQL 运维中,“内存持续增长” 是常见且隐蔽的性能隐患 —— ...
2025-09-24人工智能重塑工程质量检测:核心应用、技术路径与实践案例 工程质量检测是保障建筑、市政、交通、水利等基础设施安全的 “最后一 ...
2025-09-24CDA 数据分析师:驾驭通用与场景指标,解锁数据驱动的精准路径 在数据驱动业务的实践中,指标是连接数据与决策的核心载体。但并 ...
2025-09-24在数据驱动的业务迭代中,AB 实验系统(负责验证业务优化效果)与业务系统(负责承载用户交互与核心流程)并非独立存在 —— 前 ...
2025-09-23CDA 业务数据分析:6 步闭环,让数据驱动业务落地 在企业数字化转型中,CDA(Certified Data Analyst)数据分析师的核心价值,并 ...
2025-09-23CDA 数据分析师:以指标为钥,解锁数据驱动价值 在数字化转型的浪潮中,“用数据说话” 已成为企业决策的共识。但数据本身是零散 ...
2025-09-23当 “算法” 成为数据科学、人工智能、业务决策领域的高频词时,一种隐形的认知误区正悄然蔓延 —— 有人将分析结果不佳归咎于 ...
2025-09-22在数据分析、金融计算、工程评估等领域,“平均数” 是描述数据集中趋势最常用的工具之一。但多数人提及 “平均数” 时,默认指 ...
2025-09-22CDA 数据分析师:参数估计助力数据决策的核心力量 在数字化浪潮席卷各行各业的当下,数据已成为驱动业务增长、优化运营效率的核 ...
2025-09-22训练与验证损失骤升:机器学习训练中的异常诊断与解决方案 在机器学习模型训练过程中,“损失曲线” 是反映模型学习状态的核心指 ...
2025-09-19解析 DataHub 与 Kafka:数据生态中两类核心工具的差异与协同 在数字化转型加速的今天,企业对数据的需求已从 “存储” 转向 “ ...
2025-09-19