京公网安备 11010802034615号
经营许可证编号:京B2-20210330
医疗大数据分析的“可视化问题
图形一直以来就是统计分析的重要组成部分。它既可被用以辅助数据分析的前期探索(比如发现异常记录,观察变量间的相互关系等),也可以用来展示数据 分析的结果。本篇通过若干实例探讨了如何有效地展示医疗大数据的数据分析结果,即医疗大数据的视觉化问题,并讨论了未来数据可视化发展的可能方向。
俗话说:“一图抵千言”(A picture isworth a thousand words)。 许多复杂的结果往往用一张图就能十分直观地展示出来,让人一看就明白。比如图一显示了2005 至2010年全球非自然死亡的比例分布图。所有的疾病被分为三大类:传染病及先天不足,受伤,以及非传染性疾病,分别用黄,绿,粉红三色代表。它们的体积 反映了各类疾病在所有非自然死亡中所占的比重。由图可见,传染病及先天不足(黄色)所占比重几乎等同于非传染性疾病(粉红色),而传染病这一块完全可以通 过公共卫生方面的努力加以缩小。图中每一大块颜色中同色系的小块代表了具体的疾病。同样的,体积反映所占的比重,而颜色深浅则体现了05年至10年平均年 度变化的百分比,深色表示连年增长,而浅色表示连年下降。增长及下降的平均年度变化百分比没有大于3%的。小小一张图包含了许多信息,却又一目了然,实实 在在地诠释了数据统计上的“一图抵千言”。
图一:
来源:Infographic by Thomas Porostocky | Source: Institutefor Health metrics and evaluation
再以2015年一月热议的《解构春雨医生》的报告为例,有些数字表格如果改作图示,会更加直观,更利于读者快速获取其中蕴含的信息。
表一:
这张表格蕴含了很多信息,包括春雨医生各种类收入,各科室收入,及各科室在各种类收入中所占的构成比例,一眼看去,满目数字,很难快速地获取综合信息。如果使用图示,则可以将表格的内容简单显示如图二:
图二:
根据总收入对各个科室由高到低进行排序,以柱状图的形式分别列出了各科室总收入,私人医生收入,咨询收入,图文咨询收入,电话咨询收入及门诊预 约收入,方便读者进行横向和纵向两个维度的对比。由于各类收入差距过大,无法使用同一尺度,因而在收入的下方标注了各列柱状图的尺度,并在柱子边上标注了 实际收入的数值。这样,纵向对比各科室在每一种收入中所占比重可以直接看柱状的长短,而横向对比各科室不同收入构成时也可以结合尺度和实际数值迅速得出结 论。例如,读者可以很容易发现内科总收入第一,妇产科第二,但是妇产科的咨询收入无论是从绝对数值还是相对比重上都远超内科。图二还用了不同的颜色和深浅 代表不同的收入程度,对较重要的收入(即总收入及综合数值较大的收入)采用了深色,而对综合数值较小的收入采用了浅色。此外,由于咨询收入,图文咨询收 入,电话咨询收入同属咨询收入,采用了同色系(蓝色)显示。
以上两例说明了图示对展示数据的重要性和有效性。随着大数据时代的到来,数据视觉化变得尤为关键,但也同时面临更多的挑战。首先,原始数据往往 含有海量的信息。这些信息经过数据清理(Data cleaning),整合 (Binning),归纳 (Summarizing)之后依然可能十分庞杂,很难用一张或若干张图来显示大数据所蕴藏的信息。因此大数据的视觉化不仅需要专业的知识和经验,更需要 有十足的想像力和美学概念。其次,大数据不单只是数据量本身的庞大,还兼有更新快的特性。每时每刻都有大量的各种数据被制造并收集起来。如何即时分析这些 动态数据并配以相应的动态可视化图形面临着很大挑战。
工欲善其事,必先利其器。我们迫切需要强大而不失灵活机动的,具有强互动性的数据视觉化软件。事实上,美好的前景和客户实际的需求也已经催生出 了许多大数据可视化软件。下面我们简要介绍一下,除了较传统的Excel,R,STATA之类,还有很多相对比较新的软件,如 Tableau,ZingChart,FusionCharts, Google Charts,D3.js,jqPlot,IBM Many Eyes等等,不一而足。新的数据视觉化软件也正源源不断地涌现。这些软件各有特色,各有侧重,但也多有重合。比如几乎所有的软件都提供了常用的统计图 示,如条形图,扇形图,折线图,直方图,散点图,基本地图等等。可以说,现在大数据可视化软件正处于群雄并起,群星璀璨的时期,也没有哪一款软件真正全面 地涵盖了多样的大数据可视化的需求,即:囊括了几乎所有的图形需求并不断更新。
结合实际工作,我们有必要从现在起建立一个大数据可视化图示库,分科分类型搜集每一种图示并辅以实例。可以预见这个数据库必然会在经历一个最初 的急剧膨胀期后缓慢扩大,最终慢慢稳定下来,而且沉淀的东西会非常有价值。美国人口调查局在此提供了一个很好的示范,它提供了各式各样和人口统计相关的可 视化图形,如图三所示。
图三:
我们知道,大数据千变万化,各有特色,分析方法也相应不同,从而需要不同的可视化呈现。很多图形的呈现是取决于具体分析后得出的结果的.比如: 依据不同统计方法 (K-means,bagging, boosting, random Forest) 产生的决策树图形, 生存分析结果产生的生存率曲线(Kaplan-meier curve)。统计学家,数据科学家,数据分析师,市场分析师等活跃在数据可视化第一线的专业人士,在现阶段仍旧需要调用多个不同软件进行复杂的数据分 析,依据分析结果再进行作图。一般每个人都有一个或若干个惯用的软件。如果某个特定图形无法使用常规的数据分析软件生成的话,就不得不切换其他软件加以实 现。随着大数据技术及市场日趋成熟,我们希望有一个整合的环境进行数据管理,数据分析,数据可视化,实现一体化(一条龙)分析,而不是疲于在各种不同软件 系统间频繁的切换,费时费力且效率低下,还不利于他人验证整个数据生成及展示的过程。然而,如今离拥有一个涵盖所有数据管理分析,并同时满足视觉化需求的 软件还很遥远。现阶段比较可行的是建立一个能整合融会大部分数据视觉化编程语言的平台。这样可以让使用者更快更便捷地进行数据管理,数据分析,及数据编程 视觉化。Tableau 在这方面做着初步的尝试,比如开源统计软件R可以整合到Tableau里面,进行有限的数据分析后的图形视觉化处理呈现(图四),虽然过程仍然比较复杂 (具体请见:使用R和Tableau 白皮书http://www.tableau.com/sites/default/files/media/using-r-and-tableau-software_0.pdf)。
图四:
另一在此领域比较成功的例子是BEAKER数据科学家实验室。它提供了一个笔记本式可以切换使用各种编程语言(Python, R, Java, Julia, Ruby等)的工作环境。让使用者在各种语言之间进行切换,或轻松添加新的编程块,确保始终使用对应性最强的工具进行合适的数据分析和可视化的实现。例 如,通过Phyton到R到Java的无缝编程,完成从数据操作到图形可视化的一体实现。如图五所示:
图五:
我们期待,众多可视化软件经过沉淀积累,去芜存菁的过程,伴随一个整合编程语言平台的出现和完善,将使数据管理,分析,可视化操作变得越来越便捷和有效率。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在实验检测、质量控制、科研验证等场景中,“方法验证”是确保检测/分析结果可靠、可复用的核心环节——无论是新开发的检测方法 ...
2026-03-04在数据分析、科研实验、办公统计等场景中,我们常常需要对比两组数据的整体差异——比如两种营销策略的销售额差异、两种实验方案 ...
2026-03-04在数字化转型进入深水区的今天,企业对数据的依赖程度日益加深,而数据治理体系则是企业实现数据规范化、高质量化、价值化的核心 ...
2026-03-04在深度学习,尤其是卷积神经网络(CNN)的实操中,转置卷积(Transposed Convolution)是一个高频应用的操作——它核心用于实现 ...
2026-03-03在日常办公、数据分析、金融理财、科研统计等场景中,我们经常需要计算“平均值”来概括一组数据的整体水平——比如计算月度平均 ...
2026-03-03在数字化转型的浪潮中,数据已成为企业最核心的战略资产,而数据治理则是激活这份资产价值的前提——没有规范、高质量的数据治理 ...
2026-03-03在Excel办公中,数据透视表是汇总、分析繁杂数据的核心工具,我们常常通过它快速得到销售额汇总、人员统计、业绩分析等关键结果 ...
2026-03-02在日常办公和数据分析中,我们常常需要探究两个或多个数据之间的关联关系——比如销售额与广告投入是否正相关、员工出勤率与绩效 ...
2026-03-02在数字化运营中,时间序列数据是CDA(Certified Data Analyst)数据分析师最常接触的数据类型之一——每日的营收、每小时的用户 ...
2026-03-02在日常办公中,数据透视表是Excel、WPS等表格工具中最常用的数据分析利器——它能快速汇总繁杂数据、挖掘数据关联、生成直观报表 ...
2026-02-28有限元法(Finite Element Method, FEM)作为工程数值模拟的核心工具,已广泛应用于机械制造、航空航天、土木工程、生物医学等多 ...
2026-02-28在数字化时代,“以用户为中心”已成为企业运营的核心逻辑,而用户画像则是企业读懂用户、精准服务用户的关键载体。CDA(Certifi ...
2026-02-28在Python面向对象编程(OOP)中,类方法是构建模块化、可复用代码的核心载体,也是实现封装、继承、多态特性的关键工具。无论是 ...
2026-02-27在MySQL数据库优化中,索引是提升查询效率的核心手段—— 面对千万级、亿级数据量,合理创建索引能将查询时间从秒级压缩到毫秒级 ...
2026-02-27在数字化时代,企业积累的海量数据如同散落的珍珠,若缺乏有效的梳理与分类,终将难以发挥实际价值。CDA(Certified Data Analys ...
2026-02-27在问卷调研中,我们常遇到这样的场景:针对同一批调查对象,在不同时间点(如干预前、干预后、随访期)发放相同或相似的问卷,收 ...
2026-02-26在销售管理的实操场景中,“销售机会”是核心抓手—— 从潜在客户接触到最终成交,每一个环节都藏着业绩增长的关键,也暗藏着客 ...
2026-02-26在CDA数据分析师的日常工作中,数据提取、整理、加工是所有分析工作的起点,而“创建表”与“创建视图”,则是数据库操作中最基 ...
2026-02-26在机器学习分析、数据决策的全流程中,“数据质量决定分析价值”早已成为行业共识—— 正如我们此前在运用机器学习进行分析时强 ...
2026-02-25在数字化时代,数据已成为企业决策、行业升级的核心资产,但海量杂乱的原始数据本身不具备价值—— 只有通过科学的分析方法,挖 ...
2026-02-25