
作者 | CDA数据分析师
在过去的五年中,我们已经与医疗保健和制药业的许多领导者进行了交谈,而对于AI而言,医疗保健和制药业领导者报告的最紧迫的挑战是他们不确定如何简化和构建数据结构。一种让他们建立机器学习模型的方式。医疗保健公司陷入了其潜在的AI计划的数据整合阶段,而一个又一个的供应商试图将其出售给该公司可能还没有准备就绪的新应用程序。
人工智能和机器学习项目可能需要几个月的时间才能启动。如果有的话,许多制药公司在发布AI产品后半年或更长的时间内就不会看到投资回报率。因此,对于制药公司而言,重要的是清理并存储其数据,以使其“可机读”,并随时准备将其输入到机器学习算法中。无论公司内部生产还是从AI供应商处购买产品,这都可能为他们节省时间和金钱(甚至数千美元)。
腾讯医疗大数据实验室主任Chenzhig Chen在接受我们的采访时说,在医疗行业应用机器学习时处理数据(并将其数字化)的重要性:
如果您查看该行业,你会发现数据还不存在,数字化还没有准备好。因此,对于AI来说,要使真正的大数据真正腾飞,这个基础必须要有所准备。在大数据领域,我们通常会说您80%的时间或研究花费在数据上,然后20%的时间实际上在模型,算法上。
没有数据和数字化的基础,这很难,或者几乎不可能从中获得真正的模型……如果没有数字化,而没有整个过程在线和数字化,您将如何实现或将如何实现?人工智能带回企业的价值?
在此报告中,我们讨论了制药公司如何能够汇总和清除其大量数据,以便它们可以利用它来解决业务问题并通过AI改善运营,包括:
我们从数据集中开始我们的报告。
数据集中化
制药公司的结构化大数据可能存储在某种数据仓库中。制药公司还可以在许多地方存储非结构化数据,本质上是本质上不是机器可读的数据,例如匿名电子病历(EMR)记录和医学扫描数据库。许多软件供应商提供服务来帮助制药公司以一种允许将其馈送到机器学习算法的方式来理解其所有传入数据流。通常,进入制药行业的公司似乎也提供API或类似的集成,从而允许客户在云或公司计算机上运行机器学习模型。
提供大数据集中化解决方案的供应商通常也在AI和数据分析市场中。他们倾向于提供与数据集中化分开的数据分析解决方案(例如预测分析),但是某些产品可能包括两者。在制药行业中,这些供应商最常要求解决的业务问题是临床试验优化和药物发现。
向药品公司提供数据集中化解决方案的一家供应商是GrayMatter。他们还提供了一个平台,用户可以在该平台上可视化商业智能分析。GrayMatter没有提供任何案例研究来显示制药公司通过其软件获得的成功, 但该公司将辉瑞和Strides Arcolab列为过去的客户。我们选择在此报告中讨论GrayMatter,因为他们的团队似乎很有可能具有AI和机器学习方面的经验,这对于希望使用GrayMatter解决方案来集中其数据以供机器学习使用的制药公司来说是个好兆头。
例如,在GrayMatter平台上集中和结构化数据可能有助于制药公司更有效地分析匿名的EMR记录,从而缩小可能的患者范围,以进行临床试验。
诸如此类的数据集成咨询和服务适用于需要集中其数据以便为他们可能要使用的任何类型的AI解决方案做好准备的公司。在下一部分中,我们将讨论制药公司大数据的预处理以及如何为特定的机器学习用例准备数据。
数据预处理
在将所有必要数据集中之后,制药公司可能需要准备某些数据集以用于AI和机器学习计划。制药公司的非结构化数据可能包括药物分子成像或EMR数据。例如,此类数据需要先进行标记,然后再输入到深度学习算法中,以寻求“学习”以对未标记图像进行分类或填写空白EMR表单。
对于来自MRI或高级显微镜的成像数据,必须根据机器学习模型要检测的对象和实体对每个图像进行电子标记。例如,将需要训练显微血液成像软件以辨别不同类型的血细胞以及每个图像中存在多少个血细胞。还可以训练用于血液成像的机器学习模型,以检测血液中某些药物或治疗的不良反应和不良反应。
EMR数据通常由医师书写或指示。记录包括有关患者及其患病经历的详细信息,以及这些疾病的过去用药和治疗方法以及患者对这些疾病的反应方式。定位与临床试验资格相关的患者信息的自然语言处理应用程序是目前制药业AI的重要解决方案之一。
如果公司想要构建或购买自然语言处理应用程序以筛选IDC-10代码的匿名EMR记录,以查找可能适合临床试验的患者,则EMR记录需要标记为包含特定IDC-例如10个代码或其他代码。BioSymetrics是一家提供数据组织和标签,清洁以及来自不同来源的生物医学和医疗数据分析的供应商。他们的Augusta应用程序使用机器学习来加快在诸如药物发现,临床试验优化和精密医学等业务领域中部署AI应用程序的过程。
据称,BioSymetrics的SymetryML机器学习引擎可以评估原始数据的必要处理方法,以便在进一步的机器学习开发和AI应用中使用。可以将原始数据格式化为图像,基因组统计数据,流数据和观察到的化合物。
SymetryML可以处理来自MRI和fMRI的医学成像数据。它还可以处理来自EKG的数字数据,遗传学,蛋白质组学和来自FitBit或智能手表等可穿戴设备的IoT数据。机器学习模型还能够处理EMR格式的信息,从而使其能够组合来自各种非结构化来源的数据以开发更好的产品和处理方法。
将化合物数字化表示为数据时,将用字母数字字符串表示该文本,可以将其保存以备将来识别并用于机器学习模型训练。这些文本链是通过数学公式找到的,该数学公式可以拍摄分子的图像和图形表示并将其转变为唯一的代码行。这些代码被称为IUPAC化学标识符(IChIs)。
图:脑部扫描显示受基因变异影响的区域
BioSymetrics在其网站上没有任何演示或案例研究,但提供了有关其软件如何帮助制药和生命科学公司的示例。这些例子之一突出了奥古斯塔(Augusta)如何在12分钟内分析155名患者中与某种疾病相关的120万患者变异。然后,该公司能够比较其遗传变异的医学图像属性。 图2突出显示了大脑的不同区域,这些区域受个体是否具有遗传变异的影响更大。
图:由Biosymetrics提供的具有和不具有基因变异的患者的比较
该示例指出,在分析中发现其中一种遗传变异与自闭症有显着关联。然后,该公司据称可以根据大脑各个区域内的偏差,确定与给定疾病相关的不同病症之间的差异,以及谁拥有和没有该变异。
药品营销大数据
大数据在制药行业中发挥特别重要作用的领域是向医疗保健网络,零售商和客户销售其产品和治疗方法。开展新的营销活动,跟踪ROI和销售统计数据以及管理销售团队,都是可以利用利用大数据的AI解决方案解决的所有业务问题。
与药品营销中的数据科学计划最相关的数据源如下:
这些不同类型的数据可能需要使用大型数据存储设备以及可能的机器学习解决方案(例如GrayMatter的解决方案)进行集中化。另外,可能需要对来自过去营销活动的书面信息和历史市场状况信息进行预处理,以便机器学习模型能够识别它。尚不清楚以前提到的BioSymetrics解决方案是否能够处理这些特定类型的营销数据。
Complexica是一家澳大利亚软件供应商,提供称为Larry the Digital Analyst的预测分析解决方案。据称该软件能够为销售率,市场投资和市场状况(例如季节性需求的上升和下降)创建预测模型。还要进行广告宣传,以根据区域的大小,将哪些销售代表分配给哪个区域以及每个区域的地理位置来优化销售区域映射。
图:Larry,数字分析师的价值主张
数字分析师Larry充当Complexica的AI平台,因为它是他们每个商业智能解决方案的AI部分。左图详细说明了Complexica软件解决方案中的哪些软件利用了数字分析师Larry背后的机器学习模型。尚不清楚Complexica的电子商务推荐引擎产品是否也利用了实际的AI推荐引擎,该引擎需要与数字分析师Larry的预测分析能力分开存在。
尽管该公司没有任何案例研究,但他们与辉瑞公司合作以帮助他们对销售,营销投资和营销条件进行建模,在AI领域引起了极大关注。辉瑞选择了Complexica的假设仿真器和优化器作为他们的分析解决方案,这使他们能够利用其营销和销售数据来告知他们的业务决策。
显然,制药公司拥有的大数据存储可用于开发有用的机器学习模型,以改善制药业务运营。尽管营销是利用企业数据的最清晰的业务领域,但制药公司也可以将其精细的医学数据用于临床试验和药物发现。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在 “神经网络与卡尔曼滤波融合” 的理论基础上,Python 凭借其丰富的科学计算库(NumPy、FilterPy)、深度学习框架(PyTorch、T ...
2025-10-23在工业控制、自动驾驶、机器人导航、气象预测等领域,“状态估计” 是核心任务 —— 即从含噪声的观测数据中,精准推断系统的真 ...
2025-10-23在数据分析全流程中,“数据清洗” 恰似烹饪前的食材处理:若食材(数据)腐烂变质、混杂异物(脏数据),即便拥有精湛的烹饪技 ...
2025-10-23在人工智能领域,“大模型” 已成为近年来的热点标签:从参数超 1750 亿的 GPT-3,到万亿级参数的 PaLM,再到多模态大模型 GPT-4 ...
2025-10-22在 MySQL 数据库的日常运维与开发中,“更新数据是否会影响读数据” 是一个高频疑问。这个问题的答案并非简单的 “是” 或 “否 ...
2025-10-22在企业数据分析中,“数据孤岛” 是制约分析深度的核心瓶颈 —— 用户数据散落在注册系统、APP 日志、客服记录中,订单数据分散 ...
2025-10-22在神经网络设计中,“隐藏层个数” 是决定模型能力的关键参数 —— 太少会导致 “欠拟合”(模型无法捕捉复杂数据规律,如用单隐 ...
2025-10-21在特征工程流程中,“单变量筛选” 是承上启下的关键步骤 —— 它通过分析单个特征与目标变量的关联强度,剔除无意义、冗余的特 ...
2025-10-21在数据分析全流程中,“数据读取” 常被误解为 “简单的文件打开”—— 双击 Excel、执行基础 SQL 查询即可完成。但对 CDA(Cert ...
2025-10-21在实际业务数据分析中,我们遇到的大多数数据并非理想的正态分布 —— 电商平台的用户消费金额(少数用户单次消费上万元,多数集 ...
2025-10-20在数字化交互中,用户的每一次操作 —— 从电商平台的 “浏览商品→加入购物车→查看评价→放弃下单”,到内容 APP 的 “点击短 ...
2025-10-20在数据分析的全流程中,“数据采集” 是最基础也最关键的环节 —— 如同烹饪前需备好新鲜食材,若采集的数据不完整、不准确或不 ...
2025-10-20在数据成为新时代“石油”的今天,几乎每个职场人都在焦虑: “为什么别人能用数据驱动决策、升职加薪,而我面对Excel表格却无从 ...
2025-10-18数据清洗是 “数据价值挖掘的前置关卡”—— 其核心目标是 “去除噪声、修正错误、规范格式”,但前提是不破坏数据的真实业务含 ...
2025-10-17在数据汇总分析中,透视表凭借灵活的字段重组能力成为核心工具,但原始透视表仅能呈现数值结果,缺乏对数据背景、异常原因或业务 ...
2025-10-17在企业管理中,“凭经验定策略” 的传统模式正逐渐失效 —— 金融机构靠 “研究员主观判断” 选股可能错失收益,电商靠 “运营拍 ...
2025-10-17在数据库日常操作中,INSERT INTO SELECT是实现 “批量数据迁移” 的核心 SQL 语句 —— 它能直接将一个表(或查询结果集)的数 ...
2025-10-16在机器学习建模中,“参数” 是决定模型效果的关键变量 —— 无论是线性回归的系数、随机森林的树深度,还是神经网络的权重,这 ...
2025-10-16在数字化浪潮中,“数据” 已从 “辅助决策的工具” 升级为 “驱动业务的核心资产”—— 电商平台靠用户行为数据优化推荐算法, ...
2025-10-16在大模型从实验室走向生产环境的过程中,“稳定性” 是决定其能否实用的关键 —— 一个在单轮测试中表现优异的模型,若在高并发 ...
2025-10-15