京公网安备 11010802034615号
经营许可证编号:京B2-20210330
大数据正如何帮助拯救地球_数据分析师
在惠普Vertica分析平台的帮助下,国际保育组织正利用图像处理数据监控世界各地热带森林的生物多样性。
一年多以前,国际保育组织(CI)正全力应付一个庞大的大数据问题。
非营利环保组织的使命是保护自然及其生物多样性,但监测和分析物种的健康——尤其是在热带森林中有地球上一半的动植物——是一个费体力和劳动密集的过程。
在跨越四大洲的16个地方,CI已建立1000个相机陷阱网络——当动物通过其视点区域,装配有运动传感器的摄像头就会被触发。每2000多公里设置一个站点,摄像头捕捉经过的动物的图像,并试图综合和了解气候变化和土地利用对热带陆地哺乳动物和鸟类的多样性的影响。
检查星球的生命体征
“你和我去看医生,我们检查生命体征——提问,血压,” 首席科学家CI桑迪·安德尔曼如此说道,“我们需要那些各种各样的地球生命体征,这就是我们在国际保护组织与TEAM[热带生态,评估和监测网络]和其他项目真正想做的。”
“我们所做的是制作相机陷阱,所以听起来有点像偷拍,”她补充道,“在整个森林里制作这种陷阱,如此我们就能够发现动物种类和动物行为。”
由于相机陷阱位于地球上一些更偏远的地方,那些地方没有基础设施。团队必须手动收集陷阱中的数据并上传,最关键的是CI科学家运行一系列的脚本和模型,以确定出现在图像中的不同品种。然后,他们融合气候测量(降水,温度,湿度,太阳辐射等),关于数目的数据(生长,存活,森林砍伐等等)和来自公开渠道的土地利用数据,去创造一个该区域的动物种群健康典范,并且看它们是如何随时间而变化的。
“世界上的一切都是相互关联的,” CI的热带生态评估和监测网络代理执行主任豪尔赫·阿乌马达说道,“自然不会存活于国家之间,而是作为一个整体而存在。如果我们维持这个世界,并且以一种聪明的方式,我们需要能够评估自己应该如何改进并迅速作出反应。 “
但这个过程并不简单。大约一年前,TEAM每年的能收集到一百万张图像数据。现在的数据已经超过200万。他们在CI办公室用电脑碾碎这些数据,然后手动分布许多工作。分析这些数据的进程可能需要数周,数月甚至更长时间。
“如果我们想运行我们的指标之一的迭代,就得花费几周时间,”阿乌马达说,“我们清楚我们必须根据代码和问题的数据科学来做,但我们没有足够的规模来快速实现。”
阿乌马达指出,时间至关重要。热带森林CI监控器的所在地被认为是地球上所有动植物一半的所在地,能产生地球上40%的氧气。但根据联合国环境规划署称,46万公顷的热带森林 ——约18000平方英里——正在逐年消失。
当陷阱数据仍然必须手动收集时,惠普帮助CI进行快于原来9倍的数据分析,并且能做到更准确地引导。惠普企业服务软件工程师建立了野生动物图片指数(WPI)分析系统,一个可视化人性化的项目仪表盘和分析工具,可近实时数据驱动观察。
WPI的分析系统使用Vertica和R分析软件,运用物种存在-消失数据(通过处理原始相机捕获数据)和“协变量”(气候,林缘和人类存在的数据)去估计某一区域的物种种类。
“说真的,在环境科学,我们没有驾驭大数据的能力,”阿乌马达说,“我们需要一个系统,可以无缝集成到有用的信息上。这就是我们与惠普的合作变得非常重要的原因所在。”
数据可以改变世界
“我们已经学到了很多东西[在过去的25年],”阿乌马达补充道,“作为一个非营利性的环保组织,如果我们真的想尝试改变世界,很多传统的做法是与政府共事,并努力通过各种干预措施影响改变。但是如果你想以数据驱动的方式去做,你真的需要收集大量的数据。对我们来说与有此专长的机构合作伙伴非常重要,现在在非营利世界不同组织这种情况正在出现。“
到目前为止,CI的TEAM和惠普地球洞察分析出的数据不太令人乐观。 275个TEAM监视器,其中的60个(22%)检测到现存物种要么是显著降低要么与基线水平相比有所降低。例如,西方大猩猩——在刚果共和国极度濒危的物种,从2009年的基准线来看似乎已经下降了10%。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
CDA数据分析师 出品 作者:李诗怡 多表进阶与 DDL/DML 连接 · 子查询 · 合并 · 建表与书写规范 ” 三、DQL 多表进阶:连 ...
2026-11-20 前面讲了怎么搭指标体系,但很多团队卡在最后一步:高层定了一个漂亮的目标,往下一层层写进周报,最后却落不到任何人的具体 ...
2026-11-20 很多团队做数据分析的现状是:老板要一个数就拉一个数,周报里堆满了 GMV、DAU、转化率,却没人说得清这些数之间是什么关系 ...
2026-11-20这周你大概又经历过一次:报表自己跑了,SQL 让 AI 写了,连周报初稿都不用自己动手。你一边松口气,一边心里发慌——那我还剩什 ...
2026-11-20 做产品立项、写商业计划书、规划市场进入策略时,"市场调研"和"竞品分析"几乎总是被绑在一起说,甚至被当成同一件事。但实际 ...
2026-11-19 在做数据治理、搭数据中台或者梳理数据库表结构时,"主数据"和"参考数据"是被提及频率最高、也最容易被混为一谈的两个概念。 ...
2026-11-19“纲举目张,执本末从。”若想在数据分析领域有所收获,一套合适的学习教材至关重要。一套优质且契合需求的学习教材无疑是那关键 ...
2026-11-19一、什么是本体 在知识图谱和语义建模里,本体(Ontology)是对一个领域内概念、属性、关系和实例的形式化描述。它回答三个问题 ...
2026-11-18一、K-S 曲线解决什么问题 风控评分卡、客户流失模型、欺诈识别模型建好之后,最核心的一个问题是:模型能不能把"会变坏"和"不会 ...
2026-11-18核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-18核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-18产品上线之后,真正回答"用户是谁、想要什么、卡在哪里"的,往往不是调研问卷,而是用户留下的一条条行为记录。点击、浏览、停留 ...
2026-11-17在日常数据库开发与报表查询中,日期格式几乎是最高频的"打交道"对象:页面上要展示 yyyy-MM-dd,接口要返回 ISO 8601 字符串, ...
2026-11-17核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-17一、销售行业为什么离不开大数据分析 销售行业的本质是"把合适的产品,在合适的时间,卖给合适的人,并持续复购"。传统销售靠经 ...
2026-11-16一、什么是频数分布 拿到一批连续数据(员工年龄、商品价格、考试分数、订单金额),最想先看的往往不是平均值,而是数据集中在 ...
2026-11-16教育部办公厅关于成立全国数据职业教育教学指导委员会(2026—2030年)的通知 教职成厅函〔2026〕25号 各省、自治区、直辖市教 ...
2026-11-16CDA数据分析师 出品 作者:李诗怡 基础与单表查询 四大类语言 · 数据库基础 · DQL 单表查询 ” 一、SQL 四大类语言与数据 ...
2026-11-13核心资源推荐 CDA教材(2025):https://edu.cda.cn/goods/show/3151CDA模拟题(2025):https://edu.cda.cn/goods/show/2845CD ...
2026-11-13一、问题从哪来 财务分析里算增长率,常规公式所有人都会写: 增长率本年数上年数上年数 这个公式在"上年为正"时完全成立。但一 ...
2026-11-12