经典算法题:大数据处理常见算法题 第一部分、十道海量数据处理 1、海量日志数据,提取出某日访问百度次数最多的那个IP。 此题,在我之前的一篇文章算法里头有所提到,当时给出的方案是:IP的数目还 ...
2017-12-25
从大数据到认知计算,未来需要更强的计算能力 认知计算是IBM提出的概念,认为“认知计算”是通过与人的自然语言交流及不断地学习,从而帮助人们做到更多的系统,是从硬件架构到算法策略、从程序设计到行业专长 ...
2017-12-25
大数据时代,个人信息如何保护 随着大数据应用领域不断涌现新风口,数据合规话题讨论迅速升温。在日前举行的“2017大数据合作与合规峰会”上,中国社会科学院法学研究所所长陈甦表示,互联网、大数据、人工智能 ...
2017-12-25Python中shutil模块的常用文件操作函数用法示例 shutil模块提供比OS模块更强大的本地文件操作功能,包括文件的压缩和解压缩等,下面我们就来列举Python中shutil模块的常用文件操作函数用法示例: os模块提供了 ...
2017-12-25
如何防范人工智能、大数据、区块链、云计算的技术风险 众所周知,人工智能、大数据、区块链、云计算这四项技术是Techfin市场中的顶梁柱。近日京东金融研究院发布了《2017金融科技报告——行业发展与法律前沿》( ...
2017-12-25Python实现多行注释的另类方法 这篇文章主要介绍了Python实现多行注释的另类方法,本文使用的是Python多行文本功能来另类的实现Python的多行注释,需要的朋友可以参考下 Python程序的注释感觉很不合群,对于习 ...
2017-12-25大数据:算得出数字,算不出人性 信息时代,没有人能逃脱数字的包围,我们的日常活动情况都被数字化的信息形式记录下来,就连手机里的好友都拦不住大数据无形的手。最近微信新增了删除“不常联系好友”功能—— ...
2017-12-25
数据显示,在2016届本科毕业生从事的职业类中,“互联网开发及应用”职业类月收入最高,毕业半年后平均月收入为5679元。 什么职业时下社会需求量较大?2017年就业蓝皮书数据显示:20 ...
2017-12-24【北京银信长远科技股份有限公司】招聘数据分析师 北京银信长远科技股份有限公司(简称银信科技)是一家全国性、专业化的IT运维服务整体解决方案提供商,主要面向各行业数据中心的IT基础设施,提供IT支持与维护服务 ...
2017-12-24【北京信博维诺科技有限公司】招聘数据分析师 北京信博维诺科技有限公司(简称:信博维诺),成立于2017年,是一家为用户提供个人消费金融服务的互联网金融科技公司。运用移动互联网和大数据风控技术帮助信用记录缺 ...
2017-12-24【恒安嘉新(北京)科技有限公司】招聘数据分析师 恒安嘉新(北京)科技有限公司(下称“恒安嘉新”)成立于2008年8月,注册资本7315万元,是国内领先的网络与信息安全整体解决方案提供商。公司属于国家级高新技术企业 ...
2017-12-24
大数据和AI怎么与现代教育相结合? 比尔·盖茨曾预言,“5年以后,你将可以在网上免费获取世界上最好的课程,而且这些课程比任何一个单独大学提供的课程都要好。” 现在看来,虽然并不是每个网上课程都 ...
2017-12-24
大图数据科学: 图数据中的推理 我们正淹没在大数据的河流里,大数据并非是平的,而是多模态、多关系、兼具时空、多媒体的。目前的AI技术,特别是机器学习,它将丰富复杂数据平放到矩阵的形式当中。我们当下所 ...
2017-12-24
你的公司是否真的需要大数据战略 随着越来越多的人谈到大数据,首席信息官们也被资深管理层问到:“我们的大数据策略是什么?”但是你们真的需要大数据策略吗? 我们的认为,企业应该重视数据统治和数据管 ...
2017-12-24
python基础教程之元组操作使用详解 这篇文章主要介绍了python的元组操作使用方法,需要的朋友可以参考下 简介 tuple 1.元组是以圆括号“()”包围的数据集合,不同成员以“,”分隔。通过下标进行访 ...
2017-12-24
数据分析第一步 | 做好数据埋点 做产品的同学在产品上线后经常离不开一个词,数据分析。那么要如何进行数据分析呢?不妨先问自己这么几个问题。 你要分析什么问题?是找问题还是验证? 关于这些问 ...
2017-12-24数据分析工作的思考与总结 1.什么是数据分析? 基于现有的业务知识和统计学基础知识及基本思想的理解与掌握,通过数据库及统计分析工具对数据的调取与处理、分析,达到对现有问题or主题的探索与剖析,最终 ...
2017-12-24数据挖掘进行数据分析常用的方法 利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等, 它们分别从不同的角度对数据进行挖掘。 ① 分类。分类是找 ...
2017-12-24
数据科学家也可能被人工智能取代 由于人工智能取代人类活动的争论越来越激烈,数据科学家开始体验人工智能辅助自动化的好处和风险。 人们开始对人工智能被用来自动化一切事物的前景感到不安。现在人工智能已 ...
2017-12-24
2018年大数据的五个发展趋势 如今,数据是已成为组织最大的资产之一,而随着2018年的到来,数据对组织的重要性将日益增长。 数字化变化的速度如此之快,以至于人们难以准确预测2018年的趋势。然而,可以肯定 ...
2017-12-24在回归分析的结果解读中,R方(决定系数)是衡量模型拟合效果的核心指标——它代表因变量的变异中能被自变量解释的比例,取值通 ...
2025-12-04在城市规划、物流配送、文旅分析等场景中,经纬度热力图是解读空间数据的核心工具——它能将零散的GPS坐标(如外卖订单地址、景 ...
2025-12-04在CDA(Certified Data Analyst)数据分析师的指标体系中,“通用指标”与“场景指标”并非相互割裂的两个部分,而是支撑业务分 ...
2025-12-04每到“双十一”,电商平台的销售额会迎来爆发式增长;每逢冬季,北方的天然气消耗量会显著上升;每月的10号左右,工资发放会带动 ...
2025-12-03随着数字化转型的深入,企业面临的数据量呈指数级增长——电商的用户行为日志、物联网的传感器数据、社交平台的图文视频等,这些 ...
2025-12-03在CDA(Certified Data Analyst)数据分析师的工作体系中,“指标”是贯穿始终的核心载体——从“销售额环比增长15%”的业务结论 ...
2025-12-03在神经网络训练中,损失函数的数值变化常被视为模型训练效果的“核心仪表盘”——初学者盯着屏幕上不断下降的损失值满心欢喜,却 ...
2025-12-02在CDA(Certified Data Analyst)数据分析师的日常工作中,“用部分数据推断整体情况”是高频需求——从10万条订单样本中判断全 ...
2025-12-02在数据预处理的纲量统一环节,标准化是消除量纲影响的核心手段——它将不同量级的特征(如“用户年龄”“消费金额”)转化为同一 ...
2025-12-02在数据驱动决策成为企业核心竞争力的今天,A/B测试已从“可选优化工具”升级为“必选验证体系”。它通过控制变量法构建“平行实 ...
2025-12-01在时间序列预测任务中,LSTM(长短期记忆网络)凭借对时序依赖关系的捕捉能力成为主流模型。但很多开发者在实操中会遇到困惑:用 ...
2025-12-01引言:数据时代的“透视镜”与“掘金者” 在数字经济浪潮下,数据已成为企业决策的核心资产,而CDA数据分析师正是挖掘数据价值的 ...
2025-12-01数据分析师的日常,常始于一堆“毫无章法”的数据点:电商后台导出的零散订单记录、APP埋点收集的无序用户行为日志、传感器实时 ...
2025-11-28在MySQL数据库运维中,“query end”是查询执行生命周期的收尾阶段,理论上耗时极短——主要完成结果集封装、资源释放、事务状态 ...
2025-11-28在CDA(Certified Data Analyst)数据分析师的工具包中,透视分析方法是处理表结构数据的“瑞士军刀”——无需复杂代码,仅通过 ...
2025-11-28在统计分析中,数据的分布形态是决定“用什么方法分析、信什么结果”的底层逻辑——它如同数据的“性格”,直接影响着描述统计的 ...
2025-11-27在电商订单查询、用户信息导出等业务场景中,技术人员常面临一个选择:是一次性查询500条数据,还是分5次每次查询100条?这个问 ...
2025-11-27对数据分析从业者和学生而言,表结构数据是最基础也最核心的分析载体——CRM系统的用户表、门店的销售明细表、仓库的库存表,都 ...
2025-11-27在业务数据可视化中,热力图(Heat Map)是传递“数据密度与分布特征”的核心工具——它通过颜色深浅直观呈现数据值的高低,让“ ...
2025-11-26在企业数字化转型中,业务数据分析师是连接数据与决策的核心纽带。但“数据分析师”并非单一角色,从初级到高级,其职责边界、能 ...
2025-11-26