经典算法题:大数据处理常见算法题 第一部分、十道海量数据处理 1、海量日志数据,提取出某日访问百度次数最多的那个IP。 此题,在我之前的一篇文章算法里头有所提到,当时给出的方案是:IP的数目还 ...
2017-12-25从大数据到认知计算,未来需要更强的计算能力 认知计算是IBM提出的概念,认为“认知计算”是通过与人的自然语言交流及不断地学习,从而帮助人们做到更多的系统,是从硬件架构到算法策略、从程序设计到行业专长 ...
2017-12-25大数据时代,个人信息如何保护 随着大数据应用领域不断涌现新风口,数据合规话题讨论迅速升温。在日前举行的“2017大数据合作与合规峰会”上,中国社会科学院法学研究所所长陈甦表示,互联网、大数据、人工智能 ...
2017-12-25Python中shutil模块的常用文件操作函数用法示例 shutil模块提供比OS模块更强大的本地文件操作功能,包括文件的压缩和解压缩等,下面我们就来列举Python中shutil模块的常用文件操作函数用法示例: os模块提供了 ...
2017-12-25如何防范人工智能、大数据、区块链、云计算的技术风险 众所周知,人工智能、大数据、区块链、云计算这四项技术是Techfin市场中的顶梁柱。近日京东金融研究院发布了《2017金融科技报告——行业发展与法律前沿》( ...
2017-12-25Python实现多行注释的另类方法 这篇文章主要介绍了Python实现多行注释的另类方法,本文使用的是Python多行文本功能来另类的实现Python的多行注释,需要的朋友可以参考下 Python程序的注释感觉很不合群,对于习 ...
2017-12-25大数据:算得出数字,算不出人性 信息时代,没有人能逃脱数字的包围,我们的日常活动情况都被数字化的信息形式记录下来,就连手机里的好友都拦不住大数据无形的手。最近微信新增了删除“不常联系好友”功能—— ...
2017-12-25数据显示,在2016届本科毕业生从事的职业类中,“互联网开发及应用”职业类月收入最高,毕业半年后平均月收入为5679元。 什么职业时下社会需求量较大?2017年就业蓝皮书数据显示:20 ...
2017-12-24【北京银信长远科技股份有限公司】招聘数据分析师 北京银信长远科技股份有限公司(简称银信科技)是一家全国性、专业化的IT运维服务整体解决方案提供商,主要面向各行业数据中心的IT基础设施,提供IT支持与维护服务 ...
2017-12-24【北京信博维诺科技有限公司】招聘数据分析师 北京信博维诺科技有限公司(简称:信博维诺),成立于2017年,是一家为用户提供个人消费金融服务的互联网金融科技公司。运用移动互联网和大数据风控技术帮助信用记录缺 ...
2017-12-24【恒安嘉新(北京)科技有限公司】招聘数据分析师 恒安嘉新(北京)科技有限公司(下称“恒安嘉新”)成立于2008年8月,注册资本7315万元,是国内领先的网络与信息安全整体解决方案提供商。公司属于国家级高新技术企业 ...
2017-12-24大数据和AI怎么与现代教育相结合? 比尔·盖茨曾预言,“5年以后,你将可以在网上免费获取世界上最好的课程,而且这些课程比任何一个单独大学提供的课程都要好。” 现在看来,虽然并不是每个网上课程都 ...
2017-12-24大图数据科学: 图数据中的推理 我们正淹没在大数据的河流里,大数据并非是平的,而是多模态、多关系、兼具时空、多媒体的。目前的AI技术,特别是机器学习,它将丰富复杂数据平放到矩阵的形式当中。我们当下所 ...
2017-12-24你的公司是否真的需要大数据战略 随着越来越多的人谈到大数据,首席信息官们也被资深管理层问到:“我们的大数据策略是什么?”但是你们真的需要大数据策略吗? 我们的认为,企业应该重视数据统治和数据管 ...
2017-12-24python基础教程之元组操作使用详解 这篇文章主要介绍了python的元组操作使用方法,需要的朋友可以参考下 简介 tuple 1.元组是以圆括号“()”包围的数据集合,不同成员以“,”分隔。通过下标进行访 ...
2017-12-24数据分析第一步 | 做好数据埋点 做产品的同学在产品上线后经常离不开一个词,数据分析。那么要如何进行数据分析呢?不妨先问自己这么几个问题。 你要分析什么问题?是找问题还是验证? 关于这些问 ...
2017-12-24数据分析工作的思考与总结 1.什么是数据分析? 基于现有的业务知识和统计学基础知识及基本思想的理解与掌握,通过数据库及统计分析工具对数据的调取与处理、分析,达到对现有问题or主题的探索与剖析,最终 ...
2017-12-24数据挖掘进行数据分析常用的方法 利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等, 它们分别从不同的角度对数据进行挖掘。 ① 分类。分类是找 ...
2017-12-24数据科学家也可能被人工智能取代 由于人工智能取代人类活动的争论越来越激烈,数据科学家开始体验人工智能辅助自动化的好处和风险。 人们开始对人工智能被用来自动化一切事物的前景感到不安。现在人工智能已 ...
2017-12-242018年大数据的五个发展趋势 如今,数据是已成为组织最大的资产之一,而随着2018年的到来,数据对组织的重要性将日益增长。 数字化变化的速度如此之快,以至于人们难以准确预测2018年的趋势。然而,可以肯定 ...
2017-12-24在数据库日常操作中,INSERT INTO SELECT是实现 “批量数据迁移” 的核心 SQL 语句 —— 它能直接将一个表(或查询结果集)的数 ...
2025-10-16在机器学习建模中,“参数” 是决定模型效果的关键变量 —— 无论是线性回归的系数、随机森林的树深度,还是神经网络的权重,这 ...
2025-10-16在数字化浪潮中,“数据” 已从 “辅助决策的工具” 升级为 “驱动业务的核心资产”—— 电商平台靠用户行为数据优化推荐算法, ...
2025-10-16在大模型从实验室走向生产环境的过程中,“稳定性” 是决定其能否实用的关键 —— 一个在单轮测试中表现优异的模型,若在高并发 ...
2025-10-15在机器学习入门领域,“鸢尾花数据集(Iris Dataset)” 是理解 “特征值” 与 “目标值” 的最佳案例 —— 它结构清晰、维度适 ...
2025-10-15在数据驱动的业务场景中,零散的指标(如 “GMV”“复购率”)就像 “散落的零件”,无法支撑系统性决策;而科学的指标体系,则 ...
2025-10-15在神经网络模型设计中,“隐藏层层数” 是决定模型能力与效率的核心参数之一 —— 层数过少,模型可能 “欠拟合”(无法捕捉数据 ...
2025-10-14在数字化浪潮中,数据分析师已成为企业 “从数据中挖掘价值” 的核心角色 —— 他们既要能从海量数据中提取有效信息,又要能将分 ...
2025-10-14在企业数据驱动的实践中,“指标混乱” 是最常见的痛点:运营部门说 “复购率 15%”,产品部门说 “复购率 8%”,实则是两者对 ...
2025-10-14在手游行业,“次日留存率” 是衡量一款游戏生死的 “第一道关卡”—— 它不仅反映了玩家对游戏的初始接受度,更直接决定了后续 ...
2025-10-13分库分表,为何而生? 在信息技术发展的早期阶段,数据量相对较小,业务逻辑也较为简单,单库单表的数据库架构就能够满足大多数 ...
2025-10-13在企业数字化转型过程中,“数据孤岛” 是普遍面临的痛点:用户数据散落在 APP 日志、注册系统、客服记录中,订单数据分散在交易 ...
2025-10-13在数字化时代,用户的每一次行为 —— 从电商平台的 “浏览→加购→购买”,到视频 APP 的 “打开→搜索→观看→收藏”,再到银 ...
2025-10-11在机器学习建模流程中,“特征重要性分析” 是连接 “数据” 与 “业务” 的关键桥梁 —— 它不仅能帮我们筛选冗余特征、提升模 ...
2025-10-11在企业的数据体系中,未经分类的数据如同 “杂乱无章的仓库”—— 用户行为日志、订单记录、商品信息混杂存储,CDA(Certified D ...
2025-10-11在 SQL Server 数据库操作中,“数据类型转换” 是高频需求 —— 无论是将字符串格式的日期转为datetime用于筛选,还是将数值转 ...
2025-10-10在科研攻关、工业优化、产品开发中,正交试验(Orthogonal Experiment)因 “用少量试验覆盖多因素多水平组合” 的高效性,成为 ...
2025-10-10在企业数据量从 “GB 级” 迈向 “PB 级” 的过程中,“数据混乱” 的痛点逐渐从 “隐性问题” 变为 “显性瓶颈”:各部门数据口 ...
2025-10-10在深度学习中,“模型如何从错误中学习” 是最关键的问题 —— 而损失函数与反向传播正是回答这一问题的核心技术:损失函数负责 ...
2025-10-09本文将从 “检验本质” 切入,拆解两种方法的核心适用条件、场景边界与实战选择逻辑,结合医学、工业、教育领域的案例,让你明确 ...
2025-10-09