登录
首页精彩阅读实时大规模数据流的新分类算法_数据分析师培训
实时大规模数据流的新分类算法_数据分析师培训
2015-03-05
收藏

实时大规模数据流的新分类算法_大数据师培训


哲学告诉我们：“一切事物都是在不断变化和发展的，而科学的目标就是客观地认识这些变化事物中蕴藏的规律”。数据流作为当前大数据的主要形式，定义为随时间动态产生的各种数据（如电力数据、网络数据、传感器数据等），挖掘和预测流数据中隐含的数据模式及演变规律具有重要的理论和现实意义。

目前，数据流分类算法主要采用集成学习策略，然而，该类方法由于其本身的黑箱特性往往带来学习的不准确性。另外，当前数据流挖掘算法往往侧重于对近期数据进行学习，忽略了潜在重要的历史数据。

针对这些问题，电子科技大学，大数据研究中心，数据挖掘与推理研究所的邵俊明教授提出了一种全新的基于原型示例的数据流分类算法。其基本思想是从个体分析的新视角出发，通过分类性能启发式地对数据流中每个数据的重要性进行动态甄别和筛选，用以有效捕获当前最新的数据模式（数据中产生的新规律）用于分类预测。{CDA数据分析师培训}针对数据流的演化特性，提出了基于PCA和统计模型的新方法检测数据流中存在的突变概念漂移。此外，针对海量高速的数据流，提出了基于同步约束聚类的数据压缩方法，从而使得算法不仅具有很高的预测性能，同时使其具有很低的时间和空间复杂度，为实时进行大规模数据流分析提供了全新的思路和技术方法。

大数据 PCA 集成学习 数据挖掘 数据分析

数据分析咨询请扫描二维码

上一篇图论在大数据分析中的作用！
下一篇CDA认证再升一档！与国家共同推进大数据人才培养标准教育事业！
考试指南
报考指南
热门栏目
最新资讯
更多
Copyright © 2015-present, www.cda.cn All Rights Reserved.
京ICP备11001960号-9   京公网安备 11010802034615号   经营许可证编号：京B2-20210330
客服在线
立即咨询