数据探索和预处理可能涉及到的算法
来源:互联网 发布:淘宝双十一红包群 编辑:程序博客网 时间:2024/06/14 14:17
相关性分析;
主成分分析,用较少的变量来反映较多变量,这些较少的变量能反映原始变量的大部分信息,且彼此之间是线性无关的。
周期性分析:在时间序列预测时,经常要对样本数据进行周期性分析,以更好的理解样本数据变化的特点,为时序预测分析提供指导依据。
缺失值分析:样本数据中经常会出现一些缺失值,在进行建模预测前,需要对缺失值按照某些规则进行处理。处理的方法有:删除和数据补齐。
坏数据处理:如果抽取的数据中存在坏数据,需要对坏数据进行预处理,通常的做法是采用绝对均值或者莱茵达法对样本中的坏点数据进行剔除或修正处理。
属性选择:
数据规约:将属性数据按照比例缩放,使之落入一个较少的特定区间。找出最小属性集合,使得数据类的概率分布尽可能地接近所使用所有属性的原分布。
离散化处理:离散化技术用来减少给定连续属性的个数,这个过程通常是递归的,而且大量时间花在排序上,对于给定的数值属性,概念分层定义了该属性的一个离散化的值。
特征提取:主要对图像,声音,信号等数据源,通过图像处理、小波变换等方法来建立一组新的、更紧凑的属性来表示数据的过程。如图像特征提取是根据图像特征,提取反映图像本质的一些关键性指标,已达到自动进行图像识别或分类的目的。
阅读全文
0 0
- 数据探索和预处理可能涉及到的算法
- Python笔记-数据探索和预处理
- 数据探索之数据预处理
- 梯度下降算法数据的标准化预处理
- STL之涉及到的算法
- 数据预处理和weka.filters的使用
- 数据探索和数据准备的步骤
- lucene涉及到的算法----二元搜索算法
- 一些可能涉及到计算机硬件的法律、法规等
- 数据理解和预处理
- 关于数据挖掘预处理算法 fstream与数据格式的关系
- R语言数据的预处理以及算法基础小记
- 存储过程源码涉及到的数据字典
- 主数据同步涉及到的表
- 数据预处理的过程
- 数据预处理的形式
- 数据预处理的重要性
- 视频数据的预处理
- KMA算法实现
- 插入排序代码
- 听张方方学长分享经验有感
- 模态框modal
- Linux 中shell学习
- 数据探索和预处理可能涉及到的算法
- List在执行remove方法不能删除指定的对象
- 【设计模式】—— 职责链模式ChainOfResponsibility
- 三子棋小游戏
- (六) Java多线程详解之线程锁Lock和Condition线程通信技术
- 让IIS支持解析.json格式文件
- Shell脚本基础12-case语句
- 第5章流程控制
- java基础_键盘Scanner录入