时间序列规则法快速入门(转自dropout)
来源:互联网 发布:动量梯度下降算法 编辑:程序博客网 时间:2024/06/05 03:03
最近参加了有关时序问题的比赛,自己的论文也是相关问题。所以
在天池技术圈看了dropout 老师 的这篇文章,询问了老师后可以转载,转载简书网址如下,以供学习。
http://www.jianshu.com/p/31e20f00c26f?spm=5176.9876270.0.0.7cb4283aZnvi5Z
前言
大家好~我是drop-out。今年我参加了IJCAI-17数据挖掘竞赛和KDD CUP 2017,分别获得了第三名和第九名。两个比赛都是时间序列数据。因为我本身是学金融的,对金融时间序列接触的比较多,然而我发现搞机器学习的小伙伴们时间序列处理的基本方法都没有入门~所以这里写一篇文章,以IJCAI-17口碑客流量预测大赛为背景,介绍一下时间序列规则法,让大家快速入门!= = IJCAI-17给的是蚂蚁金服的支付数据,具体来说,给的是店铺(实体店)过去每天的客流量,预测店铺未来14天每天的客流量。由过去外推未来,这是典型的时间序列问题。像支付数据、客流量数据、交通数据等,具有明显的周期性。从预测的角度说,周期性是核心,只要抓住了周期性,任务就完成了一大半。
基本规则法快速入门
假设给定下面的数据,任务是预测第四周每天的客流量。
明显能看到周一到周日的周期波动。预测的核心任务就是尽可能准确的提取这种周期。 第一步: 除以周均值,得到一个比例。 第二步: 按列取中位数,就可以得到一组鲁棒的周期因子。
做预测时,只要将周期因子,乘以一个base,就可以做下一周的预测啦。比如说,我们取最后一周的平均客流量100作为base,那么我们直接乘上周期因子,就得到下一周的预测:
这里只拿了三周来举例。实际应用当然要取更长的时段啦。具体取几周以测试集的效果来确定。
针对周期因子的优化
按列提取中位数是一种简单而有效的提取周期因子的方法。中位数十分鲁棒,不受极端值的影响。但中位数损失了很多信息。实践中,可以在此基础上进一步优化。比如可以提取一个均值和一个中位数,然后将均值和中位数融合。融合的比例按照测试集的表现来确定。也可以根据与预测周的时间距离来赋予不同的权重。
针对base的优化
直接用最后一周的平均客流量作为base并不一定是最好的方法。也许最后三天或最后五天的均值能更好的反映最新的情况。但是,我们不能直接对最后三天客流量取均值(最后三天是周末,这样取的base就偏大了)。需要去掉周期性因素后,再取平均。具体做法,就是用客流量除以周期因子。
这样我们就可以取最后三天的平均,(108+91.4+120)/3=106.5,作为base。具体取多少天的,也要通过测试集的表现来确定。当然也可以按某些函数形式来给每天赋予不同的权重。
其他影响因素
在IJCAI-17的这个赛题里面,天气是非常重要的一个影响因素。可以提取残差,然后用残差训练一个天气的模型。推荐使用xgboost。其他影响因素可以如法炮制。
- 时间序列规则法快速入门(转自dropout)
- 时间序列规则法快速入门
- 时间序列分解入门
- 时间序列之差分自回归移动平均法(ARIMA)
- 时间序列分析这件小事(二)--自回归
- 转自: Vue.js——60分钟组件快速入门(上篇)
- Filter快速入门<转自黑马课堂笔记>
- 时间序列之AR(自回归模型)
- reStructuredText(.rst)语法规则快速入门
- reStructuredText(.rst)语法规则快速入门
- drtools规则使用快速入门之一
- MySQL快速入门03----字符集 & 校对规则
- reStructuredText(.rst)语法规则快速入门
- CSS设计规则BEM快速入门手册
- R语言入门(1)时间序列分析
- R语言入门(2)时间序列分析原理
- R语言入门(4)时间序列分析
- RNN时间序列预测(1)-Tensorflow入门,MNIST学习
- [err]1292
- eclipse 活动页签 tab页签 乱码
- html的显示消息和留言板
- 关于ThinkPHP5.0在Apache下隐藏index.php报错的问题
- HDU 3586 树形DP
- 时间序列规则法快速入门(转自dropout)
- redis操作
- spring报错:通配符的匹配很全面, 但无法找到元素 'context:annotation-config' 的声明
- oracle,创建表
- POJ-3107 Godfather & POJ-2378 Tree Cutting(树的重心)
- Java压力测试工具Jmeter
- 求一个n阶方阵对角线元素之和。
- spring boot 使用@ConfigurationProperties
- Linux free -m 详细说明