数据进行切分
来源:互联网 发布:java list 转数组 编辑:程序博客网 时间:2024/06/11 12:57
数据进行切分
# -*- coding: utf-8 -*-"""Created on Mon Apr 17 16:12:18 2017@author: STP"""import pandas as pdimport numpy as npimport datetimebegin = datetime.datetime.now()data= pd.read_csv('0401-0415.csv', header = 0)#data2 = pd.read_csv('JData_Action_201602.csv', header = 0)'''data1 = pd.read_csv('0221-0229.csv', header = 0)data2 = pd.read_csv('0301-0306.csv', header = 0)data12=[data1,data2]data= pd.concat(data12)'''data['time'] = pd.to_datetime(data['time'])rng1 = pd.date_range('2016-04-11',periods = 1)rng2 = pd.date_range('2016-04-15',periods = 1)for i in rng1: for j in rng2: index1 = data['time'] >= i print i index2 = data['time'] <= j print j output = data[index1 & index2] output.to_csv('0411-0415.csv' , mode = 'ab+', index = None)'''# 处理合并的两个数据集data['time'] = pd.to_datetime(data['time'])rng1= pd.date_range('2016-03-06',periods = 1)for i in rng1: index1 = data['time'] <= i print i output = data[index1] output.to_csv('0301-0306.csv' , mode = 'ab+', index = None)'''end = datetime.datetime.now()time_run=end-begin print time_run
阅读全文
0 0
- 数据进行切分
- 海量数据按行数进行切分
- 数据切分
- 数据切分
- 数据分库,横向切分,纵向切分
- 数据水平切分
- 数据切分算法实践
- mysql数据切分
- 数据的水平切分
- 数据库 数据切分
- 数据切分概述
- Amoeba For MySQL_测试Amoeba的数据切分功能_CentOS6.5下进行
- 进行大规模数据迁移时,使用多线程,利用改进二分法,近似均等切分任务
- 使用 Hibernate Shards 进行切分
- mysql数据库的数据切分
- 关于数据切分的思考
- 数据切分——原理
- 数据切分及整合方案
- 使用lrzsz工具和 bec-cli工具在百度云下载数据
- extern 的用法
- libgdx介绍
- 动态分类算法
- ReactNative异常: java.lang.UnsatisfiedLinkError: could find DSO to load: libreactnativejni.so
- 数据进行切分
- java数组的去重操作(非集合方法)
- wordpress的.htaccess自动恢复成默认模式解决办法
- TypeScript 基本语法
- Android性能测试之Memory Monitor
- 三目运算符bug?原来是这样的!
- Hbase 启动报 clock is out of sync 错
- Mac 中vi的常用快捷键
- 利用request模拟登录知乎