Python命令 FTP下载MODIS数据
来源:互联网 发布:魔兽世界代练淘宝 编辑:程序博客网 时间:2024/05/06 16:05
在NASA MODIS中心搜索想要下载的卫星资源,下了订单之后会发给你一个邮件,里面有FTP的地址,用户名和密码,根据FTP协议,可以利用以下的Python语言下载数据。
#coding=utf-8''' ftp自动下载、自动上传脚本,可以递归目录操作'''from ftplib import FTPimport os,sys,string,datetime,timeimport socketclass MYFTP: def __init__(self, hostaddr, username, password, remotedir, port=21): self.hostaddr = hostaddr self.username = username self.password = password self.remotedir = remotedir self.port = port self.ftp = FTP() self.file_list = [] # self.ftp.set_debuglevel(2) def __del__(self): self.ftp.close() # self.ftp.set_debuglevel(0) def login(self): ftp = self.ftp try: timeout = 300 socket.setdefaulttimeout(timeout) ftp.set_pasv(True) print u'开始连接到 %s' %(self.hostaddr) ftp.connect(self.hostaddr, self.port) print u'成功连接到 %s' %(self.hostaddr) print u'开始登录到 %s' %(self.hostaddr) ftp.login(self.username, self.password) print u'成功登录到 %s' %(self.hostaddr) debug_print(ftp.getwelcome()) except Exception: print u'连接或登录失败' try: ftp.cwd(self.remotedir) except(Exception): print u'切换目录失败' def is_same_size(self, localfile, remotefile): try: remotefile_size = self.ftp.size(remotefile) except: remotefile_size = -1 try: localfile_size = os.path.getsize(localfile) except: localfile_size = -1 debug_print('localfile_size:%d remotefile_size:%d' %(localfile_size, remotefile_size),) if remotefile_size == localfile_size: return 1 else: return 0 def download_file(self, localfile, remotefile): if self.is_same_size(localfile, remotefile): debug_print(u'%s 文件大小相同,无需下载' %localfile) return else: debug_print(u'>>>>>>>>>>>>下载文件 %s ... ...' %localfile) #return file_handler = open(localfile, 'wb') self.ftp.retrbinary(u'RETR %s'%(remotefile), file_handler.write) file_handler.close() def download_files(self, localdir='./', remotedir='./'): try: self.ftp.cwd(remotedir) except: debug_print(u'目录%s不存在,继续...' %remotedir) return if not os.path.isdir(localdir): os.makedirs(localdir) debug_print(u'切换至目录 %s' %self.ftp.pwd()) self.file_list = [] self.ftp.dir(self.get_file_list) remotenames = self.file_list #print(remotenames) #return for item in remotenames: filetype = item[0] filename = item[1] local = os.path.join(localdir, filename) if filetype == 'd': self.download_files(local, filename) elif filetype == '-': self.download_file(local, filename) self.ftp.cwd('..') debug_print(u'返回上层目录 %s' %self.ftp.pwd()) def upload_file(self, localfile, remotefile): if not os.path.isfile(localfile): return if self.is_same_size(localfile, remotefile): debug_print(u'跳过[相等]: %s' %localfile) return file_handler = open(localfile, 'rb') self.ftp.storbinary('STOR %s' %remotefile, file_handler) file_handler.close() debug_print(u'已传送: %s' %localfile) def upload_files(self, localdir='./', remotedir = './'): if not os.path.isdir(localdir): return localnames = os.listdir(localdir) self.ftp.cwd(remotedir) for item in localnames: src = os.path.join(localdir, item) if os.path.isdir(src): try: self.ftp.mkd(item) except: debug_print(u'目录已存在 %s' %item) self.upload_files(src, item) else: self.upload_file(src, item) self.ftp.cwd('..') def get_file_list(self, line): ret_arr = [] file_arr = self.get_filename(line) if file_arr[1] not in ['.', '..']: self.file_list.append(file_arr) def get_filename(self, line): pos = line.rfind(':') while(line[pos] != ' '): pos += 1 while(line[pos] == ' '): pos += 1 file_arr = [line[0], line[pos:]] return file_arrdef debug_print(s): print sif __name__ == '__main__': timenow = time.localtime() datenow = time.strftime('%Y-%m-%d', timenow) # 配置如下变量 hostaddr = 'ladsweb.nascom.nasa.gov' # ftp地址 username = 'anonymous' # 用户名 password = 'lism2013@hotmail.com' # 密码 port = 21 # 端口号 rootdir_local = 'D:/Frost/data/250' # 本地目录 rootdir_remote = '/orders/500795602' # 远程目录 f = MYFTP(hostaddr, username, password, rootdir_remote, port) f.login() f.download_files(rootdir_local, rootdir_remote) timenow = time.localtime() datenow = time.strftime('%Y-%m-%d', timenow) logstr = u"%s 成功执行了备份\n" %datenow debug_print(logstr)
0 0
- Python命令 FTP下载MODIS数据
- MODIS数据的简介和下载(二)——MODIS数据下载方式(FTP)
- MODIS数据免费下载
- MODIS数据免费下载
- MODIS数据免费下载
- MODIS数据免费下载
- modis数据下载汇总
- 下载MODIS数据
- MODIS数据下载
- 从下载MODIS数据到几何纠正
- MODIS 数据及产品下载地址
- MODIS数据的简介和下载(三)——MODIS数据下载方式(基于MODIS Web Service)
- MODIS数据
- MODIS数据的简介和下载(一)——MODIS数据简介
- MODIS数据所有产品介绍与下载地址
- python socke ftp功能实现 shell命令,上传,下载
- python ftp 下载
- MODIS数据说明
- Spring-mvc-jdbc知识点小结
- bash命令读取二进制文件并转化为hex
- poj-1026-Cipher-置换群
- 模糊测试——强制发掘安全漏洞的利器(Jolt 大奖精选丛书)
- 培训
- Python命令 FTP下载MODIS数据
- UIImage的旋转
- abap--日期处理
- spring注解@Component @Controller @Service @Repository
- 东软睿道实训心得:走出校门后最稳妥的一步
- C#数据类型整理
- 空间分析之邻域分析
- android 设立中划线 下划线
- ORA-24337错误一则