GAE实现批量上传数据文件(XML和CSV格式)
来源:互联网 发布:工作室监控软件 编辑:程序博客网 时间:2024/05/16 23:54
如何搭建GAE开发环境我就懒得说了,如果连环境都不会搭建,那么研究数据上传也没有什么意义。
我开发的时候选择的是JAVA开发环境,很悲催,只支持JDO和JPA,后台根本不支持SQL,并且,没有直接导入数据文件的功能,我觉得GOOGLE这个方面做得太绝了。
好在对Python有研究,用Python实现数据批量上传,当然,参考了不少文档和资料。
废话不说。
第一步:开启remote_api
在你的工程下面的web.xml里面加入下面的Servlet(直接复制这段代码加进去即可)
<servlet>
<servlet-name>remoteapi</servlet-name>
<servlet-class>com.google.apphosting.utils.remoteapi.RemoteApiServlet</servlet-class>
</servlet>
<servlet-mapping>
<servlet-name>remoteapi</servlet-name>
<url-pattern>/remote_api</url-pattern>
</servlet-mapping>
<security-constraint>
<web-resource-collection>
<web-resource-name>remoteapi</web-resource-name>
<url-pattern>/remote_api</url-pattern>
</web-resource-collection>
<auth-constraint>
<role-name>admin</role-name>
</auth-constraint>
</security-constraint>
第二步:下载Google App Engine SDK for Python。
这个问题,估计国内被墙,官方网址搓这里,如果不行,使用代理。
第三步:默认你已经安装了Python的情况下:
创建bulkloader.yaml文件,命令如下:(app_id改为你的app id,filename后面的文件名可以修改)
appcfg.py create_bulkloader_config --filename=bulkloader.yaml --url=http://<app_id>.appspot.com/remote_api
然后,在当前路径下找到bulkloader.yaml
我的xml格式为:
<RECORDS>
<RECORD>
<name>FUCK</name>
<name>YOU</name>
</RECORD>
<RECORD>
<name>FUCK</name>
<name>HER</name>
</RECORD>
</RECORDS>
把bulkloader.yaml修改如下:
connector: simplexml
connector_options:
xpath_to_nodes: /RECORDS/RECORD
style: element_centric
千万记得:xpath_to_nodes: /RECORDS/RECORD,看清楚,这个中间冒号和/直接,有个空格!!!,不然直接报错!
另外,千万不要用tab键,要缩进,请用空格。
上传数据的命令如下:
appcfg.py upload_data --config_file=bulkloader.yaml --filename=data.xml --kind=App --url http://<app_id>.appspot.com/remote_api
下载数据的命令如下:
appcfg.py download_data --config_file=bulkloader.yaml --filename=play-store-apps.xml --kind=App --url http://<app_id>.appspot.com/remote_api
有什么疑问欢迎联系:lyneoma@gmail.com
- GAE实现批量上传数据文件(XML和CSV格式)
- php实现批量上传数据到数据库(.csv格式)
- MySQL批量导入数据SQL语句(CSV数据文件格式)
- csv书籍批量上传
- 解析XML格式数据文件
- MySQL如何导入csv格式数据文件解决方案
- 存储系统实现-数据文件格式
- yii框架csv格式上传
- 批量转换编码格式,针对csv和txt文件编码格式。
- Spark创建DataFrame和读取CSV数据文件
- Spark创建DataFrame和读取CSV数据文件
- plupload 实现批量上传和删除
- 原生servlet配合smartupload实现批量下载和批量上传
- struts2实现批量上传和打包批量下载
- 如何将JSON, Text, XML, CSV数据文件导入MySQL
- 如何将 JSON, Text, XML, CSV 数据文件导入 MySQL
- 如何将 JSON, Text, XML, CSV 数据文件导入 MySQL
- 如何将 JSON、Text、 XML、 CSV 数据文件导入 MySQL
- 图像检索
- hash图像检索
- KDB应用指南
- Project 3: Scene recognition with bag of words
- android之代码优化(base类)
- GAE实现批量上传数据文件(XML和CSV格式)
- Android 全屏代码
- 所有的aspx 突然就出错,不能处理了
- PHP学习第一天:数组
- CLRS 学习计划
- 用人话讲内核1 - 开始跟硬件交谈
- 用人话讲内核2 - 同步
- 今日作息及食谱(8.23)
- 20140823 N2