爬虫系列-雪球网选股策略爬取程序1.0
来源:互联网 发布:sd2100编程说明 编辑:程序博客网 时间:2024/04/28 15:26
个人网站地址:http://www.enjoyown.com/spider-xueqiu/
昨天领导安排我整理知名网站上的选股策略,整理了半天,全部手敲的,因为APP没办法复制文本,很蛋疼,今天闲下来了就写了这个爬虫,将所有的策略抓取并保存到MySQL数据库,这样下次连拷贝都剩了,直接MySQL导出excel,一分钟就解决问题,喜欢请 star,谢谢。
Git地址
- URL https://github.com/mingliangliang/spider_xueqiu
策略截图
{% capture images %}
http://res.cloudinary.com/changzhou-university/image/upload/v1502875478/20170816172354_fzywfu.jpg
http://res.cloudinary.com/changzhou-university/image/upload/v1502875478/20170816172346_q3uyja.jpg
{% endcapture %}
{% include gallery images=images caption=”运行截图和结果” cols=2 %}
MySQL建表
建表语句已经上传git,直接刷一下脚本即可。
运行python
{% capture images %}
http://res.cloudinary.com/changzhou-university/image/upload/v1502875478/2017-08-16_171956_nx2umb.jpg
http://res.cloudinary.com/changzhou-university/image/upload/v1502875479/2017-08-16_172054_cavae2.jpg
{% endcapture %}
{% include gallery images=images caption=”运行截图和结果” cols=2 %}
运行环境
- 操作系统:Windows7_X64
- python版本:python2.7
- SQL:MySQL5.7
- 编译器:Spyder
版本遗留问题
只取了策略的基本信息,没有把此策略包含股票取下来,下一版实现。
- 爬虫系列-雪球网选股策略爬取程序1.0
- Python爬虫:Selenium+ BeautifulSoup 爬取JS渲染的动态内容(雪球网新闻)
- 爬虫系列1查看爬取规则
- 爬虫系列5爬取网站方法
- 网络爬虫爬取策略,注意爬虫爬取网站的频率
- [爬虫系列(一)]爬取豆瓣电影排行前250
- 爬虫系列4:scrapy技术进阶之多页面爬取
- <Python爬虫>爬取豆瓣图书/豆瓣电影系列
- Python爬虫系列:爬取小说并写入txt文件
- 【Python爬虫系列】使用requests爬取图片
- python爬虫系列之爬取百度文库(一)
- python爬虫系列之爬取百度文库(二)
- python爬虫系列之爬取百度文库(三)
- python爬虫系列之爬取百度文库(四)
- Python爬虫入门系列之——爬取图片
- python爬虫系列(一)百度首页爬取
- 写给小白看的爬虫系列之爬虫入门爬取妹子图
- 超级易懂爬虫系列之爬虫入门爬取妹子图
- Browser-sync 一款前端开发中用于自动刷新页面的工具
- [PAT甲级]1003. Emergency (25)(求城市间最短路径和最大救援队数目)
- 5 实现
- 树状数组区间修改区间查询
- HDU
- 爬虫系列-雪球网选股策略爬取程序1.0
- RxSwift 样例一 imagePicker
- Logistic回归以及LR与SVM异同
- groovey list集合使用
- Python递归导致栈溢出
- Android TextView实现跑马灯效果的两种方式
- 对视频的支持
- 函数冒充执行之-apply()和call()
- HDU 2544 最短路(dijkstra)