python获取网页源代码后在网站上显示

来源:互联网 发布:数据录入员待遇好么 编辑:程序博客网 时间:2024/06/11 23:57

最近一个项目,要求利用header和cookie爬取网站的页面,然后在自己的网站页面上显示出来.

思考了很多方法,比如jsonp跨域,script等等,但发现传回来的都是网页源代码,而我们的要求是打开这个页面,后来又利用了python的webbroswer,js的弹窗,又发现不能设置header和利用cookie登录,真是麻烦.


最后,直接简单粗暴的利用requests库解决了这个问题,就是利用requests post获取网页源代码,ajax或者websocket传到前端(他们的用法可参考我之前的博客),在利用js document.write 直接打开这个源代码,就ok了.


具体代码就不贴了,涉及公司机密,这里主要写下解决的思路,抱歉了

阅读全文
0 0
原创粉丝点击