从一个小项目了解自动获取、提交网页数据、字符转换、自动注册的过程
来源:互联网 发布:淘宝信誉评级怎么看 编辑:程序博客网 时间:2024/06/03 12:33
最近忽然有一个想法,就是通过程序在客户端自动完成一些较为复杂的功能,比如说在一个论坛里自动注册自动发贴、利用某些网站的搜索功能自动搜索组织感兴趣数据、自动站内发短信甚至自动发电子邮件;说白了就是一些所谓的“灌水机”、“爆吧机”、“垃圾邮件机”,当然我的出发点是为了学习提高。
由于之前完全没有接触过这方面的东西,所以决定先实现一小部分的功能,打个基础。这个小项目要实现的功能是使用程序在一个论坛里自动发表评论,可以是人输入文字后程序提交,也可以通过程序自动获取网友已经发布的评论后作为关键字google,得到结果后回复到论坛,后面这种功能本意是智能聊天,但为了实现简单的一种处理,效果不佳,下面讨论这种功能的实现。
程序要做的工作有1、用户名和密码登录,2、获取某个板块的页面,然后顺序查找每一个主题,把题目、超链接等信息保存下来,3、通过比较最后回复者名称确定要发表回复的主题,进入该主题,通过计算并使用主键方法找到最后回复的内容,4、截取部分内容进行URL编码提交到google搜索页面,5、同样通过主键方法还有简单计算索引到第一个搜索结果,6、对结果进行URL编码后提交到论坛的相应主题即完成了回复。
使用VC的socket编程,网上能找到一大堆http的get和post方法程序,有了这些方法就可以实现程序自动获取和提交数据了。下面提一下这个项目的一些难点。要提交中文就必须对其进行编码,不同的网站可能使用不同的编码,主要有GBK和UTF-8,论坛是前者,google是后者,浏览器都有这些编码功能,那么我的程序实质是从一种编码数据到另一种编码数据,然后再返回原先编码数据的数据交换,编码的方法网上也可以搜索到,当要提交数据的时候,http头是需要给出提交内容的长度的,所以程序要根据所提交数据长度自动合成一个声明了长度的提交字符串。另外通过获取到的网页数据搜索到感兴趣主题等信息也是关键的,通过分析html源代码可以找出合适的算法解决。
- 从一个小项目了解自动获取、提交网页数据、字符转换、自动注册的过程
- Excel自动获取网页数据
- 编程实现网页表单数据的自动提交
- 编程实现网页表单数据的自动提交
- Delphi实现网页表单数据的自动提交
- Delphi实现网页表单数据的自动提交
- Delphi实现网页表单数据的自动提交
- Delphi实现网页表单数据的自动提交
- Delphi实现网页表单数据的自动提交
- Delphi实现网页表单数据的自动提交
- 一个极其简洁的Python网页抓取程序,自动从雅虎财经抓取股票数据
- springMVC类型转换,提交日期字符数据自动转换日期格式
- java实现自动打开网页 自动提交数据
- Delphi自动提交网页表单和获取框架网页源码
- char *数据转换成string数据时数据后会自动加上一个随机字符问题
- JS自动获取Form表单数据并转换成键值对 ajax提交Form
- 设计自动获取网页和提交表单组件
- 设计自动获取网页和提交表单组件
- Ipconfig命令参数总结
- Cent OS 5上安装xen 3.3.0全过程
- Asp.net中带进度条的批量静态页生成
- 使用XFire轻松将POJO发布成web 服务
- 我们的钱将不值钱
- 从一个小项目了解自动获取、提交网页数据、字符转换、自动注册的过程
- session和cookie的区别
- Outlook2007 备份数据、账户、设置
- java获取系统当前时间
- SQL - DATEADD
- Java6学习笔记30——Java6的泛型
- 要想35岁以前成功 必备9大好习惯
- 如何将数据库B中的表转移到数据库A中(整合两个不同的数据库)
- Struts2源码分析