某site无法进行搜索内容,其他site都可以搜索
来源:互联网 发布:软件测试视频初学者 编辑:程序博客网 时间:2024/05/16 08:07
进行大量站点测试后,发现其他站点search正常,而该站点无法进行搜索到结果,从爬网中的日志中发现以下错误:
The start address http://xxxxxxxxx cannot be crawled;
新建该站点的网站内容进行专门爬网测试,错误依旧,无法对该站点爬网,根据错误可以判断是爬网服务器无法访问该站点,在爬网服务器上打开该站点url,却出现错误提示,无法打开该网站,判断可能缺少该网站的自定义组件。
最后发现该站点有自定义的组件,在爬网服务器的添加该网站的自定义dll,然后进行增量爬网测试,已经可以在该site搜索出内容。
- 某site无法进行搜索内容,其他site都可以搜索
- 谷歌搜索 site命令 指定网站搜索
- site
- site
- site
- site
- Site
- 推荐一个BT种子搜索SITE ,可以找个oreilly 1.16G的EBOOK 已经测试可以下载~~~
- Google搜索命令“site:”运算符高级使用技巧:
- GOOGLE搜索秘籍--高级搜索:site,link,inurl,allinurl,intitle,allintitle
- 使用CA进行site-to-site VPN连接
- 其他网页可以使用,但百度首页打不开,百度搜索无法使用,怎么办
- http://images.google.com/searchbyimage?site=search&image_url= 搜索
- 使用百度搜索site语法来查看你网站的收录量
- IPSec site-PIX-site
- 在域名中检索内容(site)
- SharePoint2010 My Site无法创建的解决方案
- 无法搜索windows xp的搜索文件内容的解决办法
- web服务详解——与Web服务相关的技术问题
- 给页面加上Loading效果最简单实用的办法
- 关于PDCP协议中PDCP SDU往上层递交的条件
- POJ 1422/ HDU 1151 Air Raid
- 与冯大辉谈数据库架构(InfoQ)
- 某site无法进行搜索内容,其他site都可以搜索
- oracle 与DB2 UDB,SQL SERVER的数据类型的对比!
- mingw编译OrzNet
- Fedora15 安装 Apach
- oracle sqlplus 显示宽带设置
- 关于时间中断的code
- 书籍收藏
- 最简单的TCP客户端(winapi)
- u-boot中nor flash的sector管理方式