让你的网站记录蜘蛛来访次数吧

文章转自：爱符号 http://www.afuhao.com/article_articleId-142.shtml

如果你是一个站长，如果你有自己的博客网站，如果你会编程，有没有想过，统计一下每天有哪些搜索引擎来访问过你的网站，方便知道收录的大概情况。

首先说明一点，搜索引擎会定期派出它们的机器人（蜘蛛），来访问你的网站，将你的网页收录在数据库中，如果被审核为有效内容，以后在搜索引擎上面搜索类似的关键词时，就能找到你的网站链接。

比如搜索：爱符号，就有可能看到首页 或者页面标题带此关键词的链接，或者是页面内容内容有此关键词的链接。

那么现在教你在asp.net中实现这样的功能。

网上其实也能找到一些类似的程序代码，可能会是php或asp的。

首先认识一下：global.asax

它是全局的一个文件，每次请求都会执行它里面的一些方法。

我们在这里要用到的就是：Application_BeginRequest，在请求执行之前。

注意：Application_BeginRequest 中不能用Session 和 Response，可以用 Request

废话少说，看代码：

[cs] 

1. protected override void Application_BeginRequest(object sender, EventArgs e) {  
2.       RecordSpider()；//记录蜘蛛来访  
3. }  
4. private void RecordSpider(){  
5.     string spiderName=GetSpiderName(Request.UserAgent);//得到蜘蛛的标识，  
6.     if(!string.IsNullOrEmpty(spiderName)){//没名称的时候，就不是蜘蛛  
7.          //记录：今日：蜘蛛名称，时间，次数（加1）  
8.          //建议表结构：{ Id,Day,Name,Count,CreateDate}   
9.          //Id:主键，自增  
10.          //Day:int,用于保存日期数字方便查询，例：20121228  
11.          //Name:varchar(64),蜘蛛名称，如果想更高效，可以用数字，  
12.          //Count:次数，今日内将持续叠加此值  
13.          //CreateDate:最后一次来访时间，即今日内，每来一次，此值将被更新为当前时间  
14.          //判断：今日此蜘蛛没有来过：插入一条记录，反之叠加Count并更新CreateDate  
15.     }  
16. }  
17. /// <summary>  
18. /// 获取蜘蛛名称  
19. /// </summary>  
20. /// <param name="userAgent">user-agent header</param>  
21. /// <returns>返回已知蜘蛛名称</returns>  
22. public static string GetSpiderName(string userAgent) {  
23.     if (string.IsNullOrEmpty(userAgent))  
24.         return string.Empty;  
25.     if (ContainsAny(userAgent, "Sosospider"))//其实很简单，蜘蛛总是会在HTTP头 User-Agent 中，留下一些特殊的标识（不排除有的网站故意这样做）  
26.         return "SosoSpider";  
27.     if (ContainsAny(userAgent, "Googlebot"))  
28.         return "Googlebot";  
29.     if (ContainsAny(userAgent, "Baiduspider"))  
30.         return "BaiduSpider";  
31.     return string.Empty;//暂时只写这些，实际代码有很多的，我这里只是贴一部分，雅虎 MSN BING 都是可以支持  
32. nbsp;}  
33. //包含任意，用于在指定的文本中，包含其中一个文本就返回true  
34. private static bool ContainsAny(string text, params string[] values) {  
35.     if (string.IsNullOrEmpty(text))  
36.         return false;  
37.     if (values == null || values.Length == 0)  
38.         return false;  
39.     bool result = false;  
40.     foreach (var item in values) {  
41.         if (text.IndexOf(item, StringComparison.OrdinalIgnoreCase) != -1) {  
42.             result = true;  
43.             break;  
44.         }  
45.     }  
46.   
47.     return result;  
48. }  

双击项目中的global.asax 进入代码窗口后，把上面的代码放进去，然后放到网站上，看看有没有蜘蛛来过。

代码中没有指明如何记录，请自行建立表，和后台页面显示。这些都是数据插入、更新、查询的事情。

看看本站的记录吧：

统计概况蜘蛛统计今日:

谷歌：142(7秒前)  

    百度：101(6分钟前)  

 搜搜：46(半小时前)  

昨日:

百度：650(11小时前)  

 搜搜：59(12小时前)  

 谷歌：184(11小时前)  

 必应：4(半天前)  

   雅虎：4(半天前)  

前日:

谷歌：292(昨天23:37)  

搜搜：63(昨天23:41)  

百度：268(昨天23:55)  

雅虎：3(昨天11:36)  

必应：1(昨天16:08)  

 

文章转自：爱符号 http://www.afuhao.com/article_articleId-142.shtml