得罪台湾同胞的内地搜索引擎

zz/2024/7/23 14:09:40

转自:

http://yblog.org/archive/print.php?5862

爬虫一览表:

没办法啊,不加入搜索引擎么不好,加入么狂搜啊,google也是这样。昨天晚上它扫了我一晚~郁闷,流量啦,IIS连接数什么的。还好我的空间不限制IIS。
66.249.65.195 Mediapartners-Google/2.1 google点击广告爬虫
72.30.111.88 Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp) Yahoo搜索引擎爬虫
66.154.102.222 Gigabot Gigabot搜索引擎爬虫
66.154.103.167 Gigabot/2.0; http://www.gigablast.com/spider.html 被google吞并的gigabot搜索引擎
202.96.51.171 lanshanbot/1.0     有人说是中搜爬虫
202.108.1.* Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0) 中搜的,不知道是干什么的
66.249.65.198 Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) 著名的google.com搜索引擎
/rss.asp Mozilla/6.0 (MSIE 6.0; Windows NT 5.1;Foxmail/MILOWU) 这不是爬虫,不过还是要解释下,这是用foxmail6.0订阅了你的rss
202.160.179.35 Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html) yahoo音乐搜索
220.181.19.65 sogou spider 搜狗搜索引擎扫描器
220.181.8.80 OutfoxBot/0.5 (for internet experiments; http://; outfoxbot@gmail.com) 疑是搜索Email地址的,又像sohu家的
220.181.19.94 未知扫描器,不过可以放心,它不是攻击器。不过结合上面的IP可猜测,这个IP应该属于sohu家族的
InetURL:/1.0 也许是漏洞扫描器,也许是小偷程序。也有好多是广告机,灌水机。
218.90.13.32 Mozilla/3.0 (compatible; Indy Library) 广告发布机,还好Hosin blog有验证码
72.14.199.2 /rss.asp Feedfetcher-Google; (+http://www.google.com/feedfetcher.html) google的rss搜索扫描器
210.72.225.189 /rss.asp feedsky_spider http://www.feedsky.com 一款rss扫描器,有兴趣者进入此网站添加您的rss
207.46.98.139 msnbot/1.0 (+http://search.msn.com/msnbot.htm) MSN蜘蛛
61.135.146.199 Baiduspider+(+http://www.baidu.com/search/spider.htm) 百度蜘蛛
Mozilla/5.0 (X11; U; Linux i686; zh-CN; rv:1.2.1) Gecko/20030225 这信息是某人在Linux系统上使用firefox 2.0浏览器访问。
Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; SV1; .NET CLR 1.1.4322) Sleipnir/2.45 使用Sleipnir浏览器,kuhanzhu也使用这款日本人开发的多页面浏览器,不过我一直用1.65版的
209.237.238.177 ia_archiver Alexa排名爬虫  


http://www.ngui.cc/zz/2727401.html

相关文章

Alexa排名新高-升4,021位(手机网址之家,www.mobi123.cn)

很多朋友越来越关注本站,特别是大家通过本站来玩空中 网的《异三国.Online》游戏,以及联通WAP上的“香艳江 湖”游戏,觉得做得很成功,也是我不断改进本站的动力。 也有一些困难,比如有的WAP网站觉得这样对自己的内容…

Alexa排名新高-升776位(手机网址之家,www.mobi123.cn)

很多朋友越来越关注本站,特别是大家通过本站来玩空中 网的《异三国.Online》游戏,以及联通WAP上的“香艳江 湖”游戏,很多网友通过悟空搜索搜到了自己喜欢的铃音 ,这些觉得做得很成功,也是我不断改进本站的动力。 也…

DotNetNuke 5.1.x升级简单方便

1、下载upgrade升级包 2、讲升级包覆盖以前的安装包,我使用了beyond compare进行仔细比较覆盖 3、访问/install/index.aspx,dnn会自动升级 很方便吧。

MSN 9.0 同时登陆多个账号

From:http://kevinzhou.org/2009/01/23/msn-90-%E5%90%8C%E6%97%B6%E7%99%BB%E9%99%86%E5%A4%9A%E4%B8%AA%E8%B4%A6%E5%8F%B7/ 最近升级了MSN9.0,但是以前用的MSN Shell和Messenger Plus等支持多个账号登陆的第三方软件都不支持9.0。网上试了很多方法都不行&#xf…

程序员的情书,果真不一般!

记得没见你之前,在我的世界,一直的报空指针,因为没有看到你的身影,所以不敢贸然的把你new 出来,即使你姗姗来迟,我还是要坚守我的底线,一辈子不长,一个你刚刚好。 记得没见你之前&am…

春天里,程序猿宅男的“桃花”怎么开

信息化时代的来临,足不出户就可以工作、购物、交友、娱乐,一台电脑,一根网线,就能了解世间万象,于是乎,“宅男”倍出。所谓“宅男”,也称为“御宅族”,原本是指那些足不出户&#xf…

支持向量机(SVM)中相关问题的思考

相关问题 SVM的基本想法就是求解能正确划分训练样本并且其几何间隔最大化的超平面。 引入对偶算法求解支持向量机的参数: 对偶问题往往更加容易求解;可以自然的引用核函数(拉格朗日表达式里面有内积,而核函数也是通过内积进行映…

Linux内核架构演化

Linux内核架构演化 [外链图片转存失败(img-ytRvRQQ5-1565429920094)(https://img-blog.csdn.net/20170210195344197?watermark/2/text/aHR0cDovL2Jsb2cuY3Nkbi5uZXQvdGx6aGF0YW8/font/5a6L5L2T/fontsize/400/fill/I0JBQkFCMA/dissolve/70/gravity/SouthEast)]

通往奥格瑞玛的道路 最短路的综合应用

通往奥格瑞玛的道路 题目链接 通往奥格瑞玛的道路 题目描述 在艾泽拉斯大陆上有一位名叫歪嘴哦的神奇术士,他是部落的中坚力量 有一天他醒来后发现自己居然到了联盟的主城暴风城 在被众多联盟的士兵攻击后,他决定逃回自己的家乡奥格瑞玛 在艾泽拉…

B. Array Walk

传送门 分析 这题的题意大概就是有1-n个点,每个点赋值为a[i],现在可以移动k次,不过只能向左移动z次,并且不能连续向左移动,问你最后走过所有点的和最大是多少 这题很明显思路是一个dp,但是怎么进行状态转…