分享我的生活
分享能使人快乐

google竟然把服务器挤爆了

早上我刚刚恢复过去数据库,然后我打开了网站,允许访问,晚上哥们就给我哭诉,网站被攻击了,空间被关闭了。

我顿时就纳闷了,看发帖量估计没有多少的访问量啊,又有谁会知道这个网址呢,主域名我没给他转跳,只是开了主域名下的一个子文件夹,天,这事闹的。

等了两天,空间商终于上班,然后同意给开启空间,为了安全起见,还是先把网站禁止访问了(就是说网站可以打开,但是还是禁止了),下载了log文件一看,擦,google一直重复的请求同一个页面,他,他他是不是又毛病了????

google在11/Dec/2010:18:47:05 +0800这个时间不知道在这个页面发现了什么,而且还喊来了助手,多个google服务器一起访问这个页面,这里面这的有金子么?

看这兄弟几个119.77.135.212 -187.141.165.84 -96.47.226.66 -123.205.76.21 -83.228.42.200 -12.164.31.197 -207.28.249.82 -98.126.33.98 -217.113.59.32一个一个挤得好凶啊,这还不是完全统计啊,其他的我就不点名了。

到11/Dec/2010:18:57:39 +0800,只有10分钟,google就成功的拿下了这个网站,管理员把这个空间给关闭了!汗一个。

现在我分析,可能是这个版块有什么google喜欢的东西,所以引来了大量的蜘蛛;另一个可能是这个页面打不开,所以google的一个服务器请求别的服务器来打开这个页面,结果网站真的打不开了。另一个方面,空间商真的是不行,你就不会限制链接请求数量么,同一个ip重复的访问一个页面都分辨不出来。这个是防火墙配置的不怎么样,不防CC和DDoS,这个主机商,反正是国内的,我不说了。

现在应该解决这个问题啊,本想用robert.txt禁止一切的搜索引擎,但是万一他们把主页快照给弄没了怎么办呢,所以,禁止它访问版块,首页上只有版块的链接,还有redirect的链接(discuz默认禁止索引redirect的网页),所以,网站只留给搜索引擎一个主页,如果安装上首页多格的话还能索引刚发的文章,这样可以缓解搜索引擎的大量访问了吧。

问题也随之而来,怎么才能逐步的放开呢,毕竟有索引才能吸引更多的人来到这儿。

www.5169.info_google_cc

 

给大家个log大家看着玩吧

http://u.115.com/file/f724dfc23c

赞(0)
未经允许不得转载:RUBLOG-分享我的生活 » google竟然把服务器挤爆了

我想说 7

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址
  1. #-49

    没有遇到过这样的事情,学习学习好了。

    水车9年前 (2010-12-13)Reply
  2. #-48

    @水车

    我也是第一次遇到啊,不知道为啥呢

    xinyu2ru9年前 (2010-12-13)Reply
  3. #-47

    不是很懂~~呵呵~

    Junan9年前 (2010-12-13)Reply
  4. #-46

    我的一个服务器被百度蜘蛛占用大量资源,就把蜘蛛给屏蔽了,适合做黄站

    ljpbin9年前 (2010-12-14)Reply
  5. #-45

    @ljpbin

    那空间商贱贱的说一开空间就被攻击,就算是google,他也应该有个发现网站时间差吧

    xinyu2ru9年前 (2010-12-14)Reply
  6. #-44

    @Junan

    你,或许不需要懂吧

    xinyu2ru9年前 (2010-12-14)Reply
  7. #-43

    老实说,看不懂,学习了

    严重浪漫9年前 (2010-12-18)Reply