Tecent的Soso独立运行,我们网站解开对搜搜蜘蛛的屏蔽
来自Jamesqi
“Tecent的Soso独立运行,我们网站解开对搜搜蜘蛛的屏蔽”和“腾讯搜搜独立了,网站解除对Sosospider屏蔽”在这里有相同的下面内容。
--James Qi 2009年9月7日 (一) 22:09 (CST)去年有一阵子服务器总是频繁负载过重,查到是一些搜索引擎蜘蛛捣乱,特别是腾讯Sosospider,在网站上爬行的速度可以用疯狂来形容,从网上一些文章看有不少网站都被迫将其屏蔽,我曾经给腾讯Soso发过邮件要求降低蜘蛛到访量,虽然收到回信说降低,但我们实际上没有看到降低,只有把将其很多IP地址都屏蔽掉。
前几天看到李开复从谷歌辞职的消息时还注意到一条新闻就是腾讯与谷歌的合作到期,正式推出了自己的独立搜索引擎,我当时就意识到这对我们网站会有影响,因为我们网站来自Soso的流量还不算少。
今天星期一,查看流量发现上周网站总的流量有明显下降,仔细对比发现主要是来自Soso的流量有大幅减少,这肯定与我们屏蔽了很多Sosospider的IP有关,与去年相比,目前服务器添加了新硬件、采取了文件缓存、试用了主从数据库,负载能力应该大大提高了,所以刚才已经去把以前对搜搜蜘蛛的屏蔽解开了。
不过这又需要一些时日来让搜搜恢复对我们网站的收录以及带来流量。另外,偶然看到搜搜风向标、人向标也许对了解通过腾讯进行搜索的人关注的热点有帮助。
后记:我上周写邮件给Soso要求恢复对我们网站的抓取、收录后,今天刚刚收到的回信
sosospider 发送至 我 显示详细信息 16:55 (6 小时前) 您好: 已经从禁采抓取恢复为正常抓取,请关注问题是否解决。 感谢您对搜搜产品的关注,如有其他问题,请随时联系我们。 ---- SOSO网页搜索Spider专用反馈邮件 Mailto: sosospider@tencent.com
等一段时间,观察看看再说。--James Qi 2009年9月21日 (一) 23:01 (CST)
标签:腾讯、搜搜、搜索、Sosospider、蜘蛛、SEO。 |
相关内容:
|
别名:Tecent的Soso独立运行,我们网站解开对搜搜蜘蛛的屏蔽。