太狗血了!分享一次网站百度收录排名异常的检查记录.docx

太狗血了!分享一次网站百度收录排名异常的检查记录-云客网 您网站的流量加油站 太狗血了！分享一次网站百度收录排名异常的检查记录 事情是这样的：我的博客现在的百度收录异常惨淡!而且，我还叮嘱哪些喜欢转载我博客博文的朋友，不要转载半个月内发布的文章，因为我以为几个月来百度不收录、排名下降严重的是因为我先后更换主题->换用360网站卫士->文章被人快速转载所致。 我发现最蛋疼、最诡异的是，我发布的文章几个月都没被收录!然后我也默默的在心里把度娘骂了几个月，尼玛就算被人采集、被人第一时间转载也不至于不收录啊? 可实际有图为证： SEO排名 -云客网 您网站的流量加油站 基本从5月份开始，发布的文章就不再收录，索引从4800掉到现在1000左右! 期间，我各种怀疑，是不是robots设置有误?是不是外链go跳转对搜索引擎封闭等措施带来惩罚? 直到。直到我今天心血来潮，想试下百度的API搜索接口，提供sitemap数据才发现抓取失败。 其实，在之前我就发现所有和sitemap数据提交有关的功能都提示抓取失败!但是尼玛，在百度抓取诊断检测相同的链接又是成功的! 我以为是百度站长工具出现了暂时性的问题，还反馈过： 直到今天，我还又反馈了一把： SEO排名 -云客网 您网站的流量加油站 反馈完之后，我反复去看了下这个抓取失败结果： 结果发现都是连接超时错误，DNS解析是没问题的，确实是真实IP，看来不是使用CDN的问题： SEO排名 -云客网 您网站的流量加油站 继续看了几遍之后，我偶然点开了抓取异常这个工具，一看吓一跳，每天的连接超时居然将近一半! 突然灵光一闪，连接超时，好熟悉的字眼，不是40X，也不是50X。没错，就是防火墙拦截! SEO排名 -云客网 您网站的流量加油站 赶紧登陆阿里云ECS看了下iptables： 看到了有2个网段被禁用，先尝试解封，然后回到百度更新了下sitemap试了下，居然成功了?! SEO排名 -云客网 您网站的流量加油站 我次奥!真是这个网段被禁封造成的!成功后，我特意再次更新sitemap。并看了下nginx日志，发现还真是220.181.108这个IP段的IP，尼玛，巧就巧在百度抓取诊断工具不在这个网段，可以正常抓取，迷惑了我几个月! 事后，我努力的回忆了一把当时为什么禁用了这2个网段。 记得，当时是Begin交流群里有个人采集我的整个博客。我当时用了各种办法禁止他采集内容中的盗图，最终他用了搜狗的图片接口来采集我博客的图片。我就不好怎么禁止了，因为搜索引擎来的IP，CDN是自动回源的! 于是，我图省事直接把搜狗的图片接口IP的整个网段都给禁封了!尼玛，当时也没想过百度和搜狗的蜘蛛节点可能在同一个机房了?另外恶狠狠的诅咒下，采集个人博客者木有小JJ! 几个月的时间，对SEO带了非常严重的影响!要不是运气好，突然想到了这么一桩，这博客的百度SEO就基本废了! 废了也没什么，关键不明不白，谁也不爽吧!此次解除禁封之后，相信不出一个月，应该就会有效果了，至少最新发布的文章是会被收录的，不看别的，就见证下本文一个星期会不会被收录吧!不过之前未收录却被转载走的文章算是废了，发出去虽然推送到了百度，但是百度却没抓取到内容，被人转了之后估计被识别成首次发布的原创了吧! SEO排名 -云客网 您网站的流量加油站 好了，本文算是一个吐槽贴，也是给一些网站降权、收录异常的朋友一个参考，某些时候，收录异常、网站被K站不一定是你SEO方面的问题，一定记得看看是不是服务器把蜘蛛挡在门外了哟! 作者：张戈 SEO排名