一个小公司的领导通过朋友找到我,让我帮他们看看网站,说网站上线有一段时间了,也找兼职的SEO人员帮忙优化过,但是好像看不到任何效果,百度收录一直为0。
类似这种问题真的很常见,因此,我直接进入网站诊断阶段,通过问题引导对网站开始把脉。他们做无气喷涂机行业,从SEO角度初步判断:因为不是被打击的行业,排除搜索引擎重点打击该行业的担忧。域名是新域名,不存在历史已经被搜索引擎加入黑名单的
记录。网站上线后页面都可以正常访问,不存在无法访问的问题。大概看了一下网站的robots文件,发现竟然User-agent: Disallow:/,我也实在是无语了,要是被屏蔽了还能被收录,只能说是奇迹。
解决办法:超级简单,直接将“User- agent* Disallow:/命令从Robots里面删除,然后重新上传到网站,这样就允许蜘蛛访问网站了。在此基础上,SEO人员手工做了一份 Sitemap,然后引导蜘蛛到Sitemap,收录果然在数日后逐渐见效。