淘宝robots屏蔽了蜘蛛,网店还能参与SEO排名吗

查看一下淘宝的robots，原来全站屏蔽所有蜘蛛，现在也开放了部分目录。后来再想研究一下再次访问robots.txt文件发现这个文件访问受限了，估计只允许蜘蛛访问了，当然禁止访问的方法不是本文的重点。

做全站SEO优化数据分析时，B2C或B2B平台会有很多网店参与排名，但淘宝C店也参与进来，这是不是太“奇怪”了呢？阿里巴巴旗下的天猫仍然全站屏蔽蜘蛛，既然都不允许抓取，为什么还要给排名呢？带着这些疑问，笔者为大家剖析一下。

robots.txt的意义

这个文件可以设置允许什么搜索引擎来爬取，什么该抓，什么不能抓，是SEO最常用的方法。屏蔽那些敏感或低质量的页面，保证整体被收录的内容质量，属于站内优化的一个环节，但是要注意以下环节，参考文章

• 别让网站的robots成为最大的安全漏洞
• 什么是robots协议对seo的影响

提交URL链接

目前各大搜索引擎都能提交非验证网站的链接，只需要把自己的电商网店提交到搜索引擎就行了。就这么简单的操作就能让你排在前面？再来看看一个类似的排名：QQ空间排名，可以看到QQ空间并没有设置robots。

蜘蛛抓取内容

早期QQ空间内容是异步传输，蜘蛛只会识别空间名（Title标题）、空间描述（Description描述），根本抓不了里面的动态、文章，但QQ空间的用户越来越少，人们最多是发个说说而且，再回来看看QQ空间源代码已经能抓到里面的内容了，而且里面的链接也没有nofollow。要是回到几年前，买个几万个QQ号，随便写内容，这可是成本最低的发外链的方法！

笔者早期操作QQ空间排名很简单，由于是异步加载，内容完全不用考虑，只要空间的访问量够多，就能排名稳定。现在只要你愿意操作QQ空间是要比操作新浪博客之类的要容易得多，毕竟新浪博客并不算社交软件（国内所谓的社交软件指的是腾讯的微信与QQ），有社交属性的流量会比较丰富，引流较容易。

淘宝店排名

淘宝SEO一般指的是淘宝自己的平台内搜索排名，而这里指的是搜索引擎下的淘宝店的SEO优化排名。同样的淘宝内容也是异步加载，能抓到的也比较有限：标题、描述、关键词和一些其他布局的文字。

淘宝C店的首页是流量最少的，很多人提交的都是首页，这样的排名是比较不稳定的。如果你读懂上面的QQ空间排名的方法，就应该知道怎么做了把。笔者建议大家做淘宝SEO的时候尽量选择流量较大的引流款，这样该页面的排名才能稳定。