曾经淘宝是禁止百度抓取和收录内容页面的，如今淘宝部掰开放百度蜘蛛，这亦寓意着百度能够遵循OROBOTS协议，对淘宝内容进行排序，那样本来日子过的不太舒坦的电商网站，将来会面临什么样的考验？对百度和淘宝来讲寓意着什么？
读前提示： Robots协议，是国际上搜索引擎对所有网站内容抓取的一个内容协议，一般来讲，搜索引擎都必须遵守这个协议，在2016年以前，淘宝是禁止百度抓取淘宝所有内容和URL的，因此大众在百度上是没法经过搜索关键词和URL找到淘宝店铺和淘宝制品页面的，而如今淘宝却打开了这扇封闭百度数年的前门。
如图所示，几个目录都已然跟谷歌同样，对百度开放了。看不懂robots不碍事，下面有解释
为了让大众进一步认识更清楚，我个人对以上目录进行了仔细查找和核对，发掘：
1 、/article 目录下，都是位置于网站地图下的列表页面，开放给百度
2 、/oshtml 目录下，亦是位置于网站地图下的全世界购，爱逛街等列表页面，开放给百度
3 、/product目录下，很不幸，都是403Fobidden页面（笔者可疑程序员误操作了这次Robots的原由之一，由于无理由对搜索引擎开放一个已然403的页面，还专门写一个Robots协议），开放给百度
4 、/Spu 目录下，很遗憾没找到相应页面，开放给百度
5、/dianpu 目录下，空高兴一场，这不是店铺首页，而是繁体的台湾店铺列表页，开放给百度
6、/wenzhang 目录下，全是淘宝头条下的文案，内容大部分都是分享新闻类页面，开放给百度
7、/oversea 目录下，查无此目录，开放给百度
综上所述：我的看法是，淘宝这次的Robots协议，亦许是个程序员的错误，随手写了一个，又或是淘宝故意为之，测试百度搜索引擎的反应？第二个可能性我觉得是没什么必要的，我还是觉得第1个可能性更大有些。（还有个YY的结果，便是马云和李彦宏开了个玩笑，亦许她们互相试探试探？）
其实，之所有有这个判断，是由于淘宝这次压根就无把重要页面放出，况且对应的www.tmall.com的robots依然是禁止所有搜索引擎的抓取的，咱们瞧瞧天猫的Robots协议：（禁止所有搜索引擎）
我再列举一下淘宝有些重要页面的URL示例：
shop150826343.taobao.com 这个是店铺的首页，一般用二级域名
item.taobao.com/item.htm?spm= 这个是制品详情页，都在二级域名item下
而这些重要页面，在百度里依然是封禁的，亦便是说有价值页面依然是被封禁的不准许索引和被收录用来排名的：
 因此，这才是我可疑这次修改robots协议可能便是一次人为的失误罢了，而我的这篇文案的标题就可能沦为标题党了，因此我才加了半句解释“淘宝部分解禁百度蜘蛛”，况且这个部分解禁从上面的分析来看，等于是无解禁，由于价值页面，亦便是我说的对电商形成威胁的页面都还在封禁其中，但是这个专题既然聊开了，不如假设一下：淘宝后续倘若真的开放了淘宝和Tmall的店铺首页以及制品详情页面给百度蜘蛛进行索引和排序的话，那样电商网站将会面临一场什么样的战争？
猜想1：各电商网站流量将会跌去3-5成！
所有细分的电商类关键词，倘若百度绝对公平的要求下，淘宝的所有排名势必最少在短期内站在京东同一水平线上，而因为淘宝的商品类目更加多，更广，因此淘宝依然很轻易的能够超越京东的商品详情页以及排名带来的流量。
更形象的解释：例如京东日前卖的有1亿类目的商品，然则淘宝可能是10亿类目的商品，这在内容和页面体系上，已然是一种质的超越，更别说单个的制品成交和评论数量等更加多细节的比拼了。
因此，淘宝倘若真的对百度全开放，那样京东，一号店等表率的电商类平台网站将会面对淘宝排名带来的剧烈冲击，各个平台的seo自然流量以及SEM推广流量势必会降低50%上下（倘若开放了，寓意着客户主是能够直接经过百度SEM投放淘宝店铺和URL的，当然更好的信息可能便是淘宝和百度的电商数据亦许真的能够打通了，完全无阻碍了）
猜想2：所有品牌企业主，势必都需要在淘宝和天猫进行开店。
否则可能会面临山寨，海外以及代理淘宝店铺的流量冲击，你的品牌词和店铺，价格，制品类词将可能会被这些淘宝店所购买，当然，亦许你们会说我做品牌守护了，我还是不去天猫和淘宝开店，那样我告诉你一个很严峻的事实：你的SEO结果，尤其是品牌主的官网结果，将会面临淘宝店铺首页带来的巨大冲击，亦许你的官网排名第1的位置可能不保！
猜想3：淘宝和百度，将会双赢，这将改变咱们数年来形成的习惯：咱们都晓得，以前倘若要上淘宝买东西，直接就上淘宝搜就可，或是保藏店铺，然则，倘若淘宝和百度真的能够开放互相的内容体系和入口，那样更加多的消费者可能会选取从百度一个入口进入淘宝（值得商榷和探讨的专题，这儿不展开了，然则我认为必定存在激烈的争议），淘宝将得到更加多的流量和用户，而百度，亦将借此打开另一扇盈利的前门，亦可能是百度日前风雨飘摇中的一个涅槃重生的机会，这儿面的机遇等于是把所有电商的市场投放抓到了一半！百度，你还在等什么？还不去找马云谈谈，这回已然开放了几个目录了，不如多开放几个？还是说，咱们商量一下：把淘宝和天猫的robots都给开放了吧！
好吧，我承认凌晨零点30分的时候，我是有点兴奋过头了，亦有点飘飘然了，亦许这真的仅仅是个错误罢。当然，我还是有点小期待淘宝和百度之间，搞点小暧昧的！倘若爱好这篇文案，要转载请咨询我自己后再进行转载，注明源自：胡亮亮SEO微X公众号。
如你有区别见解，请留言评论 ，我会尽快回复！感谢各位耐心阅读，为你自己点个zan吧！
| 
发表于 2024-8-25 15:19:43
