曾經淘寶是禁止百度抓取和收錄內容頁面的,如今淘寶部分開放百度蜘蛛,這也意味著百度可以遵循ROBOTS協議,對淘寶內容進行排序,那么本來日子過的不太舒坦的電商網站,未來會面臨什么樣的考驗?對百度和淘寶來說意味著什么?
讀前提示: Robots協議,是國際上搜索引擎對所有網站內容抓取的一個內容協議,通常來說,搜索引擎都必須遵守這個協議,在2016年以前,淘寶是禁止百度抓取淘寶所有內容和URL的,所以大家在百度上是無法通過搜索關鍵詞和URL找到淘寶店鋪和淘寶產品頁面的,而如今淘寶卻打開了這扇封閉百度多年的大門。
如圖所示,幾個目錄都已經跟谷歌一樣,對百度開放了?床欢畆obots沒關系,下面有解釋
為了讓大家進一步了解更清楚,我個人對以上目錄進行了詳細查詢和核對,發現:
1 、/article 目錄下,都是位于網站地圖下的列表頁面,開放給百度
2 、/oshtml 目錄下,也是位于網站地圖下的全球購,愛逛街等列表頁面,開放給百度
3 、/product目錄下,很不幸,都是403Fobidden頁面(筆者懷疑程序員誤操作了這次Robots的原因之一,因為沒有理由對搜索引擎開放一個已經403的頁面,還專門寫一個Robots協議),開放給百度
4 、/Spu 目錄下,很遺憾沒找到相應頁面,開放給百度
5、/dianpu 目錄下,空歡喜一場,這不是店鋪首頁,而是繁體的臺灣店鋪列表頁,開放給百度
6、/wenzhang 目錄下,全是淘寶頭條下的文章,內容大部分都是分享資訊類頁面,開放給百度
7、/oversea 目錄下,查無此目錄,開放給百度
綜上所述:我的看法是,淘寶這次的Robots協議,也許是個程序員的錯誤,隨手寫了一個,又或者是淘寶故意為之,測試百度搜索引擎的反應?第二個可能性我覺得是沒什么必要的,我還是覺得第一個可能性更大一些。(還有個YY的結果,就是馬云和李彥宏開了個玩笑,也許他們互相試探試探?)
其實,之所有有這個判斷,是因為淘寶這次壓根就沒有把重要頁面放出,而且對應的www.tmall.com的robots依然是禁止所有搜索引擎的抓取的,我們看看天貓的Robots協議:(禁止所有搜索引擎)
我再列舉一下淘寶一些重要頁面的URL示例:
shop150826343.taobao.com 這個是店鋪的首頁,通常用二級域名
item.taobao.com/item.htm?spm= 這個是產品詳情頁,都在二級域名item下
而這些重要頁面,在百度里依然是封禁的,也就是說有價值頁面依然是被封禁的不允許索引和被收錄用來排名的:
所以,這才是我懷疑這次修改robots協議可能就是一次人為的失誤罷了,而我的這篇文章的標題就可能淪為標題黨了,所以我才加了半句解釋“淘寶部分解禁百度蜘蛛”,而且這個部分解禁從上面的分析來看,等于是沒有解禁,因為價值頁面,也就是我說的對電商構成威脅的頁面都還在封禁當中,但是這個話題既然聊開了,不如假設一下:淘寶后續如果真的開放了淘寶和Tmall的店鋪首頁以及產品詳情頁面給百度蜘蛛進行索引和排序的話,那么電商網站將會面臨一場什么樣的戰爭?
猜想1:各電商網站流量將會跌去3-5成!
所有細分的電商類關鍵詞,如果百度絕對公平的條件下,淘寶的所有排名勢必至少在短期內站在京東同一水平線上,而由于淘寶的商品類目更多,更廣,所以淘寶依然很輕易的能夠超越京東的商品詳情頁以及排名帶來的流量。
更形象的解釋:比如京東目前賣的有1億類目的商品,但是淘寶可能是10億類目的商品,這在內容和頁面體系上,已然是一種質的超越,更別說單個的產品成交和評論數量等更多細節的比拼了。
所以,淘寶如果真的對百度全開放,那么京東,一號店等代表的電商類平臺網站將會面對淘寶排名帶來的強烈沖擊,各個平臺的SEO自然流量以及SEM推廣流量勢必會降低50%左右(如果開放了,意味著客戶主是可以直接通過百度SEM投放淘寶店鋪和URL的,當然更好的消息可能就是淘寶和百度的電商數據也許真的可以打通了,完全沒有障礙了)
猜想2:所有品牌企業主,勢必都需要在淘寶和天貓進行開店。
不然可能會面臨山寨,海外以及代理淘寶店鋪的流量沖擊,你的品牌詞和店鋪,價格,產品類詞將可能會被這些淘寶店所購買,當然,也許你們會說我做品牌保護了,我還是不去天貓和淘寶開店,那么我告訴你一個很嚴峻的事實:你的SEO結果,特別是品牌主的官網結果,將會面臨淘寶店鋪首頁帶來的巨大沖擊,也許你的官網排名第一的位置可能不保!
猜想3:淘寶和百度,將會雙贏,這將改變我們多年來形成的習慣:我們都知道,以前如果要上淘寶買東西,直接就上淘寶搜即可,或者是收藏店鋪,但是,如果淘寶和百度真的可以開放互相的內容體系和入口,那么更多的消費者可能會選擇從百度一個入口進入淘寶(值得商榷和探討的話題,這里不展開了,但是我認為一定存在激烈的爭議),淘寶將獲得更多的流量和用戶,而百度,也將借此打開另一扇盈利的大門,也可能是百度目前風雨飄搖中的一個涅槃重生的機會,這里面的機遇等于是把所有電商的市場投放抓到了一半!百度,你還在等什么?還不去找馬云談談,這回已經開放了幾個目錄了,不如多開放幾個?還是說,我們商量一下:把淘寶和天貓的robots都給開放了吧!
|