我經常遇到這樣的狀況，許多人都來問我：“為啥屏蔽了的頁面還被抓取?”這兒我簡單的說下吧，一般有兩種狀況：一種是：對現已錄入的網頁使用robots屏蔽，老網頁依照robots規矩的刪去時刻會很長，這個時分或許會形成百度沒有遵守robots規矩。第二種狀況是：假如你屏蔽的頁面或欄目存在大量的外鏈，那么這個網頁或欄目的URL會被百度錄入，但內容不會被百度索引，一般這樣的多見于首頁域名。當然，假如你連URL都不想被錄入，可以針對蜘蛛回來404即可。
掃描二維碼--------關注微信號
你是否在網絡營銷的路上走了很多彎路花了很多冤枉錢？
你是否有請過很多所謂專業的seo公司幫你排名？
——排名上去了，又掉了，傷心了。
你是否去參加過各種樣子的網絡營銷培訓？
——懂了，明白了，知道了，卻無法執行
盡管出現以上種種情況但是你仍然沒有放棄，
因為你知道網絡營銷的重要性，依然希望找到一個好的合作伙伴！！
Copyright 云南博滇科技有限責任公司 版權所有
主營服務：昆明seo,云南seo,昆明seo公司,云南seo公司,昆明seo優化公司
