免费大片黄在线观看yw_能把下面看湿的视频_深爱激动情一区二区三区_黄色耽美小说

百度是否支持通過robots提交sitemap?

2014-09-23 瀏覽:150

暫時還沒有這個打算。一般情況下,spider能處理大多數網站的數據抓取和更新,而無須借助sitemap。
現在百度已經支持在站長平臺提交sitemap了,不過為了保證提交網站的質量,對提交資格進行了限制。所以現在也不支持通過robots提交sitemap,不然站長平臺的限制就沒有意義了。

上一條: 百度是否支持crawl-delay,是否支持使用robots文件控制抓取頻率和時間?
下一條: Robots解禁禁止抓取后的生效時間是多長?

新聞資訊

相關資訊