HTTPS的網頁被收錄的問題。
2014-09-24 瀏覽：150
如果不希望被收錄，常規的做法是設置robots文件。
HTTPS主要的出發點是安全，并沒有太多的考慮搜索引擎。從用戶角度，很多采用了HTTPS的站點（尤其是網頁），也是需要被搜索到的，比如支付寶、貝寶等。通常情況下，搜索引擎對這類網頁并不做內容解析，而只是將URL進行索引。
IP地址的URL被收錄，除了spider在機制上不完善之外，通常在站點設計上也有一些缺陷，一般情況下，這類問題是可以被規避的。
如果不希望被收錄，常規的做法是設置robots文件。
HTTPS主要的出發點是安全，并沒有太多的考慮搜索引擎。從用戶角度，很多采用了HTTPS的站點（尤其是網頁），也是需要被搜索到的，比如支付寶、貝寶等。通常情況下，搜索引擎對這類網頁并不做內容解析，而只是將URL進行索引。
IP地址的URL被收錄，除了spider在機制上不完善之外，通常在站點設計上也有一些缺陷，一般情況下，這類問題是可以被規避的。