-
Crawl-delay
鎖定
- 外文名
- Crawl-delay
- 類 別
- 擴展名
Crawl-delay指令語法
User-agent: * Crawl-delay: 15
Crawl-delay文件通知
百度於2012年9月20在百度站長平台發出通知。該通知表明:百度對網站訪問頻率不再參考該設置,即不支持Crawl-delay配置,如果您希望配置網站針對百度spider的訪問頻率,建議您使用百度站長平台的抓取壓力反饋工具,先查詢網站在百度近一個月的天級抓取量趨勢圖,可調節百度spider每天訪問您網站的抓取壓力上限,供百度參考,避免百度spider對站點抓取壓力過大,造成網站服務器負載及抓取異常。
[1]
- 參考資料
-
- 1. 百度站長平台資料區 .百度站長平台[引用日期2012-10-17]
- 詞條統計
-
- 瀏覽次數:次
- 編輯次數:13次歷史版本
- 最近更新: 雾珐呼吸的鱼