頭條搜索站長平臺-抓取頻次
功能說明
抓取頻次是搜索引擎在單位時間內(nèi)(天級)對一個網(wǎng)站服務器訪問的頻率和總次數(shù),Bytespider會根據(jù)網(wǎng)站內(nèi)容更新頻率和服務器壓力自動調整抓取頻次。站長可以通過抓取頻次監(jiān)控工具查看頭條爬蟲對站點最近的抓取情況,也可以修改抓取頻次返回給Bytespider。
生效周期
抓取頻次修改提交后最快次日生效。
工具使用
抓取頻率查詢
選擇需要查詢抓取情況的站點,即可得到近期頭條對該站點抓取情況圖示。
抓取頻次監(jiān)控幫助
抓取頻次怎么調整
您可以通過抓取壓力反饋工具向頭條爬蟲反饋對站點抓取情況設置,Bytespider會根據(jù)您的反饋并結合站點情況進行調整。
建議您僅在網(wǎng)站抓取異常時使用此工具進行壓力調整反饋,請慎重限制抓取上限,以避免網(wǎng)站抓取異常。
抓取頻次監(jiān)控幫助
抓取頻次相關QA
為什么我設置主站壓力后,子站壓力控制不生效呢?
因為抓取頻次功能只針對單個站點生效,無主站概念。設置主站壓力無法決定和影響子站壓力,如果想針對子站做壓力控制,需要逐一設置子站的壓力才會生效。
來源:頭條搜索站長平臺