答：您好，我司設(shè)置了cc防護(hù)，限制了單個ip10s請求超過50次，正常訪問是不會達(dá)到這個頻率的。請調(diào)整您的抓取軟件的頻率，限制到抓取頻率在10s 50以下，抓取生成再試，非常感謝您長期對我司的支持!
答：您好，無法取消，對應(yīng)的設(shè)置不會影響百度抓取，百度抓取是不會達(dá)到這個頻率，這個頻率屬于非正常訪問，您生成sitemap的時候請注意限制抓取頻率即可，非常感謝您長期對我司的支持!
答：您好，當(dāng)前可以特殊為您處理一下，您將需要進(jìn)行生成sitemap的網(wǎng)站域名回復(fù)到工單中，我司為您添加白名單您抓取再試，同時設(shè)置后對應(yīng)的cc防護(hù)就沒有效果了，非常感謝您長期對我司的支持!
答：您好，非常抱歉，默認(rèn)虛擬主機(jī)均開啟CC防護(hù)，在高頻訪問的情況下會觸發(fā)攻擊防護(hù)，建議您控制抓取頻率，蜘蛛訪問會直接通過驗證，所以不受影響,非常感謝您長期對我司的支持!
問： 127.0.0.1:22000這個服務(wù)器網(wǎng)站比較慢，我看監(jiān)控信息，網(wǎng)絡(luò)帶寬，cpu等都占用比較高，麻煩看下原因
答：您好，我們查看cpu占用并不高，服務(wù)器負(fù)載也不高，是帶寬高，根據(jù)進(jìn)程來看是網(wǎng)站訪問占用的，首頁加載的內(nèi)容比較多，帶寬不夠，建議將帶寬升級到10M再觀察下,非常感謝您長期對我司的支持!
答：您好，vnstat -l -i eth0 查看實時流量，iftop可以查看當(dāng)前連接流量，nethogs可以查看進(jìn)程流量,非常感謝您長期對我司的支持!
答：您好，我們之前登陸查看負(fù)載是很低的， 如果有攻擊一般負(fù)載都會偏高，并且日志里面會有記錄。您網(wǎng)站首頁加載的內(nèi)容偏多，如果同時有幾個人訪問就能把帶寬占滿，并不需要攻擊就可以造成網(wǎng)站訪問卡頓。最好檢查優(yōu)化下網(wǎng)站的結(jié)構(gòu)，資源圖片可以盡可能壓縮減少，或者直接升級帶寬,非常感謝您長期對我司的支持!
聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以原創(chuàng)、轉(zhuǎn)載和分享網(wǎng)絡(luò)內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-62778877-8306；郵箱：fanjiao@west.cn。本站原創(chuàng)內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明出處：
西部數(shù)碼知識庫 »
生成sitemap網(wǎng)站抓取失敗