五月婷婷丁香性爱|j久久一级免费片|久久美女福利视频|中文观看在线观看|加勒比四区三区二|亚洲裸女视频网站|超碰97AV在线69网站免费观看|有码在线免费视频|久久青青日本视频|亚洲国产AAAA

網(wǎng)絡(luò)爬蟲(chóng)為網(wǎng)絡(luò)信息收集與查詢(xún)提供了極大的便利，但同時(shí)也對(duì)網(wǎng)絡(luò)安全產(chǎn)生以下負(fù)面影響：

● 網(wǎng)絡(luò)爬蟲(chóng)會(huì)根據(jù)特定策略盡可能多的“爬過(guò)”網(wǎng)站中的高價(jià)值信息，占用服務(wù)器帶寬，增加服務(wù)器的負(fù)載

● 惡意用戶(hù)利用網(wǎng)絡(luò)爬蟲(chóng)對(duì)Web服務(wù)發(fā)動(dòng)DoS攻擊，可能使Web服務(wù)資源耗盡而不能提供正常服務(wù)

● 惡意用戶(hù)利用網(wǎng)絡(luò)爬蟲(chóng)抓取各種敏感信息，造成網(wǎng)站的核心數(shù)據(jù)被竊取，損害企業(yè)經(jīng)濟(jì)利益

Web應(yīng)用防火墻可以通過(guò)Robot檢測(cè)（識(shí)別User-Agent）、網(wǎng)站反爬蟲(chóng)（檢查瀏覽器合法性）和CC攻擊防護(hù)（限制訪問(wèn)頻率）三個(gè)反爬蟲(chóng)策略，全方位幫您解決業(yè)務(wù)網(wǎng)站遭受的爬蟲(chóng)問(wèn)題。

域名已成功接入WAF。

開(kāi)啟Robot檢測(cè)后，WAF可以檢測(cè)和攔截惡意爬蟲(chóng)、掃描器、網(wǎng)馬等威脅。

1.登錄管理控制臺(tái)。

2.單擊管理控制臺(tái)左上角的，選擇區(qū)域或項(xiàng)目。

3.單擊頁(yè)面左上方的，選擇“安全與合規(guī) > Web應(yīng)用防火墻 WAF”。

4.在左側(cè)導(dǎo)航樹(shù)中，選擇“網(wǎng)站設(shè)置”，進(jìn)入“網(wǎng)站設(shè)置”頁(yè)面。

5.在目標(biāo)域名所在行的“防護(hù)策略”欄中，單擊“已開(kāi)啟N項(xiàng)防護(hù)”，進(jìn)入“防護(hù)策略”頁(yè)面。

6.確認(rèn)“Web基礎(chǔ)防護(hù)”的“狀態(tài)”為。

7.單擊“高級(jí)設(shè)置”，在“防護(hù)配置”頁(yè)面，開(kāi)啟“常規(guī)檢測(cè)”和“Webshell檢測(cè)”開(kāi)關(guān)。

8.在“網(wǎng)站反爬蟲(chóng)”配置框中，用戶(hù)可根據(jù)自己的需要參照?qǐng)D2更改網(wǎng)站反爬蟲(chóng)的“狀態(tài)”，單擊“BOT設(shè)置”，進(jìn)入網(wǎng)站反爬蟲(chóng)規(guī)則配置頁(yè)面。

9.在“特征反爬蟲(chóng)”頁(yè)面，根據(jù)您的業(yè)務(wù)場(chǎng)景，開(kāi)啟合適的防護(hù)功能。

圖3 特征反爬蟲(chóng)防護(hù)

當(dāng)WAF檢測(cè)到惡意爬蟲(chóng)、掃描器等對(duì)網(wǎng)站進(jìn)行爬取時(shí)，將立即攔截并記錄該事件，您可以在“防護(hù)事件”頁(yè)面查看爬蟲(chóng)防護(hù)日志。

開(kāi)啟網(wǎng)站反爬蟲(chóng)，WAF可以動(dòng)態(tài)分析網(wǎng)站業(yè)務(wù)模型，結(jié)合人機(jī)識(shí)別技術(shù)和數(shù)據(jù)風(fēng)控手段，精準(zhǔn)識(shí)別爬蟲(chóng)行為。

1.登錄管理控制臺(tái)。

2.單擊管理控制臺(tái)左上角的，選擇區(qū)域或項(xiàng)目。

3.單擊頁(yè)面左上方的，選擇“安全與合規(guī) > Web應(yīng)用防火墻 WAF”。

4.在左側(cè)導(dǎo)航樹(shù)中，選擇“網(wǎng)站設(shè)置”，進(jìn)入“網(wǎng)站設(shè)置”頁(yè)面。

5.在目標(biāo)域名所在行的“防護(hù)策略”欄中，單擊“已開(kāi)啟N項(xiàng)防護(hù)”，進(jìn)入“防護(hù)策略”頁(yè)面。

6.在“網(wǎng)站反爬蟲(chóng)”配置框中，用戶(hù)可根據(jù)自己的需要參照?qǐng)D4更改網(wǎng)站反爬蟲(chóng)的“狀態(tài)”，單擊“BOT設(shè)置”，進(jìn)入網(wǎng)站反爬蟲(chóng)規(guī)則配置頁(yè)面。

7.選擇“JS腳本反爬蟲(chóng)”頁(yè)簽，用戶(hù)可根據(jù)業(yè)務(wù)需求更改JS腳本反爬蟲(chóng)的“狀態(tài)”和“防護(hù)模式”。

默認(rèn)關(guān)閉JS腳本反爬蟲(chóng)，單擊，在彈出的“警告”提示框中，單擊“確定”，開(kāi)啟JS腳本反爬蟲(chóng)。

須知：

● JS腳本反爬蟲(chóng)依賴(lài)瀏覽器的Cookie機(jī)制、JavaScript解析能力，如果客戶(hù)端瀏覽器不支持Cookie，此功能無(wú)法使用。

如果您的業(yè)務(wù)接入了CDN服務(wù)，請(qǐng)謹(jǐn)慎使用JS腳本反爬蟲(chóng)。

● 由于CDN緩存機(jī)制的影響，JS腳本反爬蟲(chóng)特性將無(wú)法達(dá)到預(yù)期效果，并且有可能造成頁(yè)面訪問(wèn)異常。

8.根據(jù)業(yè)務(wù)配置JS腳本反爬蟲(chóng)規(guī)則，相關(guān)參數(shù)說(shuō)明如表1所示。

JS腳本反爬蟲(chóng)規(guī)則提供了“防護(hù)所有請(qǐng)求”和“防護(hù)指定請(qǐng)求”兩種防護(hù)動(dòng)作。

● 除了指定請(qǐng)求規(guī)則以外，防護(hù)其他所有請(qǐng)求

“防護(hù)模式”選擇“防護(hù)所有請(qǐng)求”，單擊“添加排除請(qǐng)求規(guī)則”，配置排除請(qǐng)求規(guī)則后，單擊“確認(rèn)”。

● 只防護(hù)指定請(qǐng)求時(shí)

“防護(hù)模式”選擇“防護(hù)指定請(qǐng)求”，單擊“添加請(qǐng)求規(guī)則”，配置請(qǐng)求規(guī)則后，單擊“確認(rèn)”。

表1 JS腳本反爬蟲(chóng)參數(shù)說(shuō)明

開(kāi)啟CC攻擊防護(hù)，限制單個(gè)IP/Cookie/Referer訪問(wèn)者對(duì)您的網(wǎng)站上特定路徑（URL）的訪問(wèn)頻率，緩解CC攻擊對(duì)業(yè)務(wù)的影響。

1.登錄管理控制臺(tái)。

2.單擊管理控制臺(tái)左上角的，選擇區(qū)域或項(xiàng)目。

3.單擊頁(yè)面左上方的，選擇“安全與合規(guī) > Web應(yīng)用防火墻 WAF”。

4.在左側(cè)導(dǎo)航樹(shù)中，選擇“網(wǎng)站設(shè)置”，進(jìn)入“網(wǎng)站設(shè)置”頁(yè)面。

5.在目標(biāo)域名所在行的“防護(hù)策略”欄中，單擊“已開(kāi)啟N項(xiàng)防護(hù)”，進(jìn)入“防護(hù)策略”頁(yè)面，確認(rèn)“CC攻擊防護(hù)”的“狀態(tài)”為“開(kāi)啟”。

6.在“CC防護(hù)”規(guī)則配置頁(yè)面左上角，單擊“添加規(guī)則”。以IP限速和人機(jī)驗(yàn)證為例，添加IP限速規(guī)則，如圖8所示。

圖8 IP限速

設(shè)置成功后，當(dāng)用戶(hù)訪問(wèn)超過(guò)限制后需要輸入驗(yàn)證碼才能繼續(xù)訪問(wèn)。

開(kāi)啟該防護(hù)后，非瀏覽器的訪問(wèn)將不能獲取業(yè)務(wù)頁(yè)面。