功能介紹

支持針對搜索引擎IP放行、針對惡意Bot請求IP封禁，目前爬蟲情報庫已維護接近10萬條數據

                  

                    
注意
                    
目前控制臺尚未開放爬蟲情報規則功能，如有防護需求請通過提交工單給天翼云客服，由其人工操作開啟。
                    
                  
                  

前提條件

• 已開通Web應用防火墻（邊緣云版）
• 已新增域名并成功接入WAF，具體操作請見WAF接入
• 開通Web應用防火墻（邊緣云版）擴展服務-Bot管理，支持使用Bot防護策略，具體請見套餐和版本說明

背景信息

邊緣云WAF安全團隊基于天翼云積累的海量威脅情報庫，并經過離線分析技術，收集國內外公開的、已知的惡意爬蟲IP；另外，通過反向解析技術，收錄了眾多SE類別的爬蟲信息，兩者結合形成爬蟲情報庫，內置近10萬條友好爬蟲與已知惡意爬蟲IP信息，目前仍持續更新中。

針對已知爬蟲，邊緣云WAF為爬蟲情報進行標識與分類，例如搜索引擎類的爬蟲，分為谷歌爬蟲、360爬蟲、百度爬蟲等各類標識，您可以僅針對其中的某類搜索引擎標識進行加白的動作，則后續此類爬蟲IP將不經過邊緣云WAF的Bot防護策略。對于惡意爬蟲，您也可以對其進行一鍵封禁的操作，邊緣云WAF將會對其進行攔截，避免網站業務遭受已知惡意爬蟲的攻擊。

相關配置項

相關操作

• Bot防護策略
• 設置IP情報規則