selenium執行js並繞過webdriver監測常見方法

2022-04-12 13:00:28

selenium執行js

優點：直接呼叫瀏覽器的環境
障礙：繞過selenium監測

原理：

# 執行js程式碼
bro.execute_script('js程式碼')

常見的selenium監測手段

正常登入 window.navigator.webdriver == undefined
自動化的 window.navigator.webdriver == true

除此之外，還有一些其它的標誌性字串（不同的瀏覽器可能會有所不同），常見的特徵串如下所示：

webdriver  
__driver_evaluate  
__webdriver_evaluate  
__selenium_evaluate  
__fxdriver_evaluate  
__driver_unwrapped  
__webdriver_unwrapped  
__selenium_unwrapped  
__fxdriver_unwrapped  
_Selenium_IDE_Recorder  
_selenium  
calledSelenium  
_WEBDRIVER_ELEM_CACHE  
ChromeDriverw  
driver-evaluate  
webdriver-evaluate  
selenium-evaluate  
webdriverCommand  
webdriver-evaluate-response  
__webdriverFunc  
__webdriver_script_fn  
__$webdriverAsyncExecutor  
__lastWatirAlert  
__lastWatirConfirm  
__lastWatirPrompt  
$chrome_asyncScriptInfo  
$cdc_asdjflasutopfhvcZLmcfl_

瞭解了這個特點之後，就可以在瀏覽器使用者端JS中通過檢測這些特徵串來判斷當前是否使用了selenium，並將檢測結果附加到後續請求之中，這樣伺服器端就能識別並攔截後續的請求。

常用繞過selenium監測1

正常登入 window.navigator.webdriver == undefined
自動化的 window.navigator.webdriver == true

from selenium import webdriver
options = webdriver.ChromeOptions()
# 此步驟很重要，設定為開發者模式，防止被各大網站識別出來使用了Selenium
options.add_experimental_option('excludeSwitches', ['enable-automation'])
#停止載入圖片
options.add_experimental_option("prefs", {"profile.managed_default_content_settings.images": 2})
browser = webdriver.Chrome(options=options)
browser.get('https://www.taobao.com/')

常用繞過selenium監測2

from selenium import webdriver
chrome_options = webdriver.ChromeOptions()
chrome_options.add_experimental_option('debuggerAddress','127.0.0.1:9222')
browser=webdriver.Chrome(executable_path=r'C:UsersTRAppDataLocalGoogleChrome
Applicationchromedriver.exe',chrome_options=chrome_options)
browser.get('http://www.zhihu.com')

終端輸入如下指令：chrome.exe --remote-debugging-port=9222 --user-data-dir=“D:cdsf”(需要谷歌驅動在系統環境變數下，然後再執行程式)

remote-debugging-port是你程式碼中指定的埠debuggerAddress；executable_path是你谷歌驅動位置；user-data-dir隨便指定一個目錄就行

常用繞過selenium監測3

1.使用chrome的遠端偵錯模式結合selenium來遙控chrome進行抓取，這樣不會攜帶指紋資訊

步驟:

- 使用偵錯模式手工啟動chrome,進入chrome的安裝路徑,例如chrome裝在 C:programgooglechrome.exe下
- 進入chrome安裝路徑
- 執行命令:
#注意埠不要被佔用，防火牆要關閉,user-data-dir用來指明組態檔的路徑
chrome.exe --remote-debugging-port=9222 --user-data-dir="指向任意空資料夾"

2.啟動完·之後新建python檔案

執行程式碼：

import requests
from selenium import webdriver
chrome_options = "C:UsersAdministratorAppDataLocalGoogleChromeApplicationchrome.exe"
chrome_options  = webdriver.ChromeOptions()
chrome_options.add_experimental_option('debuggerAddress','10.8.13.95:9222')
browser = webdriver.Chrome(chrome_options=chrome_options)
browser.get("https://www.zhihu.com/signup?next=%2F")
# chrome.exe --remote-debugging-port=9222 --user-data-dir="D:moni"

這樣監測的就不是selenium模擬了

常用繞過selenium監測4

def selenium(js):
    option = webdriver.ChromeOptions()
    # option.add_argument('--headless')
    option.add_experimental_option('useAutomationExtension', False)
    option.add_experimental_option('excludeSwitches', ['enable-automation'])
    bro = webdriver.Chrome(executable_path='./chromedriver', options=option)  # 彈出瀏覽器，要給瀏覽器驅動的地址
     # 開啟頁面優先執行的js,execute_cdp_cmd
    bro.execute_cdp_cmd("Page.addScriptToEvaluateOnNewDocument", {
        "source": """
            Object.defineProperty(navigator, 'webdriver', {
              get: () => undefined
            })
          """
    })
    bro.implicitly_wait(10)
    bro.get('https://www.toutiao.com/')
    time.sleep(5)
    print(bro.page_source)  # 獲取頁面返回的html程式碼
    bro.execute_script(js)
    input()

以上就是selenium執行js並繞過webdriver監測常見方法的詳細內容，更多關於selenium執行js繞過webdriver監測的資料請關注it145.com其它相關文章！

selenium執行js並繞過webdriver監測常見方法

目錄