☰

Selenium XVFB - レンダラーからメッセージを受信できません。

tag-icon • tag-icon linux docker headless xvfb selenium
Selenium XVFB - レンダラーからメッセージを受信できません。

概要:

セレンスクレーパーは完璧に動作しますヘッドレスモードです。卵を産む仮想ディスプレイにエラーが表示されないXVFB経由：

from xvfbwrapper import Xvfb

vdisplay = Xvfb()
vdisplay.start()
vdisplay.stop()

しかし、私はいつ一緒に実行しようとしましたが、エラーが発生しました。そして：

[エラー] SessionNotCreatedException：メッセージ：切断されたためにセッションが作成されませんでした。レンダラーからメッセージを受信できません（セッション情報：chrome = 96.0.4664.0）。

逆追跡：

Traceback (most recent call last):
  File "/var/task/slack_main.py", line 34, in handler
    scrape_price(asin_list)
  File "/var/task/slack_main.py", line 58, in scrape_price
    driver = webdriver.Chrome("/opt/chromedriver",options=options)
  File "/var/lang/lib/python3.9/site-packages/selenium/webdriver/chrome/webdriver.py", line 70, in __init__
    super(WebDriver, self).__init__(DesiredCapabilities.CHROME['browserName'], "goog",
  File "/var/lang/lib/python3.9/site-packages/selenium/webdriver/chromium/webdriver.py", line 92, in __init__
    RemoteWebDriver.__init__(
  File "/var/lang/lib/python3.9/site-packages/selenium/webdriver/remote/webdriver.py", line 275, in __init__
    self.start_session(capabilities, browser_profile)
  File "/var/lang/lib/python3.9/site-packages/selenium/webdriver/remote/webdriver.py", line 365, in start_session
    response = self.execute(Command.NEW_SESSION, parameters)
  File "/var/lang/lib/python3.9/site-packages/selenium/webdriver/remote/webdriver.py", line 430, in execute
    self.error_handler.check_response(response)
  File "/var/lang/lib/python3.9/site-packages/selenium/webdriver/remote/errorhandler.py", line 247, in check_response
    raise exception_class(message, screen, stacktrace)

構成：

私の全体のSeleniumとXVFBの設定は次のとおりです。

from selenium import webdriver
from selenium_stealth import stealth
from xvfbwrapper import Xvfb

vdisplay = Xvfb()
vdisplay.start()
options = webdriver.ChromeOptions()
prefs = {"browser.downloads.dir": "//tmp//", "download.default_directory": "//tmp//", "directory_upgrade": True}
options.add_experimental_option("prefs", prefs)
options.binary_location = '/opt/chrome/chrome'
#options.add_argument('--headless') #toggled on and off when running with or without XVFB
options.add_argument('--no-sandbox')
options.add_argument("--disable-gpu")
options.add_argument("--window-size=1280x1696")
options.add_argument("--single-process")
options.add_argument("--disable-dev-shm-usage")
options.add_argument("--disable-dev-tools")
options.add_argument("--no-zygote")
options.set_capability('unhandledPromptBehavior', 'ignore')
options.add_argument("download.default_directory=/tmp")
driver = webdriver.Chrome("/opt/chromedriver",options=options)
stealth(driver,
        languages=["en-US", "en"],
        vendor="Google Inc.",
        platform="Win32",
        fix_hairline=True,
        )
vdisplay.stop()
driver.close()

なぜモニターに接続できないのですか？私の考えでは、これは "--headless"スイッチに関連しているようです。

バージョンとツール：

  • セレンバージョン3.141.0
  • xvfbwrapper バージョン 0.2.9
  • DockerはAWS Lambdaにコンパイルしてプッシュするために使用されます。使用する基本イメージ （XVFBの有無にかかわらず、ドッカーファイルはどのように変更されません。）

関連情報