Selenium&Heroku:urllib3.exceptions.ProtocolError:('Connection aborted.',ConnectionResetError(104,'peer reset by peer'))

Question

建立:

• 硒:3.141.0
• python:3.6.7
• heroku-stack:heroku-18
• headless-chrome:v71.0.3578.80 buildpack安装
• chromedriver:安装了buildpack v2.44.609551

在heroku中使用selenium时出现此错误:

urllib3.exceptions.ProtocolError: ('Connection aborted.', ConnectionResetError(104, 'Connection reset by peer'))

我用Google搜索但没有运气.错误发生在此代码的最后一行.

---

码

from selenium import webdriver
from selenium.common.exceptions import TimeoutException
from selenium.webdriver.support.wait import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By

UA = 'Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36' \
     '(KHTML, like Gecko) Chrome/39.0.2171.95 Safari/537.36'
DRIVER_PATH = '/app/.chromedriver/bin/chromedriver'

chrome_options = webdriver.ChromeOptions()
chrome_options.binary_location = '/app/.apt/usr/bin/google-chrome'
chrome_options.add_argument(f'--user-agent={UA}')
chrome_options.add_argument(f'--proxy-server=http://my_private_proxy.com:my_port')
chrome_options.add_argument('--disable-gpu')
chrome_options.add_argument('--no-sandbox')

chrome = webdriver.Chrome(executable_path=DRIVER_PATH, options=options)

Answer 1

这个错误信息...

urllib3.exceptions.ProtocolError: ('Connection aborted.', ConnectionResetError(104, 'Connection reset by peer'))

...意味着无头模式下的ChromeDriver无法启动/生成新的WebBrowser（即Chrome 浏览器会话）。

有关您正在使用的二进制文件版本的一些信息将帮助我们更好地分析错误。然而，由于以下几个原因，可能会出现urllib3的此问题：

• 由于您使用的是非 Windows--disable-gpu操作系统，因此不需要参数，如讨论Headless: make --disable-gpu 标记不必要的skyos...@chromium.org 中提到的：

在 Linux 或 macOS 上不再需要此标志。一旦 SwiftShader 在 Windows 上无头模式下断言失败得到修复，它在 Windows 上就变得不必要了。

• 您可以在丢失的 UI 共享上下文中找到详细讨论：在 Headless 模式下通过 ChromeDriver 初始化 Chrome 浏览器

• 此外，您可以添加参数--disable-dev-shm-usage来克服资源有限的问题：

  chrome_options.addArguments("--disable-dev-shm-usage"); // overcome limited resource problems
  

• --disable-dev-shm-usage您可以在讨论org.openqa.selenium.WebDriverException: 未知错误: DevToolsActivePort 文件在尝试启动 Chrome 浏览器时不存在中找到详细讨论

• 根据urllib3.exceptions.ProtocolError: ('Connection aborted.', error(10054, 'An现有连接被远程主机强行关闭'))当您所使用的二进制文件版本之间存在某些不兼容时，就会出现此问题使用。

解决方案

• 将ChromeDriver升级到当前ChromeDriver v2.44级别。
• 将Chrome版本保持在Chrome v69-71级别之间。（根据 ChromeDriver v2.44 发行说明）
• 通过IDE清理项目工作区并仅使用所需的依赖项重建项目。
• 如果您的基本Web 客户端版本太旧，请将其卸载并安装最新的 GA 和发布版本的Web 客户端。
• 重新启动系统。
• 执行你的@Test.