• 当前位置：首页
  • IT科技
  • 未知错误：由于未知错误导致页面崩溃，会话被删除：无法确定 ChromeDriver Selenium 崩溃的选项卡的加载状态

未知错误：由于未知错误导致页面崩溃，会话被删除：无法确定 ChromeDriver Selenium 崩溃的选项卡的加载状态

2024-12-20 08:37:00
admin
原创
73
摘要：问题描述：我正在使用使用 Python 和 Selenium 的 InstaPy。我按照 Cron 启动脚本，但有时它会崩溃。所以它真的很不规律，有时运行得很好。我也已经在 GitHub Repo 上发帖了，但没有得到答案，所以我现在在这里问是否有人知道原因。这是一台 Digital Ocean Ubuntu...

问题描述：

我正在使用使用 Python 和 Selenium 的 InstaPy。我按照 Cron 启动脚本，但有时它会崩溃。所以它真的很不规律，有时运行得很好。我也已经在 GitHub Repo 上发帖了，但没有得到答案，所以我现在在这里问是否有人知道原因。

这是一台 Digital Ocean Ubuntu 服务器，我正在无头模式下使用它。驱动程序版本在日志中可见。以下是错误消息：

ERROR [2018-12-10 09:53:54] [user]  Error occurred while deleting cookies from web browser!
b'Message: invalid session id
  (Driver info: chromedriver=2.44.609551 (5d576e9a44fe4c5b6a07e568f1ebc753f1214634),platform=Linux 4.15.0-42-generic x86_64)
'
Traceback (most recent call last):
  File "/root/InstaPy/instapy/util.py", line 1410, in smart_run
    yield
  File "./my_config.py", line 43, in <module>
    session.follow_user_followers(['xxxx','xxxx','xxxx','xxxx'], amount=100, randomize=True, interact=True)
  File "/root/InstaPy/instapy/instapy.py", line 2907, in follow_user_followers
    self.logfolder)
  File "/root/InstaPy/instapy/unfollow_util.py", line 883, in get_given_user_followers
    channel, jumps, logger, logfolder)
  File "/root/InstaPy/instapy/unfollow_util.py", line 722, in get_users_through_dialog
    person_list = dialog_username_extractor(buttons)
  File "/root/InstaPy/instapy/unfollow_util.py", line 747, in dialog_username_extractor
    person_list.append(person.find_element_by_xpath("../../../*")
  File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/remote/webelement.py", line 351, in find_element_by_xpath
    return self.find_element(by=By.XPATH, value=xpath)
  File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/remote/webelement.py", line 659, in find_element
    {"using": by, "value": value})['value']
  File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/remote/webelement.py", line 633, in _execute
    return self._parent.execute(command, params)
  File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/remote/webdriver.py", line 321, in execute
    self.error_handler.check_response(response)
  File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/remote/errorhandler.py", line 242, in check_response
    raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.WebDriverException: Message: unknown error: session deleted because of page crash
from unknown error: cannot determine loading status
from tab crashed
  (Session info: headless chrome=70.0.3538.110)
  (Driver info: chromedriver=2.44.609551 (5d576e9a44fe4c5b6a07e568f1ebc753f1214634),platform=Linux 4.15.0-42-generic x86_64)

During handling of the above exception, another exception occurred:

    Traceback (most recent call last):
  File "/root/InstaPy/instapy/instapy.py", line 3845, in end
    self.browser.delete_all_cookies()
  File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/remote/webdriver.py", line 878, in delete_all_cookies
    self.execute(Command.DELETE_ALL_COOKIES)
  File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/remote/webdriver.py", line 321, in execute
    self.error_handler.check_response(response)
  File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/remote/errorhandler.py", line 242, in check_response
    raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.WebDriverException: Message: chrome not reachable
  (Session info: headless chrome=71.0.3578.80)
  (Driver info: chromedriver=2.44.609551 (5d576e9a44fe4c5b6a07e568f1ebc753f1214634),platform=Linux 4.15.0-42-generic x86_64)

知道其原因是什么以及如何解决？

谢谢你的意见。http: //treestones.ch/的伙计们也帮助了我。

解决方案 1：

尽管您看到的错误如下：

Error occurred while deleting cookies from web browser!
b'Message: invalid session id
  (Driver info: chromedriver=2.44.609551 (5d576e9a44fe4c5b6a07e568f1ebc753f1214634),platform=Linux 4.15.0-42-generic x86_64)
'

主要例外是：

selenium.common.exceptions.WebDriverException: Message: unknown error: session deleted because of page crash
from unknown error: cannot determine loading status
from tab crashed

您的代码试验会为我们提供一些关于哪里出了问题的线索。

解决方案

这个问题有多种解决方案。但是，根据UnknownError: session removed because of page crash from tab crashed ，这个问题可以通过以下任一解决方案解决：

  • 添加以下内容chrome_options：

chrome_options.add_argument('--no-sandbox')

  • 由于尺寸太小，Chrome 在某些页面上的 Docker 容器中似乎会崩溃/dev/shm。因此您可能需要修复/dev/shm尺寸太小的问题。

  • 举个例子：

sudo mount -t tmpfs -o rw,nosuid,nodev,noexec,relatime,size=512M tmpfs /dev/shm

  • -v /dev/shm:/dev/shm如果您使用共享主机选项，它也可以工作 /dev/shm

  • 另一种使其工作的方法是添加chrome_optionsas --disable-dev-shm-usage。这将强制 Chrome 使用/tmp目录。但这可能会减慢执行速度，因为将使用磁盘而不是内存。

chrome_options.add_argument('--disable-dev-shm-usage')

来自标签崩溃

来自 tab crashed 的WIP（正在进行的工作）是Chromium 团队长期以来一直在进行的，它与Linux 尝试始终将 /dev/shm 用于非可执行内存有关。以下是参考资料：

  • Linux：Chrome/Chromium SIGBUS/Aw，Snap！小型 /dev/shm 上

  • 当 /dev/shm 太小时，Chrome 会崩溃/无法加载，并且无法覆盖位置

  • 根据Comment61#Issue 736452，修复似乎已在Chrome v65.0.3299.6中得到解决

参考

您可以在以下位置找到几个相关的讨论：

  • org.openqa.selenium.SessionNotCreatedException：从 Jenkins CI 服务器执行时，选项卡崩溃错误导致会话未创建异常

解决方案 2：

如果有人在使用 Docker 容器时遇到此问题：

在创建容器时使用该标志--shm-size=2g，错误就消失了。该标志使容器使用主机的共享内存。

例子

$ docker run -d --net gridNet2020 --shm-size="2g" -e SE_OPTS="-browser applicationName=zChromeNodePdf30,browserName=chrome,maxInstances=1,version=78.0_debug_pdf" -e HUB_HOST=selenium-hub-3.141.59 -P -p 5700:5555 --name zChromeNodePdf30 -v /var/lib/docker/sharedFolder:/home/seluser/Downloads selenium/node-chrome:3.141.59-xenon

来源：https ://github.com/SeleniumHQ/docker-selenium

解决方案 3：

我的 Ubuntu 服务器上出现以下错误：

selenium.common.exceptions.WebDriverException：消息：未知错误：由于选项卡崩溃导致页面崩溃，会话已被删除（会话信息：headless chrome=86.0.4240.111）（驱动程序信息：chromedriver=2.41.578700（2f1ed5f9343c13f73144538f15c00b370eda6706），平台=Linux 5.4.0-1029-aws x86_64）

事实证明，错误原因是服务器磁盘空间不足，解决方案是扩展磁盘空间。您可以查看此问题以获取更多信息。

解决方案 4：

上面的答案解决了我的问题，但由于我需要从 docker-compose.yml 运行它，所以我使用了这个配置，它调用我常规的不变的 DockerFile

docker-compose.yml

version: '1.0'
services:
  my_app:
    build:
      context: .
      #when building
      shm_size: 1gb
    #when running  
    shm_size: 1gb

DockerFile（Ubuntu 上的 selenium -WSL-）

FROM python:3.10

# install google chrome
RUN wget -q -O - https://dl-ssl.google.com/linux/linux_signing_key.pub | apt-key add -
RUN sh -c 'echo "deb [arch=amd64] http://dl.google.com/linux/chrome/deb/ stable main" >> /etc/apt/sources.list.d/google-chrome.list'
RUN apt-get -y update
RUN apt-get install -y google-chrome-stable

# install chromedriver
RUN apt-get install -yqq unzip
RUN wget -O /tmp/chromedriver.zip http://chromedriver.storage.googleapis.com/`curl -sS chromedriver.storage.googleapis.com/LATEST_RELEASE`/chromedriver_linux64.zip
RUN unzip /tmp/chromedriver.zip chromedriver -d /usr/local/bin/

# set display port to avoid crash
ENV DISPLAY=:99

# install selenium
RUN pip install selenium==3.8.0


#install and prepar app

COPY ./requirements.txt ./
# COPY . /app
RUN pip3 install -r requirements.txt
RUN apt-get install -y libnss3

ENV APP_DIR=/app/my_app
RUN mkdir -p ${APP_DIR}
WORKDIR ${APP_DIR}

# COPY . ${APP_DIR} #not needed since we are mapping the volume in docker-compose

CMD [ "my_app.py" ]
ENTRYPOINT [ "python" ]

解决方案 5：

我们在 2024 年 1 月 30 日发布的版本121.0.6167.139中遇到了同样的问题

这是一个 chrome 错误。

降级到以前的版本：
120.0.6099.224并重新开始工作。

已向 Google 报告。更多信息请见此处。Google 拒绝了。该错误在更高版本中仍然出现...

解决方案 6：

我们需要单独指定共享内存，--shm-size=2g 如果是 docker，请使用以下配置 - 这对我来说很好

服务：chrome：图像：selenium/node-chrome：4.0.0-rc-1-prerelease-20210823 shm_size：2gb

解决方案 7：

当我尝试使用相同的驱动程序打开新网页时发生了这种情况Chromium。在我使用的本地机器上运行良好Chrome。

没有起作用：

driver = webdriver.Chrome(options=options)
driver.execute_script("Object.defineProperty(navigator, 'webdriver', {get: () => undefined})")
driver.execute_cdp_cmd('Network.setUserAgentOverride', {
        "userAgent": 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.53 Safari/537.36'})

driver.get('url1')
# Do operations with url1

driver.get('url2')
# Do operations with url2 -> did not work and crashed

以下是我正在使用的解决方案，它对我有用。即重新初始化the driver

def setup_driver():
    global driver
    driver = webdriver.Chrome(options=options)
    driver.maximize_window()
    driver.execute_script("Object.defineProperty(navigator, 'webdriver', {get: () => undefined})")
    driver.execute_cdp_cmd('Network.setUserAgentOverride', {
        "userAgent": 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.53 Safari/537.36'})


setup_driver()
driver.get('url1')
# Do operations with url1
driver.close()

setup_driver()
driver.get('url2')
# Do operations with url2
driver.close()

解决方案 8：

我不确定这是否是唯一可能的原因和解决方案，但在彻底调查了这个我时不时遇到的错误后，我发现了以下证据：

  1. 在 Selenium Grid 节点的日志中（您可以通过在 docker 主机上执行以下命令来显示：）sudo docker logs <container-id>，我发现了很多错误，如下所示：[SEVERE]: bind() failed: Cannot assign requested address (99)。从我读到的内容来看，此错误通常意味着没有可用的端口。

  2. 当显示节点内运行的进程时（sudo docker exec -it bash然后ps aux），我发现了 300 多个chrome-driver进程实例（您可以使用来计算它们ps aux|grep driver|wc -l）

在本地运行时，我知道chrome-driver进程通常在创建 实例时调用ChromeDriver，并在调用 时终止driver.Quit()（我使用 C#，而不是 Python）。因此我得出结论，有些测试不会调用drive.Quit()。

结论

driver.Quit()就我而言，我发现，尽管我们在方法中调用了[TearDown]（我们使用 NUnit），但在该行之前还有一些代码可能会引发异常。当这些前面的行之一引发异常时，调用的行driver.Quit()不会到达，因此随着时间的推移，我们在 Selenium Grid 节点上“泄漏”了chrome 驱动程序进程。这些孤立进程导致可用端口（可能还有内存）的资源泄漏，这也导致浏览器的页面崩溃。

解决方案

鉴于上述结论，解决方案非常简单。我们必须将前面的代码包装driver.Quit()在 a 中try/finally，并将对 的调用放在子句driver.Quit()中finally，如下所示：

[TearDown]
public void MyTearDown()
{
       try
       {
              // Perform any tear down code you like, like saving screenshots, page source, etc.
       }
       finally
       {
              _driver?.Quit();
       }
}

解决方案 9：

就我而言sandbox，shm设置没有帮助，所以我最终定期关闭当前选项卡并切换到新选项卡，如下所示：

import selenium
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

def refresh_tab(driver):
    driver.execute(selenium.webdriver.remote.command.Command.NEW_WINDOW)
    WebDriverWait(driver, 10).until(EC.number_of_windows_to_be(2))
    driver.close()
    driver.switch_to.window(driver.window_handles[0])

解决方案 10：

Message: unknown error: session deleted because of page crash from unknown error: cannot determine loading status from tab crashed
(Session info: headless chrome=95.0.4638.69)

发生此错误的原因是网页加载等待时间不足

（错误消息表明会话由于网页崩溃而被删除。还有一个问题是它无法确定页面是否正在加载。经过研究，我发现主要问题是没有等待足够长的时间让网页加载。我通过检查错误、进行一些测试以及阅读有关会话和崩溃在无头 Chrome 版本 95.0.4638.69 中的工作方式来解决这个问题。）

解决方案 11：

我遇到了同样的问题，我检查了脚本中发生错误的日​​志，然后我添加了一些等待，即time.sleep(2)就在错误发生之前，我的问题就解决了。

相关推荐
置顶 2024年20款好用的项目管理软件推荐，项目管理提效的20个工具和技巧
2024年20款好用的项目管理软件推荐，项目管理提效的20个工具和技巧
  为什么项目管理通常仍然耗时且低效？您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议？这确实是耗费时间和精力。借助软件工具的帮助，您可以一目了然地全面了解您的项目。如今，国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件？项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1008  
如何利用IPD项目流程图应对项目变更
如何利用IPD项目流程图应对项目变更
  在项目管理中，变更是一个不可避免的现象。无论是客户需求的调整、市场环境的变化，还是技术方案的更新，都可能引发项目的变更。如果处理不当，这些变更可能会导致项目延期、成本超支，甚至项目失败。因此，如何有效地应对项目变更，成为项目管理中的核心挑战之一。IPD（集成产品开发）作为一种高效的项目管理方法，其流程图不仅能够帮助团队...
IPD流程中的charter   0  
如何通过华为IPD提升产品开发效率的7个步骤
如何通过华为IPD提升产品开发效率的7个步骤
  IPD（Integrated Product Development，集成产品开发）是华为在长期实践中总结出的一套高效产品开发管理体系。它不仅帮助华为在全球市场中脱颖而出，也成为许多企业提升产品开发效率的参考标杆。IPD的核心在于通过跨部门协作、流程优化和资源整合，实现从需求分析到产品交付的全生命周期管理。通过实施IP...
IPD开发流程管理   0  
华为IPD流程如何实现高效的项目交付
华为IPD流程如何实现高效的项目交付
  华为IPD（集成产品开发）流程是一种以客户需求为导向、跨部门协同的高效项目管理方法。它通过系统化的流程设计和严格的阶段控制，确保项目从概念到交付的每个环节都能高效运作。IPD流程的核心在于打破传统职能部门的壁垒，将产品开发、市场、销售、供应链等关键环节整合到一个统一的框架中，从而实现资源的优化配置和信息的无缝流动。这种...
IPD流程中TR   0  
CDCP评审前必须准备的10个关键文档
CDCP评审前必须准备的10个关键文档
  在项目管理的实践中，CDCP（Certified Data Center Professional）认证评审是一个至关重要的环节。通过这一评审，项目团队不仅能够验证其数据中心设计和运营的合规性，还能提升整体管理水平。为了确保评审的顺利进行，准备一系列关键文档是必不可少的。这些文档不仅是评审的依据，也是项目团队与评审专家...
华为IPD是什么   0  
热门文章
2024年项目管理软件排行榜
2024年20款好用的项目管理软件推荐，项目管理提效的20个工具和技巧
img020
使用 Python 'Requests' 模块的代理
img044
10个项目管理常见问题解答：包括难点和解决方法
项目管理软件
项目延期的原因有哪些？如何有效预防和管理？
项目管理软件
项目管理指南：制定项目实施计划的6大步骤有哪些？
项目里程碑计划模板
项目里程碑计划模板怎么写?设定项目里程碑的5个方法
好用的项目管理软件有哪些
2024年开源项目管理软件有哪些？推荐5款好用的项目管理工具
项目管理软件有哪些？
热门标签
更多>
IPD流程 项目管理 IT项目管理 敏捷开发 项目管理软件 Scrum 敏捷项目管理 IPD流程管理 项目风险管理 项目管理工具 项目经理 极限编程  产品管理  项目经理职责 项目路线图 项目进度管理 测试管理工具 项目预算管理 PMP认证 瀑布式管理 项目范围管理 IT科技 项目管理平台 工程项目管理 项目资源管理 pmp证书考试
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护，随时随地协同办公

内置subversion和git源码管理

每天备份，随时转为私有部署

免费试用