Selenium Error: session deleted because of page crash 해결하기

소개

Selenium을 사용하는 동안 'session deleted because of page crash'라는 에러 메시지를 만나게 될 수 있습니다. 이 에러는 일반적으로 브라우저 세션이 비정상적으로 종료되었거나 페이지가 충돌했을 때 발생합니다. 이러한 문제의 원인과 이에 대한 해결 방법을 알아보겠습니다.

에러 발생 예시 코드

먼저, 이 에러를 일으킬 수 있는 간단한 예시 코드를 살펴보겠습니다.

from selenium import webdriver

# Chrome 드라이버 경로 설정
driver = webdriver.Chrome(executable_path='/path/to/chromedriver')

# 웹페이지 열기
driver.get('http://example.com')

# 페이지를 최대한 확장하는 과정에서 충돌 발생 가능성
driver.execute_script("window.open('http://example.com/someheavyprocess', '_self');")

에러 해결 방법

1. 드라이버의 버전 확인

드라이버와 브라우저 버전이 호환되지 않을 경우, 세션이 삭제될 수 있습니다. 브라우저와 관련된 드라이버의 최신 버전을 확인하고 업데이트 해주세요.

# Chrome 드라이버 업데이트 예시
pip install --upgrade chromedriver-autoinstaller

2. 페이지 로딩 시간을 늘리기

페이지가 너무 빨리 로드되거나, 로드 중에 문제가 발생하여 세션이 삭제될 수 있습니다. 페이지 로딩 시간을 늘려주세요.

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By

# 페이지 로딩까지 최대 10초 대기
WebDriverWait(driver, 10).until(EC.presence_of_element_located((By.ID, 'some_id')))

3. 페이지의 복잡성 줄이기

페이지가 포함하는 요소나 스크립트가 많을 경우 브라우저가 충돌할 수 있습니다. 해당 페이지의 복잡성을 줄이는 것도 하나의 방법입니다.

4. 헤드리스 모드 활용

헤드리스 모드는 브라우저가 UI 없이 실행되므로 메모리 사용량이 줄어들고, 충돌 가능성도 낮아집니다. 아래의 코드를 추가하여 헤드리스 모드로 실행해보세요.

options = webdriver.ChromeOptions()
options.add_argument('--headless')
driver = webdriver.Chrome(executable_path='/path/to/chromedriver', options=options)

마무리

이 블로그 글에서는 Selenium에서 발생하는 'session deleted because of page crash' 에러를 해결하기 위한 여러 가지 방법을 살펴보았습니다. 브라우저와 드라이버의 버전을 확인하고, 페이지 로딩 시간을 조절하며, 헤드리스 모드를 활용하는 등의 방법을 통해 이 문제를 해결할 수 있습니다. Selenium을 사용할 때는 이러한 에러에 대한 인지와 빠른 대처가 필요합니다.