셀레니움에서 프록시 서버를 이용하여 크롤링...

pip install selenium-wire

 

from seleniumwire import webdriver

options = { 'proxy': { 'http': 'http://username:password@host:port', 'https': 'https://username:password@host:port', 'no_proxy': 'localhost,127.0.0.1' # excludes } }

browser = webdriver.Chrome(path_to_driver, seleniumwire_options=options)

 

 

현재 이 부분은 성인만화 부분에서 적용되어질 예정입니다.