Python实现爬虫设置代理IP和伪装成浏览器的方法(转载)

　　https://www.jb51.net/article/139587.htm

　　

 chrome_options = webdriver.ChromeOptions()

        chrome_options.add_argument('--proxy-server=127.0.0.1:10809')
        chrome_options.add_argument('--headless')
        chrome_options.add_argument('--disable-gpu')

        self.driver = webdriver.Chrome(chrome_options=chrome_options)
        # self.driver.set_page_load_timeout(20)
        self.driver.maximize_window()

采集过程中开启了VPN

设置：