Google于2021年1月19日在稳定版中发布了Chrome88(大更新)
更多更新信息可以自己搜搜看
今天主要想写的是,因为更新到chrome88导致了一直使用的selenium爬虫数据自动化采集代码失效了,这已经是第二次因为浏览器更新导致我代码失效了,本着记录自己工作的原则,一直对这方面进行着持续更新,所以也导致了很多小伙伴过来问我这个问题,不了解的可以点击下面链接直达前文,专为解决【chrome88导致无法修改window.navigator.webdriver】
的朋友们直接看本篇就可以了
一、出师未捷身先死的sycm数据自动化 二、关于修改window.navigator.webdriver代码失效问题 三、(新)关于修改window.navigator.webdriver代码失效问题
版本信息
造成代码无法使用的主要原因与之前一样:
经过几天的排查主要原因是
chrome88集成了V8 JavaScript引擎的8.8版 ,导致的原先修改属性的js代码失效
# 原先修改window.navigator.webdriver的js代码块
Object.defineProperty(navigator, 'webdriver', {
get: () => undefined
})
报错翻译: 无法使用defineproperty函数重新定义webdriver的属性
对js不是太熟的我本计划使用新的js写法对window.navigator.webdriver进行重定义,经过几天的努力没成功,其他小伙伴可以尝试下这个方向,有好的方法可以评论区交流
最终解决办法:
还是从selenium着手,使用--disable-blink-features=AutomationControlled
参数完美去除window.navigator.webdriver
#手动登录
def login(extension_path,tmp_path):
chrome_options = webdriver.ChromeOptions()
# 设置好应用扩展
chrome_options.add_extension(extension_path)
#添加下载路径
prefs = {'profile.default_content_settings.popups': 0, 'download.default_directory':tmp_path,
"profile.default_content_setting_values.automatic_downloads":1}#允许多个文件下载
chrome_options.add_experimental_option('prefs', prefs)
#修改windows.navigator.webdriver,防机器人识别机制,selenium自动登陆判别机制
chrome_options.add_experimental_option('excludeSwitches', ['enable-automation'])
chrome_options.add_argument("--disable-blink-features=AutomationControlled")
# drive = webdriver.Chrome(chrome_options=chrome_options)
drive = webdriver.Chrome(options=chrome_options)
url = 'https://sycm.taobao.com/portal/home.htm'
drive.implicitly_wait(10)
drive.get(url)
input("请手动登录,成功后输入【1】:")
#叉掉页面无关元素后再输入1继续执行
drive.maximize_window() #窗口最大化
tm=random.uniform(1,2)
time.sleep(tm)
return drive
测试成功,完美修改,登录成功!