有不少朋友在开发爬虫的过程中喜欢使用Selenium + Chromedriver，以为这样就能做到不被网站的反爬虫机制发现。
在自动化测试中，某些问题无法解决，我们可以执行javascript代码通过seleniumwebdriver的使用方法来解决我们遇到的问题，如浏览器显示的内容很多，但是要定位底部或者顶部的，就得控制浏览器滚动条来实现，webdriver可以通过execute_script()来调用js来实现。WebDriver类提供了下列方法来执行Javascript代码：
做自动化过程中，会发现有的按钮点击不了，或者点击没有反应，也没有报错，或者不能处理滚动条等场景，我们可以通过JavaScript定位来解决这些问题。
web driver 是可以直接操作浏览器的driver, 根据不同的浏览器，需要不同的driver,下面列出了一些可用的web driver的镜像地址： chrom浏览器的web driver（chromedriver.exe）：http://npm.taobao.org/mirrors/chromedriver/ firefox（火狐浏览器）的web driver （geckodriver.exe）：https://github.com/mozilla/geckodriver/releases IE(IEDriverServer_Win32_3.9.0.zip 是32位的3.9.0 driver): http://selenium-release.storage.googleapis.com/index.html web自动化测试中，可以通过webdriver的API，向浏览器发送相应的request, 然后实现自动测试，比如自动点击，自动填写，自动滚动，自动切换窗口/标签页等。 但是如上所述，不同的浏览器有不同的web driver. 那么自然也就有不同的API提供，所以对于同一个功能，那么就需要基于不同的driver,学习不同的API,这操作起来，岂不是头疼？ 在python中，我们只需要按照如下导入webdriver, 就可以轻松用一种方式来应付各种不同的web driver了:
前言 有时候元素明明已经找到了，运行也没报错，点击后页面没任何反应。这种问题遇到了，是比较头疼的，因为没任何报错，只是click事件失效了。 本篇用2种方法解决这种诡异的点击事件失效问题 一、遇到的问
1.网站模拟登录 # douban.py from selenium import webdriver from selenium.webdriver.common.keys import Keys import time driver = webdriver.PhantomJS() driver.get("http://www.douban.com") # 输入账号密码 driver.find_element_by_name("form_email").send_keys("xxxxx@xxxx.c
前言 背景介绍：做wap页面自动化的时候，把url地址直接输入到浏览器（chrome浏览器有手机wap模式）上测试，有个按钮死活点不到，用wap模式的触摸事件也无法解决，后来想用jquery去执行点击。 发现报$ is not defined。 # coding:utf-8 # 作者：上海-悠悠 import time from selenium.webdriver.chrome.options import Options from selenium import webdriver from selen
JavaScript 是一种脚本语言，有的场景需要使用 js 脚本注入辅助我们完成 Selenium 无法做到的事情。
主要思路就是爬取播放页里的播放源文件的url，程序可以读取用户输入并返回歌单，，，因为在线网站包含大量js，requests就显得很无奈，又懒得手动解析js，于是寄出selenium大杀器。 selnium是一款很强大的浏览器自动化测试框架，直接运行在浏览器端，模拟用户操作，目前selenium支持包括IE,Firefox,Chrome等主流浏览器及PhantomJS之类的无头浏览器，selenium+phantomjs也是现在很火的一个爬虫框架。 代码不长，做的有些简陋，以后可以加个GUI
主要分享测试的学习资源，帮助快速了解测试行业，帮助想转行、进阶、小白成长为高级测试工程师。
模拟浏览器功能，自动执行网页中的js代码，实现动态加载。使请求更加真实(好像是真的浏览器在请求)
请注意，本文编写于 1727 天前，最后修改于 996 天前，其中某些信息可能已经过时。
面试题：selenium中隐藏元素如何定位？这个是很多面试官喜欢问的一个题，如果单纯的定位的话，隐藏元素和普通不隐藏元素定位没啥区别，用正常定位方法就行了 但是吧~~~很多面试官自己都搞不清楚啥叫定位，啥叫操作元素（如click,clear,send_keys）
有些爬虫需要携带sessionStorage中的一个参数, 这个参数是存在浏览器中的, 使用requests获取不到, 只能使用selenium来获取
driver.find_element_by_id('kw1').send_keys('selenium')
前言 最近看到群里有小伙伴贴出一组面试题，最近又是跳槽黄金季节，小编忍不住抽出一点时间总结了下， 回答不妥的地方欢迎各位高手拍砖指点。 一、selenium中如何判断元素是否存在？ 首先selenium里面是没有这个方法的，判断元素存在需要自己写一个方法了。 元素存在有几种形式，一种是页面有多个元素属性重复的，这种直接操作会报错的；还有一种是页面隐藏的元素操作也会报错 判断方法参考这篇：Selenium2+python自动化36-判断元素存在 二、selenium中hidden或者是display ＝ n
之前经常使用 execute_script() 方法执行 JavaScript 的来解决页面上一些 selenium 无法操作的元素，但是一直无法获取执行的返回值。 最近翻文档，发现 execute_script 是可以拿到 JavaScript 执行后的返回值的
在使用selenium做UI自动化的时候，发现有些弹出窗上的输入框，输入文本后，使用clear()方法无效。 这样会导致再次输入时，字符串不是清空后输入，而是跟着后面输入一长串，导致结果不准。 经过几次尝试，先click()点击该输入框，再输入，发现还是无效，最终有以下2种方法可以解决
熟悉jmeter的同学应该都知道,jmeter是做服务端性能测试的工具。jmeter还可以进行Web端自动化测试,这个功能也是我最近才知道的,个人认为比较有意思。参考了网上一些文章,文本就尝试体验下如何使用。
测试过程中经常遇到时间控件，需要我们来选择日期，一般处理时间控件通过层级定位来操作或者通过调用js来实现。
太热，热的写不动了。。 导入需要用到的包 from selenium import webdriverimport time 设置好浏览器模式，使用手机模式访问 # 手机浏览器的型号mobileEmulation = {"deviceName":"iPhone X"} # 初始化options = webdriver.ChromeOptions()options.add_experimental_option('mobileEmulation', mobileEmulation)driver = web
先来地址：Github: https://github.com/mr-m0nst3r/Burpy
最近做了许多登陆项目，我会优先选择使用requests来模拟请求，但是有些参数实在是很难获取，这个时候我会使用Selenium，也还是遇到了各种坑，也算是见识到了很多的验证措施。
实际上，我们使用默认的方式初始化 WebDriver 打开一个网站，下面这段 JS 代码永远为 true，而手动打开目标网站的话，则为：undefined
Selenium 可以通过 execute_script() 来执行 JavaScript 脚本。
最近好像对这方面需求比较高，总有人问我爬过携程没，我寻思着拿selenium也没太大难度吧，晚上就做了个demo。
当获取一个网站的图片数据时，只能爬取到图片的名称，并不能获得链接，而且也不能获得xpath表达式。这是应用了图片懒加载技术。
selenium的介绍 知识点： 了解 selenium的工作原理 了解 selenium以及chromedriver的安装 掌握 标签对象click点击以及send_keys输入 ---- 1. selenium运行效果展示 Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，Selenium 可以直接调用浏览器，它支持所有主流的浏览器（包括PhantomJS这些无界面的浏览器），可以接收指令，让浏览器自动加载页面，获取需要的数据，甚至页面截屏等。我们可以使用selenium很
在使用Selenium测试一些CMS后台系统时，有时会遇到一些富文本框，如下图所示：
上期我们讲了一些selenium一些最近的元素定位，触发事件，等待等等，今天我们继续来看看接下来的知识点。
前面 3 篇文章讲了 Selenium 的一些基本操作，利用这部分技能，大部分网站的自动化都能顺利完成。
WebDriver在将控制权返回给测试脚本之前，会一直等待到页面完全加载完毕，但如果页面使用了很多AJAX，WebDriver可能无法准确判断页面是否完全加载。
今天主要想写的是，因为更新到chrome88导致了一直使用的selenium爬虫数据自动化采集代码失效了，这已经是第二次因为浏览器更新导致我代码失效了，本着记录自己工作的原则，一直对这方面进行着持续更新，所以也导致了很多小伙伴过来问我这个问题，不了解的可以点击下面链接直达前文，专为解决【chrome88导致无法修改window.navigator.webdriver】的朋友们直接看本篇就可以了
selenium的介绍 知识点： 了解 selenium的工作原理 了解 selenium以及chromedriver的安装 掌握 标签对象click点击以及send_keys输入 ---- 1. selenium运行效果展示 Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，Selenium 可以直接调用浏览器，它支持所有主流的浏览器（包括PhantomJS这些无界面的浏览器），可以接收指令，让浏览器自动加载页面，获取需要的数据，甚至页面截屏等。我们可以使用selenium
关于巡检，之前发过一篇《浅谈质量保障手段之巡检技术》，介绍了使用Python的eyeD3库进行MP3属性信息获取并做音频损坏的判断，可以理解为从服务端层面出发提出的解决方
一．问题介绍 大家都应该有过从百度文库下载东西的经历，对于下载需要下载券的文章，我们可以办理文库VIP（土豪的选择）： 有的人也会在某宝购买一定的下载券，然后进行下载。而另一些勤勤恳恳的人，则会选择上
(一) 方法 方法 简单说明 execute_async_script(script, args) 异步执行JS代码 script:被执行的JS代码 args:js代码中的任意参数 execute_script(script, args) 同步执行JS代码 script:被执行的JS代码 args:js代码中的任意参数 (二) 示例 from selenium.webdriver.common.action_chains import
引言 最近想解决前端开发或测试中的两个问题：一是界面UI的布局适配，能否在测试的过程中，通过命令操作真机打开相应页面然后截屏，通过对图片识别分类，发现有问题的图片，然后及时修复；二是页面性能分析，很多时候页面只能在指定的Webview中使用，能否直接通过命令打开指定的页面，分析页面在真实APP中的性能，并生成报告。这两个问题的前提就是通过命令直接操作手机App，带着问题找线索，于是我就结识了Selenium，下面将结合实例和大家分享一下。 Selenium是什么？ 先看一下官网的解释： Selenium
AJAX（Asynchronouse JavaScript And XML）异步JavaScript和XML。过在后台与服务器进行少量数据交换，Ajax 可以使网页实现异步更新。
遇到问题：document.getElementsByClassName(…)[0] is undefined 选择框如果是select标签的，可以直接用select专用的方法去定位点击操作。其它不是select选择框的时候，那就按正常操作步骤先点输入框，再点选项就行了。 可是有些选择框就是不听话，你会发现用selenium死活定位不到，这个时候只能用万能的js来解决了。
两年前，朋友想知道 Boss 直聘上关于自动驾驶的岗位有哪些 ，于是，笔者写了一个简单的爬虫 crawler-boss ，将岗位的信息收集起来。
最近在使用Appium做爬虫功能，网上全是python + Appium的教程，Appium也支持Node.js开发，作为前端工程师使用Node.js + Appium实现了自动化爬虫功能。
Selenium 是一个用于web应用程序自动化测试的工具，直接运行在浏览器当中，支持chrome、firefox等主流浏览器。可以通过代码控制与页面上元素进行交互（点击、输入等），也可以获取指定元素的内容。
对于前端隐藏元素，一直是selenium自动化定位元素的隐形杀手，脚本跑到隐藏元素时位置时报各种各样的错误，可是这种隐藏的下拉菜单又没有办法避免，所以非常头痛，这一篇只为交流隐藏元素自动化定位处理方法以及宏哥自己的一点浅薄见解。
问卷星我想大家在大学或者工作中多多少少会遇到一些，有的工作经常要填，这个我也是挺咱们的学姐经常抱怨，说是匿名的调查问卷，结果填起来一般要挺久才能搞完，如果多的话还是挺烦的，还有就是大学我们这边会经常遇到，比如加入某个社团，需要填写各种信息，然后各种选项，学校领导有时也会发一些这样的问卷来让我们匿名填写，问卷调查是一种发掘事实现况的研究方式，最大的目的是搜集,累积某一目标族群的各项科学教育属性的基本资料，可分为描述性研究及分析性研究两大类。在决定是否采用问卷法作为研究工具，应考量是否能顺利达成研究目标以及注意研究样本在问卷上的配合度。 对于当代大学生来说，马原思修行策这些课的实践活动离不开问卷调查，可是各种转发过后却只有寥寥数人填写的痛谁又懂呢？
phantomjs 是一个基于js的webkit内核无头浏览器 也就是没有显示界面的浏览器，利用这个软件，可以获取到网址js加载的任何信息，也就是可以获取浏览器异步加载的信息
本人在使用selenium做测试的时候，封装了很多方法，由于工作原因估计很长时间不会更新方法库了，中间关于js的部分还差一些没有完善，其中设计接口的部分暂时就先不发了，以后有机会在更新。
它是怎么做的的呢？一般情况下，我们使用Selenium打开一个网页时，会有一个提示：Chrome正受到自动测试软件的控制。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
