开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

无法通过Selenium从元素get_attribute('href')

Selenium是一个用于自动化浏览器操作的工具，可以模拟用户在浏览器中的各种行为。get_attribute('href')是Selenium中的一个方法，用于获取元素的href属性值。

然而，有时候使用Selenium无法从元素中获取到href属性值的情况可能是由于以下原因导致的：

元素没有href属性：有些元素并不是链接，它们可能是其他类型的元素，如div、span等，并没有href属性。在这种情况下，get_attribute('href')方法将返回None。
元素是动态生成的：有些网页中的元素是通过JavaScript动态生成的，而Selenium默认只能获取到页面加载完成时的元素信息。如果元素是在页面加载完成后通过JavaScript生成的，那么get_attribute('href')方法可能无法获取到正确的值。
元素被隐藏或不可见：有些元素可能被设置为隐藏或不可见，这样即使能够获取到元素的href属性值，也可能是不正确的。这是因为隐藏或不可见的元素可能具有不同的属性值。

解决这个问题的方法有以下几种：

确保元素存在并具有href属性：在使用get_attribute('href')方法之前，可以先使用其他方法如find_element_by_xpath()或find_element_by_css_selector()等来确认元素是否存在，并且具有href属性。
等待元素加载完成：如果元素是通过JavaScript动态生成的，可以使用Selenium提供的等待机制来等待元素加载完成后再获取其href属性值。例如，可以使用WebDriverWait类的until()方法来等待元素的出现。
检查元素的可见性：在获取元素的href属性值之前，可以使用is_displayed()方法来检查元素是否可见。如果元素不可见，可以尝试滚动页面或执行其他操作使其可见，然后再获取其href属性值。

总结起来，无法通过Selenium从元素get_attribute('href')可能是由于元素不存在、动态生成或不可见等原因导致的。在使用Selenium时，我们需要确保元素存在、加载完成并且可见，才能正确获取到元素的href属性值。

腾讯云相关产品和产品介绍链接地址：

腾讯云官网：https://cloud.tencent.com/
云服务器（CVM）：https://cloud.tencent.com/product/cvm
云数据库 MySQL 版：https://cloud.tencent.com/product/cdb_mysql
云原生应用引擎（TKE）：https://cloud.tencent.com/product/tke
云存储（COS）：https://cloud.tencent.com/product/cos
人工智能（AI）：https://cloud.tencent.com/product/ai
物联网（IoT）：https://cloud.tencent.com/product/iotexplorer
移动开发（移动推送、移动分析）：https://cloud.tencent.com/product/mpns
区块链（BCS）：https://cloud.tencent.com/product/bcs
元宇宙（Metaverse）：https://cloud.tencent.com/product/metaverse

相关搜索:Python selenium从href元素获取文本 Selenium无法通过xpath找到元素如何在java中通过Selenium webdriver选择href元素？Python Selenium :无法单击href 使用selenium无法通过id找到元素无法通过Selenium webdriver定位元素？Selenium无法通过类名找到元素 Selenium无法通过id python找到元素 Selenium无法从元素获取文本 Python和Selenium:无法找到要单击的特定(href)元素无法通过Chrome使用Selenium获取元素文本无法通过键盘访问Python Selenium错误元素在selenium python中通过href查找链接仅从Selenium + Python中的元素XPath获取href元素 Selenium无法找到元素如何通过其他方式单击元素从类中获取href - selenium python 如何使用selenium python根据href值查找元素？从锚点XPath(selenium python)获取href 从多个href列表中抓取python selenium 从dom元素获取href属性

相关搜索:

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

web自动化之selenium的特殊用法汇总篇

目录如下： web自动化之selenium的特殊用法（一） 1、get_attribute() 2、js滚动页面 3、Tab键点击页面未展示元素 4、通过空格键执行页面滚动操作 1.摁空格键 2.报错...3、selenium 带有空格的class name且不唯一的元素定位 1、当前浏览器窗口截屏 2、生成网站长截图 3、特殊网页无法长截图，使用多图拼接技术 4、无头模式调整浏览器的实际窗口大小 web...： get_attribute('textContent') #获取元素内的全部HTML： get_attribute('innerHTML') #获取包含选中元素的HTML： get_attribute...('outerHTML') get_attribute('class') get_attribute('name') get_attribute('id') get_attribute('href...= post_list[i].get_attribute('href') # 在新的标签页打开链接 driver.execute_script(f'window.open("{href

2.5K3 0

web自动化之selenium的特殊用法（一）

目录 1、get_attribute() 2、js滚动页面 3、Tab键点击页面未展示元素 4、通过空格键执行滚动滚动操作 1.摁空格键 2.报错：TypeError: list indices must...be integers or slices, not WebElement 1、get_attribute() 官方文档释义 selenium.webdriver.remote.webelement...— Selenium 4.1.0 documentation get_attribute(name) → str[source] Gets the given attribute or property...： get_attribute('textContent') #获取元素内的全部HTML： get_attribute('innerHTML') #获取包含选中元素的HTML： get_attribute...('outerHTML') get_attribute('class') get_attribute('name') get_attribute('id') get_attribute('href

8341 0

爬虫之selenium

# 7 属性获取 # a=html.xpath('//body//a/@href') # # 注意从1 开始取（不是从0） # a=html.xpath('//body//a[1]/@href') #...三、selenium模块的使用 3.1elenium介绍 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题 selenium...本质是通过驱动浏览器，完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持多种浏览器有了selenium能够实现可见即可爬 -使用（本质，并不是python在操作浏览器...# action.move_to_element(元素控件) # 直接把上面的div移动到某个元素上的某个位置 # action.move_to_element_with_offset() #4 调用它...没有直接截取某个元素的功能，现在需要截取全图，然后通过图形软件，再把小图扣出来 # bro.minimize_window() #最小化 # bro.maximize_window() #最大化 #

1.8K2 0

Python爬虫案例：采集青创网批发商品数据（附代码）

开发环境 Python 3.8 Pycharm 2021.2 模块使用 selenium >>> pip install selenium==3.141.0 (指定版本安装) time csv selenium...模拟人的行为去操作浏览器正常爬虫 >>> requests Python代码模拟浏览器对于服务器发送请求 selenium >>> 用python代码 >>> 浏览器驱动 >>> 浏览器 selenium...不仅仅可以控制鼠标点击, 还能控制键盘爬虫代码 # 导入模块 from selenium import webdriver from selenium.webdriver.common.keys...驱动版本是否和谷歌浏览器版本相近 """ # 打开网站 driver.get('https://www.17qcc.com/') # 定位元素标签, 就可以用 css 或者 xpath # 通过css选择器查找元素...('title') # 地址 href = li.find_element_by_css_selector('.rowtitle a').get_attribute('href')

6061 1

Selenium常见元素定位方法和操作的学习介绍

input子元素，name属性和值为username实现 [2] 通过id=loginForm值的form元素找到第一个input子元素 [3] 属性名为name且值为...size 获取元素的尺寸 text 获取元素的文本 get_attribute(name) 获取属性值 location 获取元素坐标，先找到要获取的元素，再调用该方法...= driver.find_element_by_xpath("//div[@id='u1']/a[2]").get_attribute('href') name = driver.find_element_by_xpath...("//div[@id='u1']/a[2]").get_attribute('name') print href,name #属性值: http://www.hao123.com/...但是如何点击“另存为对话框”的“保存”按钮是个难点，目前刚学习阶段，境界没到无法解决。

2.2K2 0

Selenium2+python自动化35-获取元素属性

"_blank" onmousedown="return ns_c({'fm':'behs','tab':'favorites','pos':0}) " href="//www.baidu.com/cache.../sethelp/help.html">把百度设为主页 3.通过driver.text获取到文本三、获取元素的标签 1.获取百度输入框的标签属性四、获取元素的其它属性 1.获取其它属性方法:...get_attribute("属性")，这里的参数可以是class、name等任意属性 2.如获取百度输入框的class属性五、获取输入框内的文本值 1、如果在百度输入框输入了内容，这里输入框的内容也是可以获取到的...六、获取浏览器名称 1.获取浏览器名称很简单，用driver.name就能获取到了（代码参考第七点）七、参考代码 # coding:utf-8 from selenium import webdriver...学习过程中有遇到疑问的，可以加selenium（python+java） QQ群交流:232607095 appium交流QQ群：512200893

1.1K5 0

【python】使用Selenium获取(2023博客之星)的参赛文章

前言 2023博客之星活动已经过了半年之久,出于好奇,想看看目前为止到底有多少人参与了, 由于小助手每次只发单独赛道的, 因此无法窥其全貌,进行对比, 因此写了这个脚本,来分析一下, 看到结果之后,...导入模块 from selenium import webdriver import json from selenium.webdriver.common.by import By from selenium.common.exceptions...") 这部分代码通过find_element()方法定位Class名字为"user-tabs"的元素，并通过find_elements()方法查找其下所有Class名字为"tab-list-item"的元素...然后从页面中找到标签为table的元素，并遍历表格的行和列，将单元格中的数据保存在row_data列表中，然后将row_data添加到result_sheet工作表中。...完整代码如下 from selenium import webdriver import json from selenium.webdriver.common.by import By from selenium.common.exceptions

1251 0

网易云音乐歌曲下载

定位信息好着，就是获取不到元素原因： selenium 打开网页后，默认是在父级 Frame 里，直接搜索是搜不到子 Frame 里的信息的。需要切换 Frame。...blank" allowfullscreen="true"> browser.switch_to.frame('g_iframe') 3. find_elements后点击不了抓取的元素...就是页面元素过期，引用的元素过时，不再依附于当前页面，需要重新定位获取元素对象 find_elements 查找到的是 WebElement 类型的数组数据，含有元素在当前页面的地址信息，调用 click...from selenium.webdriver.common.by import By from selenium.webdriver.common.keys import Keys from selenium.webdriver.support...('title'), 'url': we_gedan.find_element_by_css_selector('a').get_attribute('href'),

1.6K3 0

基于某政府招标网的爬虫

截图示例在selenium模块的使用中，不能直接使用xpath语法获取元素内文字，因为selenium语法要求寻找到的对象必须是html元素，不能是字符串。...解决该办法可以通过移动鼠标和执行滚动页面JS函数实现。隐式等待没啥用，有时候浏览器界面已经可以看到元素，但是获取元素的text还是获取不到，需要使用time.sleep()强制等待。...，Selenium WebDriver 只会与可见元素交互，所以获取隐藏元素的文本总是会返回空字符串（在使用scrapy框架的时候不会存在这个问题）。...# print(project_list[0].get_attribute('href')) # 不能正常打印！...表示非贪婪模式获取，通过在 *、+ 或 ? 限定符之后放置 ?，该表达式从"贪婪"表达式转换为"非贪婪"表达式或者最小匹配。

1.7K1 1

爬虫学习(三)

/：从根节点选取。 //：从匹配选择的当前节点，选择文档中的节点，而不考虑他们的位置。 .：选取当前节点。 ..：选取当前节点的父节点。 @：选取属性。...我们选择元素，右键使用copy XPath的时候，可能此语句在后端代码中无法执行（无法查找到指定的元素），这时就需要使用XPath语法对其进行修改，这也就是为什么有这么方便的工具我们仍然要学习语法。...4.1.3 通过js来反爬普通的爬虫默认情况下无法执行js，获取js执行之后的结果，所以很多时候对方服务器会通过js的技术实现反爬。...4.4.3窗口与框架 XPath无法提取到Iframe框架里面的处理。 selenium标签页的切换： # 1....("属性名") 通过定位获取的标签对象的 get_attribute函数，传入属性名，来获取属性的值代码： from selenium import webdriver driver = webdriver.Chrome

5.7K3 0

Python爬虫之数据提取-selenium定位获取标签对象并提取数据

selenium提取数据知识点：了解 driver对象的常用属性和方法掌握 driver对象定位标签元素获取标签对象的方法掌握标签对象提取文本和属性值的方法 ---- 1. driver对象的常用属性和方法...在selenium中可以通过多种方式来定位标签，返回标签元素对象 find_element_by_id (返回一个元素) find_element(s)_by_class_name...向输入框输入数据element.send_keys(data) 对定位到的标签对象输入数据获取文本element.text 通过定位获取的标签对象的text属性，获取文本内容获取属性值...element.get_attribute("属性名") 通过定位获取的标签对象的get_attribute函数，传入属性名，来获取属性的值代码实现，如下： from selenium import...('href')) driver.quit() ---- 知识点：掌握元素对象的操作方法 ----

3.3K1 0

web自动化之selenium的特殊用法（二）

目录 selenium-键盘操作，keys的的使用（1）keys包的导入（2）组合键使用（4）常用组合键（5）常用功能键 Python-Selenium：如何通过click在新的标签页打开链接...selenium 带有空格的class name且不唯一的元素定位 selenium-键盘操作，keys的的使用（1）keys包的导入 selenium有很完整的键盘操作，都在keys模块里 #导入keys...：如何通过click在新的标签页打开链接？...= post_list[i].get_attribute('href') # 在新的标签页打开链接 driver.execute_script(f'window.open("{href...带有空格的class name且不唯一的元素定位有些class属性中间有空格，如果直接复制过来定位是会报错的InvalidSelectorException: Message: The given

6901 0

selenium总结

selenium提取数据总结附思维导图 1. driver对象的常用属性和方法在使用selenium过程中，实例化driver对象后，driver对象有一些常用的属性和方法 driver.page_source...在selenium中可以通过多种方式来定位标签，返回标签元素对象 find_element_by_id (返回一个元素) find_element(s)_by_class_name...向输入框输入数据element.send_keys(data) 对定位到的标签对象输入数据获取文本element.text 通过定位获取的标签对象的text属性，获取文本内容获取属性值...element.get_attribute("属性名") 通过定位获取的标签对象的get_attribute函数，传入属性名，来获取属性的值代码实现，如下： from selenium import...('href')) driver.quit() 到这里就结束了，如果对你有帮助你，欢迎点赞关注，你的点赞对我很重要

3412 0

selenium基础使用-3-异常问题汇总

1、封装一个函数，判断当前元素是否存在 from selenium.common.exceptions import NoSuchElementException def isElementExist(...xpath获取href链接正常情况下，直接通过如下方式获取即可 href_temp = browser.find_element_by_xpath('//*[@id="1"]/h3/a/@href'...) 但事实上，上述方法selenium会报错，正确的应该为： href_answer = browser.find_element_by_xpath('//*[@id="1"]/h3/a') href_link...= href_answer.get_attribute('href') 3、新开Tab并在多个Tab中切换 # 通过执行js来新开一个窗口 new_tab_js = 'window.open("'...('innerHTML') 5、通过find_element_by_class_name获取元素失败根据Inspect获取到class_name，当去抓取时报错无该元素： best_answer =

4942 0

019：Selenium操作Boss直聘进行一键职位投递

所以我今天就用 Selenium + Python 写了一个自动沟通的脚本。写的时候发现，Boss直聘上面反 Selenium 措施也是很到位的。下面我就介绍下代码实现的具体步骤吧。...= 这里可以通过他固定的一个id来对应我们的xpath去匹配。...如果需要知道自己投递了多少和跟什么职位打招呼了，可以在详情页获取下元素，来获取详细的信息，这个就不多说了。...完整代码： from selenium import webdriver from selenium.webdriver import ActionChains import time from selenium.webdriver...('href') driver.get(xiangqing_url) time.sleep(1) driver.find_element_by_xpath

3.2K4 2

使用selenium定位获取标签对象并提取数据

selenium提取数据文章目录 selenium提取数据知识点： 1. driver对象的常用属性和方法知识点：了解 driver对象的常用属性和方法 2. driver对象定位标签元素获取标签对象的方法...在selenium中可以通过多种方式来定位标签，返回标签元素对象 find_element_by_id (返回一个元素) find_element(s)_by_class_name...向输入框输入数据element.send_keys(data) 对定位到的标签对象输入数据获取文本element.text 通过定位获取的标签对象的text属性，获取文本内容获取属性值...element.get_attribute("属性名") 通过定位获取的标签对象的get_attribute函数，传入属性名，来获取属性的值代码实现，如下： from selenium import...('href')) driver.quit()

1.8K2 0

Selenium无法定位元素之切换Iframe和切换窗口

---- 最近接了个项目，网页元素定位比以往的要全乎许多，多种多样的情况都遇到了，初级高级都用到了，最简单的初级比如直接通过id，name,class来定位获取，高级一点比如模糊查找，模糊匹配，前后查找等等...今天要说一点，关于页面内嵌套的元素查找，以前的项目比较单一，没有遇到什么特别棘手的，最近就遇到了，我能在Chrome浏览器F12开发者模式下通过Xpath或者CSS定位到这个元素，但是当我在运行在脚本中的时候...，搞了一上午（也应该多查下资料，不要在这里死磕）死活定位不到我要的元素，我就奇怪了，为什么会定位不到呢，是电脑出现问题还是脚本出现什么问题？...好了，那下面就来总结一下关于Selenium 切换Iframe和切换窗口（Java 和Python） Java进入Iframe： ? Python进入Iframe： ?...在测试中往往点击某些超链接的时候会在新的窗口打开一个网页，需要跳转到新的网页去进行测试，切换窗口通过记录窗口句柄(WindowHandle)，进行切换。 Java切换窗口： ?

2K3 0

Python爬虫

6，自动化环境检测 selenium自动化工具有的网站会检测出来，大部分可以通过下面两种方式跳过检测,下面两种方式无法处理的话，还可以尝试把页面改为移动端页面(手机模式)，最后还有一种方法就是代理服务器拦截修改...res = soup.select('a[href]') # 指定属性值查找 res = soup.select('a[href="http://example.com/tillie"]') # 查找返回第一个元素...res = soup.select_one('a[href]') # 获取元素的属性值 res = soup.select_one('a[href]').get('href') # 获取元素的文本...res = soup.select_one('a[href]').text Selenium自动化 1.基础操作 from selenium import webdriver import time from...查找单个元素最常用的定位元素的两个方法是通过Xpath和id来定位。

4.4K2 0

Selenium

Selenium 自己不带浏览器，不支持浏览器的功能，它需要与第三方浏览器结合在一起才能使用，本质是python通过代码，借助于浏览器驱动，操作浏览器。...，即在定位元素时，需要等待页面全部元素加载完成，才会执行下一个语句。...元素操作demo 元素操作方法 find_element_by_id ：通过id找 find_element_by_link_text ：通过a标签文字 find_element_by_partial_link_text...：通过name属性找 find_element_by_css_selector ：css选择器 find_element_by_xpath ：xpath选择器 from selenium import...('//body//a/@href') # # 注意从1 开始取（不是从0） # a=html.xpath('//body//a[1]/@href') # 8 属性多值匹配 # a 标签有多个class

3.1K3 0

源码 | Python爬虫之网易云音乐下载

配置基础 Python Selenium(配置方法参照：Selenium配置) Chrome浏览器(其它的也可以，需要进行相应的修改) 分析如果爬取过网易云的网站的小伙伴都应该知道网易云是有反爬取机制的...Python实现该部分将对几个关键的函数进行介绍… 获取歌手信息利用Selenium我们就不需要看对网页的请求了，直接可以从网页源码中提取相应的信息。...接下来就是解析单个tr标签的内容，获取歌曲名字和链接，可以发现两者在class=”txt”标签中，而且链接是href属性，名字是title属性，可以直接通过get_attribute()函数获取。...("a").get_attribute("href") title = content.find_element_by_tag_name("b").get_attribute("title")...，所以我们拥有歌曲id后，可以直接从该链接下载歌词，歌词文件是json格式，所以我们需要用到json包。

2.5K2 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭