获取带有自定义html锚点标记的下一篇文章链接
获取带有自定义HTML锚点标记的下一篇文章链接，可以通过以下步骤实现：
- 首先，需要获取当前文章的HTML内容。
- 使用HTML解析器（如BeautifulSoup）解析HTML内容，以便能够提取出文章中的锚点标记。
- 在解析后的HTML中，查找下一个带有自定义HTML锚点标记的文章链接。
- 获取该链接的URL地址。
- 如果需要，可以进一步处理该URL地址，例如拼接完整的文章链接或者进行其他操作。
下面是一个示例代码，使用Python和BeautifulSoup库来实现上述步骤：
import requests
from bs4 import BeautifulSoup
def get_next_article_link_with_anchor(url):
# 发送HTTP请求获取文章内容
response = requests.get(url)
html_content = response.text
# 使用BeautifulSoup解析HTML内容
soup = BeautifulSoup(html_content, 'html.parser')
# 查找下一个带有自定义HTML锚点标记的文章链接
next_link = None
anchor_tags = soup.find_all('a')
for tag in anchor_tags:
if tag.has_attr('class') and 'custom-anchor' in tag['class']:
next_link = tag['href']
break
return next_link
# 示例用法
current_article_url = 'https://example.com/current-article'
next_article_link = get_next_article_link_with_anchor(current_article_url)
print("下一篇文章链接：", next_article_link)在上述示例代码中，我们首先发送HTTP请求获取当前文章的HTML内容。然后，使用BeautifulSoup库解析HTML内容，并查找带有自定义HTML锚点标记的文章链接。最后，返回下一篇文章的链接。
请注意，示例代码中的'custom-anchor'是一个自定义的锚点标记类名，你可以根据实际情况进行修改。此外，示例代码中的print语句用于输出结果，你可以根据需要进行适当的修改或替换。
相关·内容
2回答
python:美丽的汤提取信息
python、beautifulsoup
我使用漂亮的汤解析HTML，如下所示：
html_content2 ="""
<h3 style="cear: both;">
<abbr title="European Union">EU</abbr>Investment</h3>
<div class="conditions">
<p>bla bla bla
</p>
</div>
<p style="margin-bottom: 0;">
&l
浏览 6提问于2022-10-28得票数 1
1回答
用BeautifulSoup在同一方法中刮李氏和id
python、html、web-scraping、beautifulsoup
如何修改findAll方法的参数以读取li和id的参数？李的是元素，id的是属性，对吗？
#Author: David Owens
#File name: soupScraper.py
#Description: html scraper that takes surf reports from various websites
import csv
import requests
from bs4 import BeautifulSoup
###################### SURFLINE URL STRINGS AND TAG ######################
浏览 1提问于2016-10-13得票数 0
回答已采纳
1回答
如何从feed解析器解析的提要文章中呈现django模板中的html内容
python、django
我正在解析提要url并获取文章内容。但是，当我试图在HttpResponse中将内容呈现到html页面时，内容中的html元素或标记将按原样呈现，就像其他内容一样。在将其呈现为django模板之前，我是否必须处理内容以显示其中的html内容？
另外，如何获取给定提要的图标并在django模板中呈现。
我是django和python的新手。我不知道该怎么做。
我使用feed解析器来解析提要urls。
我使用下面的代码从文章内容中获取url列表。NOw，我应该如何获得.png图标url，因为某些内容中的图标被呈现为.png格式，并且有几个.png链接。如何区分哪一个是偏爱的？
import fee
浏览 3提问于2012-03-23得票数 1
2回答
避免Python 3中的堆栈溢出
python、python-3.x、stack、beautifulsoup、overflow
免责声明:我对计算机科学完全不了解，也不知道幕后发生的任何事情的内部运作情况。教自己如何使用互联网上的任何东西来编码。
Python版本：
Python 3.4.3 (v3.4.3:9b73f1c3e601, Feb 24 2015, 22:43:06) [MSC v.1600 32 bit(Intel)] on win32
在普通解析器上工作，其主要目的是获取图像--图像的完整的url，将其保存到一个文件中供稍后下载，然后以一行方式进入下一个映像，这在很大程度上是强制性的，因为该站点的web体系结构很差。当我完成程序时，我在第976次执行过程中遇到了一个错误。
RuntimeError:
浏览 6提问于2015-08-20得票数 2
回答已采纳
1回答
Python Beautifulsoup重复条目的
python、image、beautifulsoup、duplicates、screen-scraping
这是从4chans照相板上抓取的图片。问题是，它会将同一图像抓取两次。我不明白为什么我会得到重复的照片，如果有人能帮助我，那就太棒了。
from bs4 import BeautifulSoup
import requests
import re
import urllib2
import os
def get_soup(url,header):
return BeautifulSoup(urllib2.urlopen(urllib2.Request(url, headers=header)), 'lxml')
image_type = "image_name
浏览 0提问于2016-06-13得票数 1
3回答
从一个页面获取所有链接美丽的汤
python、web-scraping、beautifulsoup、html-parsing
我正在使用美汤从一个页面获取所有的链接。我的代码是：
import requests
from bs4 import BeautifulSoup
url = 'http://www.acontecaeventos.com.br/marketing-promocional-sao-paulo'
r = requests.get(url)
html_content = r.text
soup = BeautifulSoup(html_content, 'lxml')
soup.find_all('href')
我得到的只是：
[]
如何获得该页
浏览 0提问于2017-09-29得票数 13
回答已采纳
1回答
Python -使用BeautifulSoup创建URL列表的问题
python、list、beautifulsoup
我试图使用BeautifulSoup制作Python，但是我收到一个错误，我试图将非字符串或其他字符缓冲区类型写入文件。通过检查程序输出，我发现我的列表包含了许多没有的项目。除了没有，我也有很多图片和东西不是链接，但在我的名单中的图像链接。如何才能将URL添加到我的列表中？
import urllib
from BeautifulSoup import *
try:
with open('url_file', 'r') as f:
url_list = [line.rstrip('\n&#
浏览 1提问于2016-08-25得票数 1
回答已采纳
1回答
用漂亮的汤换一条线，然后再把它插入循环中。
python、html、beautifulsoup
我正在使用漂亮的汤，我得到标签('a')的url。
现在我的问题是，我不知道如何得到一条特定的线路。
我让用户输入某一行position，以及循环运行countrepeat的次数。这将在代码中实现。
所以我想不出两件事：
如何只获得position行(例如，第3行)。
如何在循环中再次实现该URL，以便它遵循该链接
我的代码im使用：
import urllib.request, urllib.parse, urllib.error
from bs4 import BeautifulSoup
import ssl
# Ignore SSL certificat
浏览 3提问于2017-12-11得票数 0
回答已采纳
1回答
用BeautifulSoup和python抓取Instagram标签页面
python、beautifulsoup
我按照BeautifulSoup教程从网站上抓取信息，我需要从标签研究页面获取instagram帖子的链接，但我没有任何结果，
url_tag = 'https://www.instagram.com/explore/tags/food'
response_url_tag = get(url_tag)
html_soup = BeautifulSoup(response_url_tag.text, 'html.parser')
#print(html_soup.prettify())
for link in html_soup.find_all('a
浏览 16提问于2020-03-01得票数 0
2回答
通过循环Python提取子页面链接
python、beautifulsoup
通过循环Python提取子页面链接
我只需要提取所有"A类“股票页面底部的”下一步“的链接使用动态循环。我对python很陌生，但在VB中编写了相同的代码，并且运行得很好。这段代码必须有语法错误，一定要忍受它。
我们会感谢你的帮助。
import requests
from bs4 import BeautifulSoup
import pandas as pd
import re
sub_link=[]
sub_link_edit=[]
def convert(url):
if not url.startswith('http://'):
retur
浏览 2提问于2020-05-28得票数 0
回答已采纳
5回答
bs4 -如何从网站中提取表格数据？
python、beautifulsoup、screen-scraping
这是链接，
我使用的是BeautifulSoup，我的目标是从其中提取表。代码是我写的..
from bs4 import BeautifulSoup
import requests
import pandas as pd
url="https://www.vit.org/WebReports/vesselschedule.aspx"
html_content = requests.get(url).text
soup = BeautifulSoup(html_content, "lxml")
gdp_table = soup.find("table&
浏览 37提问于2021-07-07得票数 0
2回答
如何在html源代码中提取href属性
python、html、web-scraping、beautifulsoup
这是我正在处理的HTML源代码： <a href="/people/charles-adams" class="gridlist__link"> 所以我想要做的是提取href属性，在本例中应该是"/people/charles-adams"，并带有漂亮的So模块。我需要这个，因为我想获得的特定网页的soup.findAll方法的html源代码。但是我正在努力从网页中提取这样的属性。有人能帮我解决这个问题吗？ 附言:我正在使用这个方法，通过Python模块beautifulSoup来获取html源代码： request = reque
浏览 24提问于2019-09-23得票数 0
2回答
如何从BeautifulSoup结果中获得第三个链接
python、python-2.7、beautifulsoup
我使用下面的代码来使用BeautifulSoup检索一串链接。它返回所有的链接，但是我想得到第三个链接，解析那个链接，然后从那个链接得到第三个链接，依此类推。我如何修改下面的代码来实现这一点？
import urllib
from BeautifulSoup import *
url = raw_input('Enter - ')
html = urllib.urlopen(url).read()
soup = BeautifulSoup(html)
# Retrieve all of the anchor tags
tags = soup('a')
for
浏览 3提问于2016-06-12得票数 2
回答已采纳
4回答
使用BeautifulSoup在脚本标记中找到一个键
python、web-scraping、beautifulsoup
我要做的是从HTML文档中的脚本标记中获取产品ID。不幸的是，StockX没有提供公共API，所以我必须从HTML中抓取数据。以下是我的尝试(这两项工作)：
尝试1
import requests
PRODUCT_URL = 'https://stockx.com/supreme-steiff-bear-heather-grey'
HEADERS = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrom
浏览 5提问于2019-11-13得票数 1
回答已采纳
1回答
从另一个站点获取数据时的简单正则表达式
php、regex
我想得到第一篇文章内容从网址到我的网站。这是我需要得到的网址：
http://www.vietvbb.vn/up/forumdisplay.php?f=15
所以我用萤火虫来做。我需要在这个html代码之间获得第一个post内容：
我就这样做了：
$url = '；$data = file_get_contents($url)；preg_match(‘/r(.*？)\r<\/td>/s’，$data，$tc)；
但是，正如您所看到的，它不仅返回了td标记中我真正需要的内容，还给了我td标记中的第一个内容帖子和一个带有id=postmenu_xxx的d
浏览 2提问于2012-07-22得票数 0
1回答
尝试使用美汤访问[‘KeyError’]时的样式
python、beautifulsoup
我尝试使用Beautiful Soup4访问页面上的DIV元素的样式，但我一直收到一个关键错误。我知道样式肯定在那里，因为我可以使用浏览器中的检查器检查它们，并且我可以看到带有"header large border“类的DIV的样式。(见附图) 这是我的代码； url = 'https://www.themoviedb.org/movie/595743-sas-red-notice'
response = requests.get(url, headers=headers)
soup = bs4.BeautifulSoup(response.text, 'h
浏览 31提问于2021-09-19得票数 1
2回答
如何管理多标签/多分类文章/帖子的数据库和查询
php、mysql
我有一个文章网站，每一篇文章都有一些标签。我的数据库结构应该如何？
这是我的文章表(文章)：
article_id (key) | article_content | article_title | article_lang_id
这是我的标签(Tag_list)的列表：
tag_list_id (key) | tag_list_name | tag_list_description
这是我的标签表(tag_link)
tag_id (key) | article_id (f-key) | tag_list_id (f-key)
我用php回显文章内容，我
浏览 1提问于2014-08-02得票数 0
回答已采纳
2回答
用硒获取数据
python、selenium、web-scraping
我正在学习Python，我的第一个项目是使用Selenium从NFL站点获取数据。在循环添加数据并单击next按钮直到结束时，我遇到了一些问题。出现的错误消息如下：
selenium.common.exceptions.NoSuchElementException:消息:没有这样的元素:无法找到元素：{“方法”："xpath"，“选择器”："// *@ title =“Next Page”}(会话信息: chrome = 89.0.4389.114)
另外，我不知道这段代码是否会将数据添加到我的数据框架中。我做错了什么或者少了什么？
# -*- encoding: ut
浏览 1提问于2021-04-10得票数 0
回答已采纳
1回答
我想从python中的url用户那里获取输入。
python-3.x、url
我想从用户输入的网站名称和最大编号。他想要抓取的页面的数量website...but无法获得任何解决方案..这是我的代码
import requests
from bs4 import *
from urllib import request
url1 = input("Enter url you want to crawl:")
max_pages1 = int(input("Enter no. of pages you want to crawl:"))
def web_crawler(max_pages,url):
page = 1
w
浏览 10提问于2017-02-19得票数 0
1回答
如何呈现下一页和上一页，从mongodb获取数据并使用nodejs
node.js、mongodb
我正在制作一个博客网站。在哪里存储了一些文章，我希望下一个和以前的数据点击按钮。我不明白，如何解决这个问题。与我分享一些与此相关的解决方案和建议。信息..。我正在将所有的文章呈现到网页上，在这个页面中，这些文章存储在一个带有标题的列表中，并得到一个用于阅读整个内容的文章。我使用MongoDB和nodejs作为模板ejs
浏览 2提问于2021-12-25得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
