如何向Python脚本添加抓取网站的循环

向Python脚本添加抓取网站的循环可以通过使用循环结构和相关的网络库来实现。下面是一个示例代码，演示了如何使用Python的requests库和循环结构来实现网站的循环抓取：

import requests
import time

websites = ['https://www.example1.com', 'https://www.example2.com', 'https://www.example3.com']

def fetch_website(url):
    try:
        response = requests.get(url)
        # 在这里可以对网页内容进行处理或者保存
        print(f"成功抓取网站：{url}")
    except requests.exceptions.RequestException as e:
        print(f"抓取网站失败：{url}，错误信息：{str(e)}")

def main():
    for website in websites:
        fetch_website(website)
        time.sleep(1)  # 可以添加延时，避免频繁请求

if __name__ == '__main__':
    main()

上述代码中，首先定义了一个包含多个网站URL的列表websites，然后定义了一个fetch_website函数，用于抓取指定网站的内容。在main函数中，通过循环遍历websites列表，依次调用fetch_website函数来抓取每个网站的内容。为了避免频繁请求，可以在每次抓取后添加适当的延时，例如使用time.sleep函数。

需要注意的是，上述代码仅仅是一个简单的示例，实际应用中可能需要考虑更多的异常处理、日志记录、数据存储等方面的问题。此外，还可以结合其他库或工具，如BeautifulSoup、Scrapy等，来进一步处理和解析抓取到的网页内容。

推荐的腾讯云相关产品：腾讯云函数（Serverless云函数计算服务），腾讯云CVM（云服务器），腾讯云COS（对象存储服务），腾讯云VPC（私有网络），腾讯云CDN（内容分发网络），腾讯云数据库MySQL版等。具体产品介绍和链接地址可以参考腾讯云官方网站：https://cloud.tencent.com/