使用Node.js实时抓取网页

npm init

npm install cheerio axios

const axios = require('axios');
const cheerio = require('cheerio');

const url = 'https://example.com'; // 将此URL替换为要抓取的网页URL

axios.get(url)
  .then(response => {
    const html = response.data;
    const $ = cheerio.load(html);

    // 在此处添加您的抓取逻辑
    // 例如，以下代码将获取页面上所有链接
    const links = $('a');
    links.each(function () {
      const link = $(this).attr('href');
      console.log(link);
    });
  })
  .catch(error => {
    console.error(error);
  });