根据站点生成sitemap.xml的脚本

pip3 install -r requirement.txt

# 当前域名的http链接
url_root = 'https://git.zeekling.cn'
# 需要抓取的根链接，可以多写几个
url_mine_list = [
    'https://git.zeekling.cn/',
    'https://git.zeekling.cn/zeekling'
]
# 抓取的最大栈深度，默认为2,如果网站比较大的话不建议设置太大，可以在url_mine_list多设置url
max_depth = 2
# 不需要写进sitemap.xml的链接
url_robot_arr = [
    '/user/sign_up',
    '/user/login',
    '/user/forgot_password'
]

# 第一个参数为sitemap.xml的位置
create_xml('sitemap.xml', get_url.url_res_final)

./sitemap.py

0 */6 * * * cd /root/git-sitemap && ./sitemap.py