Markdown批量发布到Github

  • 简书天然支持Markdown格式, 而Github仓库中的README.md也天然支持Markdown格式
  • 简书后台支持一键下载所有写过的Markdown的文章, Github提供了脚本创建仓库的Api
  • 我们从简书后台获取所有写过的Markdown文章, 然后运行一个脚本, Github将会新建一个仓库, 作为我们博客的新地址

运行效果:

本地目录

本地目录

GitHub新仓库

github新仓库

新仓库细节

脚本的说明:

  • 仓库的英文名,是怎么来的? 仓库的英文名由原markdown的文件名通过google翻译而来
  • 如何认证github用户名和密码? 用户名和密码被分离到了单独的配置文件中, 填写配置文件即可
  • 程序如何获取本地markdown文档的位置? 程序会通过递归方法, 将脚本所在的同级目录和子目录下所有的以.md结尾的所有文件读取出来, 这些.md结尾的文档都会被建立为Github仓库
  • 简书允许这种行为么? 简书并不反对这种行为, 我写过一篇手动迁移简书markdown的细则: 简书文章发布到GitHub, 简叔打赏了我10颗糖,至今难忘...
  • 为什么写这个脚本 ? 关于简书文章发布到GitHub, 里面详细介绍了手动迁移的整个过程, 后来有读者评论:

评论 为了回应读者的热情, 我完成了这个脚本

  • 脚本适用于所有本地markdown文档一键发布到github么?
  • 是的, 这里用简书做例子, 只是因为简书打包下载的文档包,很适合做说明, 任何本地的md文档,只要在脚本的同级目录或者子目录, 都可以一键迁移到GitHub - 脚本依赖的环境: 安装了git, 安装了curl, 安装了python3, 在GitHub中添加了公钥

从简书打包获取markdown:

获取Markdown

运行脚本之前需要在GitHub添加公钥

  • 在本地生成一对秘钥(以Ubuntu为例), 进入到.ssh目录下
cd ~/.ssh/
  • 生成一对秘钥
ssh-keygen -t rsa -C "lijianzhao1208@gmail.com"
  • 为秘钥起个名字(可直接回车跳过)

秘钥起个名字

  • 将公钥内容添加到github(实现免密向远程仓库提交代码)

复制公钥(github.pub)内容

复制公钥(github.pub)内容

登录github,并粘贴公钥内容

github主页

添加容器

添加公钥

添加完成

源码

主逻辑脚本
import os
import json
import re
from googletrans import Translator

def getAllMd (file_dir):
# 获取当前目录下所有的css文件路径
    all_whole_path_files = []
    for root, dirs, files in os.walk(file_dir):
        for file in files:
            try:
                if file[-3:] == ".md":
                    file_info = [root+'/', file]
                    all_whole_path_files.append(file_info)
            except Exception as e:
                print(e)
    print(all_whole_path_files)
    return all_whole_path_files


def getRepName(zhCnName):
    translator = Translator()
    enName = translator.translate(zhCnName, dest='en').text
    enNameList = enName.split(' ')
    enName = ''
    for en in enNameList:
        if re.match('[a-zA-Z]+' ,en):
            en = en.capitalize()
            enName += en
    # 将当前获得的字符串拆分
    enStrList = [e for e in enName]
    # 符合要求的列表索引
    indexList = []
    for index, enStr in enumerate(enStrList):
        if re.match('[a-zA-Z]' ,enStr):
            indexList.append(index)
        else:
            pass

    rep_name = ''

    for index in indexList:
        rep_name += enStrList[index]


    # 如果翻译的仓库名长度大于100,则截断
    if len(rep_name) > 100:
        rep_name = rep_name[0:101]

    return rep_name

def getInfo(whole_path_file):
    info = {}
    with open("./inputInfo.txt", 'r') as f:
        jsonStr = ''
        lines = f.readlines()
        # 过滤注释, 生成json格式
        for line in lines:
            if '#' not in line:
                jsonStr += line
        info = json.loads(jsonStr)
        RepName = getRepName(whole_path_file[1][:-3])
        info['GitHubRepositoryName'] = RepName

    return info

# 在github创建远程仓库
def CreateRepository(info):
    GitHubUserName = info['GitHubUserName']
    GitHubPassWord = info['GitHubPassWord']
    GitHubRepositoryName = info['GitHubRepositoryName']
    # 这里有详细的参数说明: https://developer.github.com/v3/repos/#create
    new_command = 'curl -i -u ' + '\'' +GitHubUserName + ':' + GitHubPassWord + '\'' +' -d ' + '\''+ '{"name": ' + '\"'+GitHubRepositoryName +'\"'+ ', ' + '"auto_init": ' + 'true, ' + '"private": ' + 'false, ' + '"gitignore_template": ' + '"nanoc"}' + '\'' + ' https://api.github.com/user/repos'
    result = os.popen(new_command).readlines()
    if ('HTTP/1.1 201 Created\n' in result):
        print("创建成功")
        return True
    else:
        return False
    
def GetRepository(info):
    GetAllRepCommand = 'curl -i -u ' + '\'' + info['GitHubUserName'] + ':' + info['GitHubPassWord'] +'\'' + ' https://api.github.com/user/repos'
    print(GetAllRepCommand)
    result = os.popen(GetAllRepCommand).readlines()
    keyWord = info['GitHubUserName']+'/'+info['GitHubRepositoryName']
    # 判断仓库是否创建成功
    if not (keyWord in str(result)):
        return
    # 获取仓库到同级目录下
    # git@github.com:zhaoolee/ChatRoom.git
    GetRepCommand = 'git clone git@github.com:' +  keyWord + '.git'

    # 将仓库获取到本地
    result = os.popen(GetRepCommand).readlines()

# 将资源文件放入仓库
def FillRepository(info):
    AllFileName = os.listdir('./')
    PreReadMeFile = info['file_info'][0] + info['file_info'][1]

    # 将md文件替换原有的README.md
    ReplaceMdFileCommand = 'cp ./' + PreReadMeFile + ' ./'+ info['GitHubRepositoryName'] + '/README.md'
    print("==>", ReplaceMdFileCommand, "<==")
    result = os.popen(ReplaceMdFileCommand).readlines()

# 将文件提交到仓库
def PushRepository(info):
    inputRepository = 'cd ' + info['GitHubRepositoryName']
    addCommand = 'git add .'
    result = os.popen(inputRepository+'\n'+addCommand).readlines()
    commitCommand = 'git commit -m "完成项目的初始化"'
    result = os.popen(inputRepository+'\n'+commitCommand).readlines()
    pushCommand = 'git push'
    result = os.popen(inputRepository+'\n'+pushCommand).readlines()
    print("完成")


# 获取新建仓库所需的完整信息
def GetAllWholeRepInfo(all_whole_path_files):
    # 包含所有仓库信息
    all_whole_rep_info = []
    for whole_path_file in all_whole_path_files:
        # 包含新建仓库所需的完整信息
        whole_rep_info = getInfo(whole_path_file)
        whole_rep_info['file_info'] = whole_path_file
        all_whole_rep_info.append(whole_rep_info)
    return all_whole_rep_info

def main():
    all_whole_path_files = getAllMd('./')
    all_whole_rep_info = GetAllWholeRepInfo(all_whole_path_files)
    # 依次创建仓库
    for info in all_whole_rep_info:
        CreateRepository(info)
        GetRepository(info)
        FillRepository(info)
        PushRepository(info)

if __name__ == '__main__':
    main()
配置脚本
{
    # 用户名
    "GitHubUserName": "zhaoolee", 
    # 用户密码
    "GitHubPassWord": "github"
}

总结: 这不是一篇独立的文章, 如果你想了解更多, 可以参考我以前写过相关的两篇:

这个脚本已经可以用了,但还不完美, 欢迎在文章底部或Github仓库https://github.com/zhaoolee/MarkDonw2GitHub 提出改进建议

为便于管理, 相关资源整合到一张独立的帖子,链接如下: http://www.jianshu.com/p/4f28e1ae08b1

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏令仔很忙

考试系统--底层框架发布时遇到的问题解决方案(Window7 IIS6.0)(一)

     原因:在安装Framework v4.0之后,再启用IIS,导致Framework没有完全安装

1233
来自专栏别先生

使用shell脚本定时采集日志数据到hdfs分布式文件系统

6367
来自专栏FreeBuf

基于Github的源码白盒扫描工具Raptor

Raptor(猛禽)是一款基于WEB界面的github源代码扫描器。你只需要给它一个Github repository的URL地址,它就能进行自动扫描。 简单介...

4587
来自专栏沈唁志

百度站长链接提交的js代码推送进化版

4766
来自专栏IT笔记

Nginx学习之HTTP/2.0配置

哎呀,一不小心自己的博客也是HTTP/2.0了,前段时间对网站进行了https迁移并上了CDN,最终的结果是这酱紫的(重点小绿锁,安全标示以及HTTP/2.0请...

38914
来自专栏北京马哥教育

2017年企业版高薪运维经典基础面试题汇总

1.解释下什么是GPL,GNU,自由软件? GPL:(通用公共许可证):一种授权,任何人有权取得、修改、重新发布自由软件的权力。 GNU:(革奴计划):目标是创...

4186
来自专栏中国白客联盟

基于splunk的主机日志整合并分析

大家都知道,主机日志格式过于杂乱对于日后的分析造成了不小的困扰,而splunk的轻便型、便携性、易安装性造就了其是一个日志分析的好帮手。

1362
来自专栏我和PYTHON有个约会

爬虫 0030~ requests利刃出鞘

requests第三方封装的模块,通过简化请求和响应数据的处理,简化繁琐的开发步骤和处理逻辑、统一不同请求的编码风格以及高效的数据处理特性等而风靡于爬虫市场。

951
来自专栏惨绿少年

练习题三

第1章 练习题 1.1 第1题 取得/etc/hosts 文件的权限 如何取得/etc/hosts 文件的权限对应的数字内容,如-rw-r--r--  为 64...

2200
来自专栏python学习指南

python爬虫(四)_urllib2库的基本使用

本篇我们将开始学习如何进行网页抓取,更多内容请参考:python学习指南 urllib2库的基本使用 所谓网页抓取,就是把URL地址中指定的网络资源从网络...

20910

扫码关注云+社区

领取腾讯云代金券