首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

折腾词库,一个词库互转程序

最近又有人提出,希望将搜狗的细胞词库和QQ的分类词库转换成其他输入法的词库,这个功能也很有必要,所以我打算继续折腾这个程序,将词库转换的范围继续扩大!...经过两天的努力,终于完成了我的词库转换小工具,将现有词库的以文本格式导出,然后选择源词库格式和新词库格式,单击“转换”按钮即可词库格式的转换。...放出程序截图如图所示: 目前我这个转换小工具还只支持纯文本格式的词库,因为对于搜狗细胞词库(scel格式)和QQ分类词库(qpyd格式)我没有具体的解析这些词库的算法或者程序集,所以无法解析成文本并进行转换...如果大家谁知道怎么解析搜狗细胞词库和QQ分类词库的话还希望不吝赐教! 如果希望将搜狗细胞词库导入到谷歌拼音中,该怎么实现呢?首先需要到官方网站去下载txt格式的细胞词库,该词库中只有词条,没有拼音!...如何获得QQ分类词库的Txt格式? 如何获得一个词条的准确拼音? 搜狗手机输入法好像不支持本地词库导入,电脑上的词库就没办法导入到其中了? 支持更多的输入法类型的词库

79010
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    python 分词库jieba

    算法实现: 基于Trie树结构实现高效的词图扫描,生成句子中汉字所有可能成词情况所构成的有向无环图(DAG) 采用了动态规划查找最大概率路径, 找出基于词频的最大切分组合 对于未登录词,采用了基于汉字成词能力的...,/ 后/ 在/ 日本/ 京都/ 大学/ 日本京都大学/ 深造 Process finished with exit code 0 添加自定义词典 开发者可以指定自己自定义的词典,以便包含jieba词库里没有的词...虽然jieba有新词识别能力,但是自行添加新词可以保证更高的正确率 用法: jieba.load_userdict(file_name) # file_name为自定义词典的路径 词典格式和dict.txt...import jieba jieba.initialize() # 手动初始化(可选)在0.28之前的版本是不能指定主词典的路径的,有了延迟加载机制后,你可以改变主词典的路径: jieba.set_dictionary

    16510

    深蓝词库转换2.9发布——支持Gboard词库的导入导出

    最新的Gboard已经支持简体中文词库的导入导出,于是我根据网友的讨论,在代码中进行了实现,使用深蓝词库转换可以直接生成Gboard支持的词库文件,然后复制到手机上后就可以直接导入了,而不需要再调整格式...2.打开深蓝词库转换2.9版,选定备份的文件,选择源词库是搜狗备份词库,而目标词库选择Gboard: 3.由于我的源词库内容很多,有些是一个字的,有些是只使用过一次的,所以通过使用“高级设置”中的“词条过滤...生成的是一个“Gboard词库.zip”文件,和当前运行的深蓝词库转换.exe在同一个文件夹。 5.通过USB或者微信之类的手段,将生成的词库zip文件传到手机上。...7.选择“导入”菜单选项,然后选择刚才我们传到手机上的词库zip文件。一会儿后,Gboard词库就导入成功了。这里可能会等几分钟,甚至黑屏,这取决与我们词库的词条数量。...Gboard对词库的支持,感觉更像是自定义短语的支持,而不是拼音的支持,所以我们以后可以进一步升级,在上面支持我们习惯的双拼词库,其他输入法的词库

    8.3K20

    将搜狗细胞词库转换为其他输入法词库——深蓝词库转换1.1发布

    于是乎,想到将功能进行增强,弥补上一个版本留下的遗憾,经过一天的努力,终于把搜狗细胞词库的scel格式解析出来了,于是我的深蓝词库转换1.1发布了!...介绍一下该小工具的功能: 1.到搜狗拼音官方网站下载想要导入的细胞词库,最近在举行世界杯,就以官方的“2010南非世界杯词库【官方推荐】”为例,下载到本地硬盘上。...2.打开“深蓝词库转换1.1”(需要.net framework 2.0的支持),选择刚下载的词库路径,然后选择导出的词库类型,比如“百度手机”这个输入法,然后单击“转换”按钮,如图所示: 3.将词库保存到本地硬盘上...,然后再传到手机上,在手机上用百度手机输入法导入该词库即可。...目前就是QQ分类词库的格式我还没有解析出来,希望接下来能够在下一版本中实现QQ分类词库的导出吧。

    80330

    如何批量导入搜狗词库

    核心就是使用list.files函数获取工作目录下面的所有词库文件名,然后使用lapply函数全部导入。最后把导入的文件汇总并去除重复的观测后输出,就大功告成啦。 一步一步来。...步 骤分解 首先是建立相关目录 # 建立相关目录 ---- # 建立数据目录,本项目所有数据都保存在这个文件夹下(包括搜狗词库文件)。...-201602", data.dir) # 获取所有搜狗词库的完整路径 scel.paths <- list.files(cidian.dir, pattern = ".scel$", full.names...= T) 其次是依次导入目录下所有词库 # 将所有词库逐个导入,并输出成.txt文件 ---- lapply(seq_along(scel.paths), function(i) { decode_scel...output = str_c(scel.paths[i], ".txt"), cpp = TRUE)}) %>% invisible() 接着,将所有词库合并成一个词库

    2.9K10

    深蓝词库转换2.7版发布——支持Mac原生输入法词库,QQ拼音新词库qcel格式

    2020年过年期间,由于冠状病毒肺炎的流行,在家无事,就把搁置了很久的词库进行了改进。...本次2.7版的更新主要包含了以下新特性: 一、MacOS原生简体拼音输入法自定义短语词库的支持 在MacOS的“系统偏好设置”中选择“键盘”,“文本”,即可看到,Mac简体拼音输入法的自定义短语词库。...假如我们想把某搜狗细胞词库转换为Mac简体拼音的词库,可以在Mac中安装dotnet core,下载解压imewlconverter_Linux_Mac.tar.gz,然后运行以下命令: p.p1 {...二、QQ词库qcel格式的支持  QQ输入法和搜狗拼音合并后,QQ输入法放弃了原有的qpyd格式,而是采用了和搜狗细胞词库scel基本一模一样的qcel格式。我们从官网下载的词库都是新qcel格式了。...无论是Linux还是MacOS,只要安装了dotnet core 3.1 runtime,就可以通过命令行的形式进行词库转换。

    2.7K20

    深蓝词库转换1.7发布,支持QQ分类词库解析

    昨晚收到了keke的邮件,得知了该大侠对QQ分类词库的解析有所研究,并Java实现了对QQ分类词库的解析,大喜,于是今天通过一天的努力,终于在C#中实现了对QQ分类词库(qpyd格式)的解析。...,所以花1天就实现了该功能,并做了其他一些小调整,发布了深蓝词库转换1.7版。...深蓝词库转换1.7主要做了以下3方面的改动: 支持QQ分类词库(qpyd格式)的解析。 支持拖拽单个文件时感知文件格式,自动识别转换的源格式。...习惯了搜狗输入法,但是却有一个专业的词库只有QQ分类词库有,现在有了深蓝词库转换,不管选择用哪种输入法,其他方的词库都可以为我所用!...附上QQ分类词库转换为搜狗拼音词库的截图: 深蓝词库转换是一个开源项目,项目地址:http://code.google.com/p/imewlconverter/ 深蓝词库转换1.7的下载地址是:http

    55710

    Linux绝对路径和相对路径

    Linux 中,简单的理解一个文件的路径,指的就是该文件存放的位置。 只要我们告诉 Linux 系统某个文件存放的准确位置,那么它就可以找到这个文件。...我们知道,Linux 系统中所有的文件(目录)都被组织成以根目录“/”开始的倒置的树状结构 绝对路径一定是由根目录 / 开始写起。...系统一个文件名,它无法找到指定文件;而当将 bin 文件的绝对路径传递 Linux 系统时,它就可以成功找到。...举个例子,当我们使用 root 身份登录 Linux 系统时,当前工作目录默认为 /root,如果此时需要将当前工作目录调整到 root 的子目录 Desktop 中,当然可以使用绝对路径,示例代码如下...在linux中,确定文件位置,有绝对路径(absolute)与相对路径(relative)两种表示方法: 1.

    42230

    hanlp 加载远程词库示例

    微信图片_20190426094013.jpg 说明 ·目前的实现方式是以远程词库的内容重新构建CustomDictionary.trie,demo主要是为了实现同步远程词库,对性能暂不作考虑,对性能要求要以...·ik的方案,远程词库并不含有词性词频等额外信息,这里为了保证词库和复用也保持一致,默认词性为Nature.nz,词频为1 CoreDictionary.Attribute att = new CoreDictionary.Attribute...(Nature.nz, 1); ·ik支持多个远程词库,该示例只支持单项 多词库在现方案下,要作任务协作的处理,虽然不难,但改动后和ik原码的差距会比较大 项目只是个参考,因此代码尽量和ik保持一致,一个远程词库...,对大部分场景也够用了 测试 启动nginx作为远程词库服务 docker run -d --name nginx -p 1888:80 -v $(pwd)/nlp:/usr/share/nginx/html...sentence=小明北飘在北京 词库同步任务间隔1分钟,服务启动后浏览器多刷新几次便能看到区别 如要扩展至本地项目 1 添加依赖 org.apache.httpcomponents

    87440

    结巴分词库_中文分词

    (2)采用了动态规划查找最大概率路径, 找出基于词频的最大切分组合 ——最大概率路径计算: 通过对有向无环图的观察,我们不难发现从某一位置到一定距离后的另外一个位置存在多条路径,即有多种分词的结果,这时...,我们就需要计算出最大概率的路径,从而获得概率最大的切分词结果 因为有向无环图DAG的每个节点都是带权的,权重为前缀词典中每个词的词频;我们需要求得route = (w1,w2,w3,…,wn),使得...动态规划是指依次到达一个节点,通过得到前面的节点到终点的最大路径概率,最终通过求出最大权重得到切词结果。...首先通过语料训练出HMM相关的模型,然后利用Viterbi算法进行求解,Viterbi算法实际上是用动态规划求解HMM模型预测问题,即用动态规划求概率路径最大(最优路径)。...这时候,一条路径对应着一个状态序列。最终得到最优的状态序列,然后再根据状态序列,输出分词结果。 分词模式 结巴中文分词支持的三种分词模式包括:全模式、精确模式和搜索引擎模式。

    1.5K10

    深蓝词库转换2.4版发布,支持最新的搜狗用户词库备份bin格式

    很高兴的告诉大家,感谢GitHub上的h4x3rotab提供python版的搜狗用户词库备份bin格式的解析算法,感谢tmxkn1提供了C#版的实现,深蓝词库转换终于迎来了一个重大更新,能够支持搜狗用户词库的...搜狗bin词库只解析到了用户词条和词频,没有拼音,所以如果要导出其他拼音输入法,中间转换工具会根据词条的内容重新生成拼音。...另外在2.4版中,增加了用户词频强制设置的功能,比如将搜狗用户词库bin格式备份转换为Win10自带的微软拼音,那么词频会导致该词条在微软拼音上的位置不对,那么我们就需要忽略掉搜狗bin格式解析出来词频...,再声讨一下一个叫“ 奥创词库转换”的,把我的深蓝词库转换代码拿来改一下界面,就变成了自己的软件,极度无耻和恶心。...深蓝词库转换一直是免费绿色开源的,但是也看不惯这种无底线的剽窃行为,强烈谴责一下。

    1.7K20
    领券