我有一个CoNLL NER格式的数据集，它基本上是一个带有两个字段的TSV文件。我想将这个数据集加载到spaCy中，为我的模型中的文本推断新的命名实体标记，并将这些标记写入与新的第三列相同的TSV文件中。doc = nlp(text) 我还设法将CoNLL数据集转换为spaCy的json格式：
浏览 20提问于2019-10-09得票数 1
我遇到了一个问题，编码不是很好，我有一个tsv文件，其中的数据是这样的： ? 各行之间用空行分隔。我试过使用这个： def load_data_spacy(file_path):word \t label \n word \t label \n \nentities, sentence = [], []file.close()
return training_data, unique_labels 但是我无法获得<e
浏览 26提问于2021-10-29得票数 1
我正在尝试将conll格式的数据转换为spacy的json格式来训练模型。 我正在使用spacy的convert来做同样的事情。我已经尝试过这个命令 python -m spacy convert conll_dataset.tsv /Users/user/docs -t json -c ner 我得到一个值错误。Valu
浏览 24提问于2020-11-07得票数 2
我正在使用来注释命名实体，我想用它来训练一个带有spaCy的模型。INCEpTION中有多个选项(例如CoNLL 2000、CoNLL CoreNLP、CoNLL-U)可用于导出带注释的文本。我已经将文件导出为CoNLL-U，我想将其转换为json，因为训练spaCy的NER模块需要此文件格式。有人问过类似的问题，但答案对我没有帮助()。-morphology] [--lang]
我的第一个问题是，我不能将文件转<e
浏览 6提问于2020-12-03得票数 3
我在spaCy文档的部分中有一种新NER类型的训练数据。, { })我想使用spacy 在这些数据上训练一个NER模型。这需要spaCy的中的数据。如何以这种JSON格式写入上述数据(即带有标记字符偏移量跨度的文本)？
在阅读了该格式的</em
浏览 5提问于2018-02-22得票数 7
回答已采纳
我已经将我的数据分为训练和测试两部分。 https://spacy.io/usage/training#ner 根据spacy给出的训练自定义实体的代码片段，似乎没有提前停止。所以我有个问题要问？2.在测试数据上检验模型的准确性。3.如果精度高于以前的模型，则保存它，否则继续。4.执行下一次迭代。 或者我最终的模型在完成所有迭代后，例如30次迭代是最好的模型？？我的</
浏览 22提问于2019-10-14得票数 1
1回答
为了训练新的自定义实体，我们可以使用这里提到的步骤训练模型：Losses: {'ner': 3091.347521599567}Losses: {'ner': 2235.29441855696
浏览 1提问于2019-08-22得票数 1
我之前已经使用CRF++模型来识别电影评论数据集中的NER。然而，我发现spacy在使用和可视化方面非常有效。然而，这里的问题是，我如何在spacy中合并CRF++模型？如果这是不可能的，我如何使用IOB标签训练Spacy NER模型来满足我的需求？
浏览 1提问于2018-05-27得票数 0
我想用wikiner数据集对spaCy的预培训模型做一些评估。但是，这些数据集采用json格式，使用BILUO注释方案。我知道我可以在命令行接口中进行计算，但是我想用Python解释器进行计算，这需要一种不同的数据格式，如下所示。TRAIN_DATA = [("Dogs are loyal", {'entities': [(0, 4, 'ANIMAL)]})]
我想知道是否有一种方法可以将BILUO方案json格式化<e
浏览 0提问于2019-08-06得票数 0
回答已采纳
1回答
我尝试将IOB (每行token-per- NER)文件(训练/测试)转换为Spacy 3二进制格式。python -m spacy convert -c iob -s -n 10 -b fr_core_news_sm /content/ner4archives_v0_test.iob .See https://spacy.io/api/cli#convert 我看到了包含示例数据<
浏览 17提问于2021-10-01得票数 1
2回答
我很难找到正确的方法来注释我的数据。我正在处理与实验室测试有关的文本，我使用的标签如下：( 2)测试对象(例如电池、偷窃光束、.)电池的电压应为5V。是否有人在注释数据方面有经验来解释这是否是正确的方法？或者，我应该在第一个例子中使用电池的测试对象标签吗？还是应该将电池第二个示例电压中的标签组合作为测试规范？
我正在
浏览 1提问于2020-12-15得票数 1
2回答
我已经标记了一个数据集，使用数据works来训练spaCy NER，一切都很好，但是，我刚刚意识到Flair有一种不同的格式，我只是想知道是否有一种方法可以将我的“spaCy‘into”json数据集格式转换为Flair格式：
华盛顿州际公路调至P O
{“实体”：(0，6，&#
浏览 3提问于2020-12-01得票数 1
1回答
我正在使用Spacy创建一个印尼NER模型。我正在使用来自https://raw.githubusercontent.com/yohanesgultom/nlp-experiments/master/data/ner/training_data.txt的训练数据 使用此标记格式的上述训练数据： Sementara itu Pengamat Pasar Modal <ENAMEX TYPE="P
浏览 14提问于2021-05-08得票数 1
我正在尝试升级我的spacy版本到夜间，特别是为了使用spacy transformers 因此我将spacy简单训练数据集转换为如下格式 td = [["Who is Shaka Khan?", "ner": "O", "id": 4}], [{"head": 0, "dep": "", "tag&qu
浏览 26提问于2020-11-04得票数 1
回答已采纳
3回答
我有已经以SpaCy格式标记的数据。例如：但我想尝试使用任何其他NER模型来训练它，例如BERT-NER，它需要IOB标签。有没有SpaCy数据格式到IOB的转换代码？
谢谢!
浏览 0提问于2020-01-14得票数 4
我正在使用flair训练一个自定义的NER模型，但我也想尝试spacy，但我的数据当前采用这种格式1320160208478 B-NUMR ORyan B-PERDsouza B-PER
关于如何将其格式化为spacy NER格式，有什么建议吗？
浏览 42提问于2019-08-19得票数 0
回答已采纳
在执行了将IOB格式的数据转换为兼容spaCy的JSON的步骤后，应该表示句子的值"raw": string在我的JSON中显示为"null“。Otraictie OJehan B-PERS
... continue 然后，我输入命令： python -m spacy convert -c auto"orth":&quo
浏览 25提问于2021-05-04得票数 1
回答已采纳
我正在使用spacy建立一个自定义的NER模型。我想使用我的培训数据创建train.spacy文件。我手动创建了一个spacy.training.Example对象列表，但我希望使用配置文件使用spacy v3培训。因此，我有训练数据的形式，文字和他们相应的标签，为多个文本。需要使用这种格式的培训标签。TRAIN_DATA=[(text,{"entities":[(start,e
浏览 4提问于2021-12-30得票数 1
回答已采纳
我正在训练一门外语的NER，里面有很多unicode项目。我创建了一个IOB文件，并使用cli spacy转换功能使其与spacy兼容，这样我就可以在该集合上进行训练。然而，该文件被转换为us-ascii文件格式。我看到一个线程here在谈论Spacy自动解决这个问题，但是这个推理是如何工作的呢？我也找不到Spacy使用ujson加载数据的位置了。所以我的问题是，Spacy会自动处
浏览 17提问于2020-07-17得票数 0
回答已采纳
我有一套关于电影评论的短信。我想用spaCy从它中提取:演员、导演、作者、空气数据等实体。但是，spaCy只使用PERSON的泛型标记。使用我的自定义文本使spaCy找到我的实体ACTOR、director等的代码是什么？
浏览 19提问于2022-12-01得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
