我正在用更新函数训练我的模型:
for batch in minibatch(TRAIN_DATA, size=10):
for text, annotations in batch:
doc = nlp.make_doc(text)
example = Example.from_dict(doc, annotations)
nlp.update([example], drop=0.35, sgd=optimizer, losses=losses)这种训练只使用一个cpu核心,空间为3.2.3,可以做些什么来训练多处理?
据我所知,训练是迭代的,butI知道spacy有这个特性。当使用管道时,可以定义进程数。但在训练中?
发布于 2022-03-16 08:00:53
看起来,aab是对的。这里有一个较旧的Github文章:https://github.com/explosion/spaCy/issues/3507
对我来说没问题。我试着在GPU上训练它来加速这个过程。
https://stackoverflow.com/questions/71482961
复制相似问题