我目前正在使用斯坦福NER训练一个命名实体识别模型。是否有可能将两个模型合并在一起?或者有没有办法扩展当前的模型?
假设我最初有一个大型语料库A,并得到了一个模型MA。(这个模型效果很好)但问题是,训练它需要很长时间,而未来我想在语料库A中添加新的条目,比如B。我不得不重新训练(A + B),这需要更长的时间。
有没有办法只训练B,然后将其与A合并?或者我可以…扩展模型MA,使其适用于新的实体。
谢谢!
回答:
没有“通用方法”。这取决于你使用的模型,有些模型可以以在线模式进行训练(在这种模式下,新的实例、新数据不需要重新训练),而有些则不能。因此,在这种普遍性层面上,对你的问题的回答是不,你不能,每次都需要重新训练。另一方面,有些模型可以这样训练——寻找那些支持在线学习的模型。