AllenNLP文本数据预处理类关系图

NLP的文本预处理需要经过分词,建立词典,单词转索引值,转tensor,AllenNLP定义了若干类处理这一过程,因此我用图的方式记录这些类的关系,将重要的几点标红,这样看着清楚。在这里插入图片描述

参考allennlp/tutorials/notebooks/中的示例

猜你喜欢

转载自blog.csdn.net/m0_38133212/article/details/86649055