tokenizerbert的简单介绍

EntitySynonymMapper就像乐团的调音师，处理同义词，确保在用户输入中的变化不会影响到对话的准确理解配置文件中的DIETClassifier则是意图分类的指挥棒，它结合多种特征生成器，如BertTokenizer支持中文分词的rasa_chinese和JiebaTokenizer，以及