tokens是什么意思 1、在语料库语言学中，会计算文本的tokens和types。tokens指的是“形符”，就是文本中出现的所有词的个数；types指的是“类符”，就是文本中出现的不重样的词的个数。2、n 象征；表征；记号 We sho...
喜来顺财经