分词是自然语言处理中一个重要的任务，它将文本按照一定的规则或算法进行切割，得到一系列的词语。Python上有各种各样的分词器可以使用，下面将从多个方面对Python上使用的分词器进…