自然语言处理为什么要分词？

Question

自然语言处理为什么要分词

Answer 1

1. 自然语言处理（NLP，Natural Language Processing）就是让计算机能够理解人类的语言。也就是说，要让计算机像人一样能够阅读文字，理解文字背后的含义。
2. 而在人的阅读过程中，只有理解了词语的含义，才能把握整个句子的含义。以此类比，要让计算机懂得人类的文本，就必须要让计算机准确把握每一个词的含义。因而在自然语言处理中，分词技术是非常基础的模块。