文章目录一、数据介绍及处理二、寻找未登录词1.统计语料库中的词信息2.利用互信息熵得到初始化词库3.对语料库进行切分4.利用搜索引擎判断新词5.迭代寻找新词6.方法总结 一、数据介绍及处理  本文以电商领域的商品名称为语料进行实验，来寻找