NLP 100天 源码

魔术没有魔力。 魔术师只是了解简单的东西,对于未经培训的听众来说似乎并不简单或自然。 一旦学习了如何握持卡片并使手看起来空着,就只需要练习就可以“做魔术”。 –杰弗里·弗里德尔(Jeffrey Friedl)在“掌握正则表达式”一书中 注意:如果有任何建议,更正和反馈,请提出问题。 大多数代码示例都是使用Jupyter笔记本(使用colab)完成的。 因此,每个代码都可以独立运行。 探索了以下主题: 注意:难度级别是根据我的理解分配的。 NLP概念 代币化 将文本数据转换为令牌的过程是NLP中最重要的步骤之一。 已探索使用以下方法进行令牌化: 词嵌入-Word2Vec 词嵌入是文本的学