elastic_transformers:使BERT可拉伸。 句子转换器的语义Elasticsearch 源码

弹性变形金刚 带有句子转换器的语义Elasticsearch。 我们将使用Elastic的功能和BERT的魔力为一百万篇文章建立索引,并对它们进行词汇和语义搜索。 目的是提供一种易于使用的方式来设置您自己的Elasticsearch,并具有使用NLP转换器的上下文嵌入/语义搜索的最新功能。 总览 上面的设置如下 使用Docker设置Elasticsearch服务器 收集数据集 使用句子变形器将它们索引到Elastic上(在4个CPU内核上花费大约3个小时) 看一下词汇搜索和语义搜索之间的一些比较示例 建立 设置环境 我的环境称为et ,为此我使用conda。 浏览项目目录 conda c