unofficial torchtext oov extension:用于在torchtext中启用指针复制机制的扩展 源码

非官方的Torchtext Oov扩展名 用于在torchtext中启用指针/复制机制的扩展 代码改编自源代码。 扩展类包括(在)Field,Batch,BucketIterator等。 Torchtext之前0.8.0仅词汇字符串转换为索引,而外的词汇(OOV)的词被视为'' 。 为了在不放弃TORCHTEXT的情况下实现指针/复制机制,我们使用了和代码为编写了一个轻量级的扩展名,尽管它远不是正式的。 任何建议都欢迎。