Neural machine Translation of Rare Words with Subword Units 动机和创新点BPE算法BPE算法应用BPE改进算法 前面的两篇facebook的文章都提到了BPE(Byte Pair Encoding,双字节编码)算法,可能大家不太了解,今天通过这篇…
《原始论文:Neural Machine Translation of Rare Words with Subword Units》
一、概述
1、摘要
神经机器翻译(NMT)模型通常以固定的词汇量运行,但是翻译是一个开放词汇的问题。
先前的工作通过退回到字典来解决词汇外单词的翻…