机器翻译与数据集

http://zh-v2.d2l.ai/chapter_recurrent-modern/machine-translation-and-dataset.html

在 9.5.4 中


里面先为每个序列添加了一个 ’ eos ’ 标记, 然后对每个序列执行截断/填充操作, 有可能把’ eos ’ 标记给删掉, 请问这样不会有什么影响吗?

很明显,pad的优先级要高于eos,即遇到了pad自然就知道已经EOS了。