首页
未来指导的增量式变压器可同时进行翻译
返回

未来指导的增量式变压器可同时进行翻译

2022-12-19 科技信息 By:佚名
最佳答案同步翻译是机器翻译的一种,在阅读源句子时会生成输出。它可以用于实时字幕或同声传译。但是,当前策略的计算速度较低,并且缺乏来自未来源信息的指导。最近提出的一种方法称为“未来引导式增量变压器”,可以克服这两个缺点。它使用平均嵌入层来汇总消耗的源信息并避免费时的重新计算。...

同步翻译是机器翻译的一种,在阅读源句子时会生成输出。它可以用于实时字幕或同声传译。但是,当前策略的计算速度较低,并且缺乏来自未来源信息的指导。最近提出的一种方法称为“未来引导式增量变压器”,可以克服这两个缺点。

它使用平均嵌入层来汇总消耗的源信息并避免费时的重新计算。通过知识提炼嵌入一些未来信息,可以增强预测能力。结果表明,与当前使用的模型相比,训练速度可提高约28倍。在汉英和德英同声翻译任务上,翻译质量也得到了提高。

同步翻译(ST)在阅读源句子时同步开始翻译,并且在许多在线场景中使用。先前的wait-k策略简洁明了,在ST中取得了良好的效果。但是,wait-k策略面临两个缺点:由于重新计算了隐藏状态而导致的培训速度较慢,并且缺乏用于指导培训的未来源信息。对于较低的训练速度,我们提出一种具有平均嵌入层(AEL)的增量式变压器,以加快训练期间隐藏状态的计算速度。对于将来的培训,我们建议使用传统的Transformer作为增量Transformer的老师,并尝试通过知识提炼无形地将一些将来的信息嵌入模型中。我们对汉英和德英同声翻译任务进行了实验,并与wait-k策略进行了比较以评估该方法。我们的方法可以有效地将不同k条件下的训练速度平均提高约28倍,并在模型中隐式嵌入一些预测能力,从而获得比wait-k基线更好的翻译质量。

猜你喜欢
苏州蠡口家具城(苏州蠡口)

苏州蠡口家具城(苏州蠡口)

12-18 0 阅读
Fitbit的可穿戴新传闻被称为Versa

Fitbit的可穿戴新传闻被称为Versa

12-18 0 阅读
西甲录像全场回放(西甲国家德比录像回放)

西甲录像全场回放(西甲国家德比录像回放)

10-25 0 阅读
食品安全法实施时间(关于食品安全法实施时间的介绍)

食品安全法实施时间(关于食品安全法实施时间的介绍)

12-19 0 阅读
北京市牡丹卡有什么用(北京牡丹交通卡初始密码是多少)

北京市牡丹卡有什么用(北京牡丹交通卡初始密码是多少)

12-19 0 阅读
拼多多什么情况会降权(拼多多降权会通知吗)

拼多多什么情况会降权(拼多多降权会通知吗)

12-19 0 阅读
热门推荐
苏州蠡口家具城(苏州蠡口)

苏州蠡口家具城(苏州蠡口)

12-18 0 阅读
Fitbit的可穿戴新传闻被称为Versa

Fitbit的可穿戴新传闻被称为Versa

12-18 0 阅读
西甲录像全场回放(西甲国家德比录像回放)

西甲录像全场回放(西甲国家德比录像回放)

10-25 0 阅读
食品安全法实施时间(关于食品安全法实施时间的介绍)

食品安全法实施时间(关于食品安全法实施时间的介绍)

12-19 0 阅读
北京市牡丹卡有什么用(北京牡丹交通卡初始密码是多少)

北京市牡丹卡有什么用(北京牡丹交通卡初始密码是多少)

12-19 0 阅读
拼多多什么情况会降权(拼多多降权会通知吗)

拼多多什么情况会降权(拼多多降权会通知吗)

12-19 0 阅读
愿景光(关于愿景光的介绍)

愿景光(关于愿景光的介绍)

08-13 0 阅读
12岁的女孩子早恋怎么办(12岁学生早恋怎么办)

12岁的女孩子早恋怎么办(12岁学生早恋怎么办)

12-18 0 阅读
mywill(mywi)

mywill(mywi)

12-18 0 阅读
限牌令是什么(限牌)

限牌令是什么(限牌)

12-06 0 阅读