基于翻译日志的统计机器翻译模型剪枝

北京大学学报（自然科学版）

基于翻译日志的统计机器翻译模型剪枝

刘凯¹,吕雅娟¹,姜文斌¹,刘群^1,2

1. 中国科学院大学计算技术研究所, 智能信息处理重点实验室, 北京 100190; 2. Dublin City University DCU, Dublin 9;

收稿日期:2013-06-15 出版日期:2014-01-20 发布日期:2014-01-20

Statistical Machine Translation Model Pruning Based on Translation Log

LIU Kai¹, Lü Yajuan¹, JIANG Wenbin¹, LIU Qun^1,2

1. Key Laboratory of Intelligent Information Processing, Institute of Computing Technology, University of Chinese Academy of Sciences, Beijing 100190; 2. Dublin City University DCU, Dublin 9;

Received:2013-06-15 Online:2014-01-20 Published:2014-01-20

摘要/Abstract

摘要： 提出一种基于翻译日志的统计机器翻译模型的剪枝方法。该方法利用翻译规则在翻译日志中的命中频数对机器翻译规则进行过滤, 保留当前机器翻译模型所需的最小规则表。实验表明, 该方法能够在仅保留原有模型1%~3%翻译规则的前提下达到原有模型的翻译效果。

关键词: 统计机器翻译, 模型剪枝, 翻译日志

Abstract: The authors propose a novel translation log based translation rule pruning method, which prunes translation rules according to the translation rule hit counts pairs. Experiment results show that the proposed method requires only 1% - 3% translation rules without significantly difference compared to the full model.

Key words: statistical machine translation, model pruning, translation log

中图分类号:

TP391

刘凯,吕雅娟,姜文斌,刘群. 基于翻译日志的统计机器翻译模型剪枝[J]. 北京大学学报（自然科学版）.

LIU Kai,Lü Yajuan,JIANG Wenbin,LIU Qun. Statistical Machine Translation Model Pruning Based on Translation Log[J]. Acta Scientiarum Naturalium Universitatis Pekinensis.

导出引用管理器 EndNote|Ris|BibTeX

链接本文: https://xbna.pku.edu.cn/CN/

https://xbna.pku.edu.cn/CN/Y2014/V50/I1/167

[1]	李放, 曹健, 李普, 谢豪, 赵雄波, 王源, 张兴. 基于ARM+FPGA异构平台的目标检测加速模块设计与实现[J]. 北京大学学报自然科学版, 2022, 58(6): 1035-1041.
[2]	孙文宇, 曹健, 李普, 刘瑞. 基于全局信息的卷积神经网络模型剪枝微调优化方法[J]. 北京大学学报自然科学版, 2021, 57(4): 790-794.
[3]	王楠, 徐金安, 明芳, 陈钰枫, 张玉洁. 融合语态特征的日英层次短语翻译模型[J]. 北京大学学报自然科学版, 2017, 53(2): 305-313.
[4]	李强, 李沐, 张冬冬, 朱靖波. 统计机器翻译中实例短语对研究[J]. 北京大学学报（自然科学版）, 2016, 52(1): 113-119.
[5]	赵紫玉,徐金安,张玉洁,刘江鸣. 日语时间表达式识别与日汉翻译研究[J]. 北京大学学报（自然科学版）, 2014, 50(1): 180-186.
[6]	罗维. 词语对齐的快速增量式训练方法研究[J]. 北京大学学报（自然科学版）, 2013, 49(1): 88-94.