APP下载

大规模双语句对自动获取技术

2012-04-29王澍郑德权赵铁军

智能计算机与应用 2012年3期
关键词:文本方法

王澍 郑德权 赵铁军

摘要: 从互联网上挖掘大量双语平行句对,可以快速有效地构建大规模双语资源,服务于统计机器翻译。从挖掘对象的不同,将网络数据源分成对照网页和平行网页两类,提出一种抽取双语句对的方法。首先,从上述两类网页中分别抽取平行文本段,对照网页文本段抽取的主要方法为页面过滤和模板匹配,而平行网页依赖于网页结构的相似,采用对应节点匹配方法;其次,采用Gale-Church算法进行句对齐,得到平行句对;最后统一进行后处理。实验结果表明,从对照网页获取平行句对的准确率达到93.3%,平行网页为93.5%。


登录APP查看全文

猜你喜欢

文本方法
初中群文阅读的文本选择及组织
在808DA上文本显示的改善
学习方法
基于doc2vec和TF-IDF的相似文本识别
用对方法才能瘦
文本之中·文本之外·文本之上——童话故事《坐井观天》的教学隐喻
論《柳毅傳》對前代文本的繼承與轉化
四大方法 教你不再“坐以待病”!
赚钱方法
捕鱼