XJIPC OpenIR  > 多语种信息技术研究室
基于词向量的维吾尔语词项归一化方法简
罗延根; 李晓; 蒋同海; 杨雅婷; 周喜; 王磊
2018
Source Publication计算机工程
ISSN1000-3428
Volume44Issue:2Pages:220-225
Abstract

使用无监督的方法,将口语文本中的非正规维吾尔语词项归一化到正规文本中意思相近的正规词,基于神经网络,利用大规模语料将维吾尔语单词映射到低维向量空间,对向量空间的非正规词进行聚类。引入一个贪心解码器对非正规词做归一化处理,并进行重采样迭代,从而将之前未能成功归一化的非正规词归一化。实验结果表明,使用该方法对维汉机器翻译的待翻译口语文本进行前编辑后,生成的译文质量有显著提高。该方法给维汉口语文本机器翻译系统提供一个前处理的流程,在缺乏双语口语平行语料的情况下也能有效提高机器翻译系统性能。

Keyword维吾尔语口语文本 非正规词 归一化 神经网络 重采样
DOI10.3969/j.issn.1000-3428.2018.02.038
Indexed ByCSCD
CSCD IDCSCD:6161574
Citation statistics
Document Type期刊论文
Identifierhttp://ir.xjipc.cas.cn/handle/365002/5236
Collection多语种信息技术研究室
Affiliation1.中国科学院新疆理化技术研究所
2.中国科学院大学
3.中国科学院新疆民族语音语言信息处理重点实验室
Recommended Citation
GB/T 7714
罗延根,李晓,蒋同海,等. 基于词向量的维吾尔语词项归一化方法简[J]. 计算机工程,2018,44(2):220-225.
APA 罗延根,李晓,蒋同海,杨雅婷,周喜,&王磊.(2018).基于词向量的维吾尔语词项归一化方法简.计算机工程,44(2),220-225.
MLA 罗延根,et al."基于词向量的维吾尔语词项归一化方法简".计算机工程 44.2(2018):220-225.
Files in This Item:
File Name/Size DocType Version Access License
基于词向量的维吾尔语词项归一化方法.pd(931KB)期刊论文作者接受稿开放获取CC BY-NC-SAView Application Full Text
Related Services
Recommend this item
Bookmark
Usage statistics
Export to Endnote
Google Scholar
Similar articles in Google Scholar
[罗延根]'s Articles
[李晓]'s Articles
[蒋同海]'s Articles
Baidu academic
Similar articles in Baidu academic
[罗延根]'s Articles
[李晓]'s Articles
[蒋同海]'s Articles
Bing Scholar
Similar articles in Bing Scholar
[罗延根]'s Articles
[李晓]'s Articles
[蒋同海]'s Articles
Terms of Use
No data!
Social Bookmark/Share
File name: 基于词向量的维吾尔语词项归一化方法.pdf
Format: Adobe PDF
All comments (0)
No comment.
 

Items in the repository are protected by copyright, with all rights reserved, unless otherwise indicated.