藏文文本规范化处理研究

2017-05-08 12:32:31陈小莹
智能计算机与应用 2016年6期
关键词:规范化

陈小莹

摘要:本文通过对藏文文本中不规范文本进行分类后,针对不同类型的文本特征制定规范化处理方法,最终实现了对藏文文本的规范化处理。但因藏文文本来源的不确定性,文本中可能会存在一些未收集到的不规范文本类型,需在后期的研究工作中继续收集整理。

关键词:信息处理; 藏文文本; 规范化

中图分类号: TP391

文献标志码:A

文章编号: 2095-2163(2016)06-0029-03

0引言

[JP2]藏文文本规范化处理主要是对藏文文本做版面分析,识别并规范藏文文本中可能出现的非正常藏文字符的过程。藏文文字属于符号文字,藏文文本中除包含正常的藏文字符外,还可能会出现借形词、特殊符号、黏着语等一些特殊字符形式\[1\]。这些藏文特殊字符的存在会直接影响到文本信息处理的正确性。在规范化处理时,需在正确理解其产生原因的基础上确定相应处理方式,依据其所处语境设定相应规则将这些符号转换成规范的藏文文本形式。在藏语字音转换系统中,对非规范形式的藏文文本进行规范化处理能保证后续字音转换顺利完成,因此对藏文文本规范化处理是一个必不可少的基础工作。

[JP3]本文通过对藏文文本进行分析,确定藏文文本规范化主要有2个任务:第一个任务是特殊符号归一化;第二个任务是外借词藏文化。在此,拟将针对每一部分研究给出如下分析论述。[JP]

[BT4]1特殊符号归一化

藏文文本规范化主要是指在藏文文本中出现的一些非常用藏文标记符号以及其它有特殊含义的符号,这些特殊符号的存在会对后期文本理解造成歧义。……

登录APP查看全文

猜你喜欢
规范化
点播影院迎来规范化,4K HDR迎来普及之潮
价格认定的规范化之路
商周刊(2017年23期)2017-11-24 03:24:09
谈人事档案的规范化管理
兰台内外(2017年5期)2017-06-06 02:24:19
早期胃癌的规范化内镜诊断及治疗
中外医疗(2016年15期)2016-12-01 04:25:46
政务微博的规范化运行探讨
时代农机(2016年6期)2016-12-01 04:07:29
农民合作社规范化的新机遇
论审计法制化、规范化建设
狂犬病Ⅲ级暴露规范化预防处置实践
高血压病中医规范化管理模式思考
满足全科化和规范化的新要求
中国卫生(2014年3期)2014-11-12 13:18:18