arXiv cs.CL· Seanghay Yath·· 2 天前AI 评分28
THA:面向高棉语的加权有限状态文本规范化与逆文本规范化工具包
THA: Weighted Finite-State Text Normalization and Inverse Text Normalization for Khmer
AI 导读
THA 是面向高棉语的开源文本规范化与逆文本规范化工具包,基于加权有限状态转换器,用一次最短路径搜索完成整行分词与分类,并由第二个转换器拒绝高棉语音节内部的 token 边界。在 Google 高棉语测试集上,其对全部 274 个基数词与参考一致,仅有一处拼写变体差异;在 2906 条真实 TTS 提示中,改写的 158 句有 153 句正确。
来源:arXiv cs.CL · arxiv.org