浅谈汉语词语的字母组合

浅谈汉语词语的字母组合

ID:9081716

大小:96.50 KB

页数:2页

时间:2018-04-16

浅谈汉语词语的字母组合_第1页
浅谈汉语词语的字母组合_第2页
资源描述:

《浅谈汉语词语的字母组合》由会员上传分享,免费在线阅读,更多相关内容在应用文档-天天文库

1、浅谈汉语词语的字母组合拼音字母是用来表述汉字读音的,它是按照汉语拼音规则运行的。国家制定的《汉语拼音方案》只规范了21个声母和35个韵母,而对几百种音节并没有直接进行规范,因为这些音节是能够根据汉语拼音规则得到的。同样,汉字字母是用来表述汉字字形的,它是按照汉字拼形规则运行的。国家将来制定《汉字拼形方案》,只需规范8种汉字字母,至于几百个汉字部件、几千个常用汉字则没有必要直接进行规范,因为这些常用汉字及其汉字部件都是根据汉字拼形规则得到的。与英语不同的是,汉语中各种词语都是由汉字组合而成的,而不是由汉字字母直接衍生而成的。因此,汉语中各种词语的字母

2、表达,就是构成词语的各个汉字字母组合的集合,即:据统计,10869个汉字总共由71931个汉字字母组成,平均每个汉字是由6.62个汉字字母组合而成的。考虑到词语是由3000个左右的常用汉字组合而成的,而越是常用的汉字,其组合字母的数量就越少。据统计,3500个常用汉字总共由20320个汉字字母组合而成,平均每个常用汉字是由5.81个汉字字母组合而成。前面已述,在10875个汉字中,有638对汉字的字母组合是完全相同的,将其视为重码字的话,则重码率为5.87%。构成词语的汉字越多,字母组合越长,相应的重码率就会越低。据统计,在GB/T15732-19

3、95《汉字键盘输入用通用词语集》中,13403个两字词语只有30对字母组合是完全相同的,重码率仅为0.22%,平均词语码长为9.97,平均每字码长为4.99;5088个三字词语只有10对字母组合是完全相同的,重码率仅为0.20%,平均词语码长为13.59,平均每字码长为4.53;8320个四字词语只有5对字母组合是完全相同的,重码率仅为0.06%,平均词语码长为18.55,平均每字码长为4.64。除了少量汉字单独使用之外,绝大部分汉字都是以词语形式出现的,尤其是以两字词语形式出现的,因为三字词语的数量要比两字词语少得多,大多数三字词语、四字词语还能

4、分解为两字词语,不过,成语是不能再分解的。因此,使用频率很高的两字词语,其重码率及其平均码长就显得特别重要。与其他文字的词语进行比较时,主要采用两字词语的技术指标,而与成语相对应的其他文字,已不再是个词语,而是条短语了。与英文单词对比据统计:188344个英文单词的平均码长为8.95,即英文单词平均由8.95个英文字母组成;13403个汉字两字词语的重码率为0.22%,小到几乎可以忽略不计,其平均码长为9.97,即汉字两字词语平均由9.97个汉字字母组成。比较而言,构成汉字两字词语的平均汉字字母数量要比构成英文单词的英文字母数量多一个,多出比例为1

5、1.40%。然而,汉字字母组合的冗余度是比较大的,即是说,汉字的前几个字母已经决定了该汉字字形与其他汉字字形的不同,后面的字母是多余的、可以去掉的。若不是提取汉字的全部字母来组成词语字母,而是只提取汉字前面几个字母来组成词语字母,那么,在容许的重码率范围内,汉字两字词语的平均码长就能缩短。若只提取汉字前6个字母来组成两字词语。据统计,在GB/T15732-1995《汉字键盘输入用通用词语集》所规定的13403个两字词语中,只有75对字母组合是完全相同的,重码率上升为0.56%,其平均码长下降为9.32。若只提取汉字前5个字母来组成两字词语。据统计,

6、在GB/T15732-1995《汉字键盘输入用通用词语集》所规定的13403个两字词语中,只有99对字母组合是完全相同的,重码率进一步上升为0.74%,其平均码长进一步下降为8.55。若只提取汉字前4个字母来组成两字词语。据统计,在GB/T15732-1995《汉字键盘输入用通用词语集》所规定的13403个两字词语中,只有242对字母组合是完全相同的,重码率进一步上升为1.81%,其平均码长进一步下降为7.38。将上例统计数据绘制成下列坐标图:观察该坐标图发现,只提取前5个字母的方案综合性能最优,既让重码率增长不超过容许范围(小于1%),又让两字词

7、语的平均码长略低于英文单词的平均码长。同时,在GB/T15732-1995《汉字键盘输入用通用词语集》所规定的5088个三字词语中,只有10对字母组合是完全相同的,重码率仍然维持在0.20%,平均词语码长则下降到12.07。在GB/T15732-1995《汉字键盘输入用通用词语集》所规定的8320个四字词语中,只有5对字母组合是完全相同的,重码率仍然维持在0.06%,平均词语码长则下降到16.40。下表列出了不同字母组合长度的字母组合总数:字母组合长度4位5位6位7位8位9位26个英文字母组合总数A45.70万1188万3.10亿80.32亿208

8、8亿54295亿8个汉字字母组合总数B0.40万3.28万26.21万209万1677万1.34亿A/B111倍362倍1

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。