崔荣一,赵 雪

(延边大学 计算机科学与技术学院 智能信息处理研究室，吉林 延吉 133000)

齐普夫定律对朝鲜语适用性的测定

崔荣一,赵 雪

(延边大学 计算机科学与技术学院 智能信息处理研究室，吉林 延吉 133000)

该文目的在于验证齐普夫定律对朝鲜语的适用性。首先统计了朝鲜语大规模语料中的文字及字母两种语言单位的频率分布，然后利用最小二乘法对文字频率分布曲线进行了拟合，最后计算了文字字频齐普夫定律的参数估计值。实验结果表明，朝鲜语的文字和字母的频率与频级关系都近似符合齐普夫定律，验证了齐普夫定律对朝鲜语的适用性，这对朝鲜语的信息处理与研究具有重要的现实意义。

朝鲜语信息处理；齐普夫定律；文字频率；最小二乘法

1 引言

齐普夫定律是描述词汇分布规律的重要定律之一，它表达了人们在使用语言进行交流时所遵从的省力法则： 讲话的人和听话的人都想达到省力的平衡，说话人只想使用少量的常用词进行交流，听话的人希望使用没有歧义的、形式和意义之间完全一一对应的多样化的词来理解。齐普夫定律指出人们使用的语言中存在着少量的高频词和大量的低频词。

全世界使用朝鲜语(韩语)的人口约有8 000万人，是使用人数位居世界第12位的语言[1-2]。朝鲜语是中国朝鲜族和朝鲜半岛的主要交流语言，在中朝韩三国之间信息传播和社会、文化、经济等建设与发展中起着重要的作用。因此，采用科学方法研究朝鲜语语言文字对我国朝鲜族文明的发展及国际间朝鲜语信息交流都具有重要意义。……