检测文本中的重复字符、统计字符频率、分析字符分布
在自然语言中,词频与词频排名成反比,高频词数量少但出现频繁。
字符分布的均匀程度,熵值越高表示字符分布越随机。
文本去重、密码强度检测、数据分析、编码识别。
重复字符越多,文本的可压缩性越高,冗余度越大。