文本文件的字符编码检测

本文介绍了一个基于频率分析的编码检测算法,并通过Java代码实现了该算法。文中提供了测试代码及输出结果,展示了如何检测不同来源数据的编码类型。

从代码看,是基于频率分析,还是比较准确的。 
测试代码如下:

import java.io.File;  
import java.io.UnsupportedEncodingException;  
import java.net.MalformedURLException;  
import java.net.URL;  
  
public class Test {  
  public static void main(String[] args) throws UnsupportedEncodingException, MalformedURLException {  
    BytesEncodingDetect s = new BytesEncodingDetect();  
    String str = "??¤¤¤å";  
    System.out.println(BytesEncodingDetect.nicename[s.detectEncoding(str.getBytes("ISO-8859-1"))]);  
    System.out.println(new String(str.getBytes("ISO-8859-1"), "BIG5"));  
    System.out.println(BytesEncodingDetect.nicename[s.detectEncoding("Java世界".getBytes())]);  
    System.out.println(BytesEncodingDetect.nicename[s.detectEncoding(new URL("http://www.iteye.com"))]);  
    System.out.println(BytesEncodingDetect.nicename[s.detectEncoding(new File("src/Test.java"))]);  
  }  
}  

 

输出结果:

Big5  
??中文  
GB-2312  
UTF-8  
UTF-8 
 

附件:

 

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值