java 中 16 进制 HEX 转换成字节码形式的 UTF-8

恩,又碰到个蛋疼的编码转换问题了:要把形如 \xE9\xBB 的字符串转成中文。。。

在python中我们直接 print "\xE9\xBB\x84" 即可,

在shell中我们直接 echo $'\xe9\xbb\x84' #echo -e '\xe9\xbb\x84'也行,

注意:不能直接 echo $'\xde\xab'|iconv -f gbk -t utf-8 ,

因为 gbk的话,\xE9\xBB是榛,后面的\x84只有半个字,会报错或乱码,

utf8是变长的,占1~4字节,汉字一般是3字节,例如 xe9是16进制,占8bit,也就是一个字节。

但是到了 java 中,就比较蛋疼了,还是上代码吧:

import java.io.UnsupportedEncodingException;
import java.math.BigInteger;

public class Test {

	public static String str2Hex(String str) throws UnsupportedEncodingException {
		String hexRaw = String.format("%x", new BigInteger(1, str.getBytes("UTF-8")));
		char[] hexRawArr = hexRaw.toCharArray();
		StringBuilder hexFmtStr = new StringBuilder();
		final String SEP = "\\x";
		for (int i = 0; i < hexRawArr.length; i++) {
			hexFmtStr.append(SEP).append(hexRawArr[i]).append(hexRawArr[++i]);
		}
		return hexFmtStr.toString();
	}

	public static String hex2Str(String str) throws UnsupportedEncodingException {
		String strArr[] = str.split("\\\\"); // 分割拿到形如 xE9 的16进制数据
		byte[] byteArr = new byte[strArr.length - 1];
		for (int i = 1; i < strArr.length; i++) {
			Integer hexInt = Integer.decode("0" + strArr[i]);
			byteArr[i - 1] = hexInt.byteValue();
		}

		return new String(byteArr, "UTF-8");
	}

	public static void main(String[] args) throws UnsupportedEncodingException {

		System.out.println(str2Hex("中国1a23"));
		System.out.println(hex2Str(str2Hex("中国1a23")));
		System.out.println(hex2Str("\\xE9\\xBB\\x84\\xE8\\x8A\\xB1\\xE6\\xA2\\xA8\\xE5\\xAE\\xB6\\xE5\\x85\\xB7\\xE8\\xBD\\xAC\\xE8\\xAE\\xA9"));
	}

}

结果:

\xe4\xb8\xad\xe5\x9b\xbd\x31\x61\x32\x33
中国1a23
黄花梨家具转让

下面再来看看 unicode 形式怎么在 java 中转换:

String string = "中国\u6211\u7231\u5317\u4EAC";
byte[] utf8 = string.getBytes("UTF-8");
string = new String(utf8, "UTF-8");
System.out.println(string);

在 shell 中:

echo -e \\u4f60  #注意 type -a echo; which echo; man bash 版本是否支持 \uHHHH 4 字节 unicode。

perl -CS -le 'print "\x{4f60}"'

python -c 'print u"\u4f60"'

REF:

java中byte 与16进制字符相互转换

http://marshzg.iteye.com/blog/722260

shell 下 urlencode/urldecode 编码/解码的几种方法

http://hi.baidu.com/leejun_2005/item/9e0f4e4ba62cde0bc11613b5

java: utf-8 与 unicode 互转

http://www.360doc.com/content/08/0421/16/21290_1206154.shtml

Converting A String To Hexadecimal In Java

http://stackoverflow.com/questions/923863/converting-a-string-to-hexadecimal-in-java

Convert from byte array to hex string in java

http://stackoverflow.com/questions/9655181/convert-from-byte-array-to-hex-string-in-java

推荐阅读:

深度剖析Java的字符编码

http://geeklu.com/2009/12/dive-into-the-charset-of-java/

java中byte转换int时为何与0xff进行与运算

http://blogread.cn/it/article/6302?f=wb

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏码匠的流水账

聊聊flink的FsCheckpointStreamFactory

flink-runtime_2.11-1.7.0-sources.jar!/org/apache/flink/runtime/state/CheckpointS...

13220
来自专栏小灰灰

java之通过反射生成并初始化对象

java之通过反射生成并初始化对象 在博文 《java之的读取文件大全》 中读取csv文件后,需要自己将csv文件的对象转为自己的DO对象,那么有没有办法我...

1.4K60
来自专栏电光石火

MyBatis之传入参数——parameterType

在MyBatis的select、insert、update、delete这些元素中都提到了parameterType这个属性。MyBatis现在可以使用的pa...

22260
来自专栏码匠的流水账

聊聊rocketmq的BrokerHousekeepingService

本文主要研究一下rocketmq的BrokerHousekeepingService

12310
来自专栏算法修养

POJ-2329 Nearest number - 2(BFS)

Nearest number - 2 Time Limit: 5000MS Memory Limit: 65536K Total Submis...

25240
来自专栏菩提树下的杨过

java:POI导出excel

POI是一个开源项目,专用于java平台上操作MS OFFICE,企业应用开发中可用它方便导出Excel. 下面是使用示例: 1、maven中先添加依赖项 1 ...

38460
来自专栏扎心了老铁

Elasticsearch JAVA api轻松搞定groupBy聚合

本文给出如何使用Elasticsearch的Java API做类似SQL的group by聚合。 为了简单起见,只给出一级groupby即group by fi...

84570
来自专栏二进制文集

Thrift 对象序列化、反序列化-字节数组分析

本篇博客仅分析Thrift对象的序列化、反序列化的字节数组,以及Thrift对象的序列化、反序列化原理。其他源码分析会另开章节~

28620
来自专栏HansBug's Lab

3097: Hash Killer I

3097: Hash Killer I Time Limit: 5 Sec  Memory Limit: 128 MBSec  Special Judge Su...

24740
来自专栏算法修养

Code Forces 652C Foe Pairs

C. Foe Pairs time limit per test 1 second memory limit per test 256 megaby...

34680

扫码关注云+社区

领取腾讯云代金券