前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >多字节与宽字符串的相互转换

多字节与宽字符串的相互转换

作者头像
恋喵大鲤鱼
发布2018-08-03 10:55:30
2.6K0
发布2018-08-03 10:55:30
举报
文章被收录于专栏:C/C++基础C/C++基础

1.多字节字符串与宽字符串

说到多字节字符串与宽字符串,不得不说一下多字节字符与宽字符。多字节字符实际上是由多个字节来表示一个字符,在各个国家和地区采用不同的编码方案,不同编码方案字符码值是不同的,比如常见的中国大陆的GBK和GB18030、中国台湾同胞的Big5h,以及国际通过的UTF8编码等。宽字符指的是由统一码联盟制定的Unicode编码方案收录的字符,使用4个字节来表示一个字符。关于字符编码可参见博文精述字符编码

2.多字节与宽字符串的相互转化

使用C/C++实现多字节字符串与宽字符串的相互转换,需要使用函数C标准库函数mbstowcs和wcstombs。

代码语言:javascript
复制
//将多字节编码转换为宽字节编码
size_t mbstowcs (wchar_t* dest, const char* src, size_t max);

//将宽字节编码转换为多字节编码
size_t wcstombs (char* dest, const wchar_t* src, size_t max);

这两个函数,转换过程中受到系统编码类型的影响,需要通过设置来设定转换前和转换后的编码类型。通过函数setlocale进行系统编码的设置。Linux下输入命名locale -a查看系统支持的编码类型。

代码语言:javascript
复制
andy@andy-linux:~$ locale -a
c
en_ag
en_au.utf8
en_bw.utf8
en_ca.utf8
en_dk.utf8
en_gb.utf8
en_hk.utf8
en_ie.utf8
en_in
en_ng
en_nz.utf8
en_ph.utf8
en_sg.utf8
en_us.utf8
en_za.utf8
en_zw.utf8
posix
zh_cn.gb18030
zh_cn.gbk
zh_cn.utf8
zh_hk.utf8
zh_sg.utf8
zh_tw.utf8

talk is cheap,show me the code!下面给出实现。

代码语言:javascript
复制
#include <locale.h>
#include <stdlib.h>

/********************************************
*@brief:不同编码字符串转Unicode
*@pram:cpMbs:多字节字符串;wcpWcs:宽字符串;wcsBuffLen:宽字符串缓冲区大小(单位宽字符);dEncodeType:多字节字符串编码类型,0:GBK,1:UTF8
*@ret:-1:出错;>=0:转换成功的字符个数
*@birth:created by dablelv on 20170804
*@revision:
********************************************/
int mbs2wcs(const char* cpMbs,wchar_t* wcpWcs,int wcsBuffLen,int dEncodeType)
{
    if(NULL==cpMbs||0==strlen(cpMbs)) return 0;

    //GBK转Unicode
    if(0==dEncodeType)
    {
        if(NULL==setlocale(LC_ALL,"zh_CN.gbk"))     //设置转换为unicode前的编码为gbk编码        
            return -1;
    }
    //UTF8转Unicode
    if(1==dEncodeType)
    {
        if(NULL==setlocale(LC_ALL,"zh_CN.utf8"))    //设置转换为unicode前的编码为utf8编码
            return -1;
    }

    int unicodeCNum=mbstowcs(NULL,cpMbs,0);             //计算待转换的字符数
    if(unicodeCNum<=0||unicodeCNum>=wcsBuffLen)         //转换失败或宽字符串缓冲区大小不足
    {
        return -1;
    }
    unicodeCNum=mbstowcs(wcpWcs,cpMbs,wcsBuffLen-1);    //进行转换,wcsBuffLen-1表示最大待转换的宽字符数,即宽字符串缓冲区大小
    return unicodeCNum;
}

/********************************************
*@brief:Unicode转指定编码字符串
*@pram:wcpWcs:宽字符串;cpMbs:多字节字符串缓冲区;dBuffLen:多字节字符串缓冲区大小(单位字节);dEncodeType:多字节字符串编码类型,0:GBK,1:UTF8
*@ret:-1:出错;>=0:转换成功的字节个数
*@birth:created by dablelv on 20180114
*@revision:
********************************************/
int wcs2mbs(const wchar_t* wcpWcs,char* cpMbs,int dBuffLen,int dEncodeType)
{
    if(wcpWcs==NULL || wcslen(wcpWcs)==0)
    {
        return 0;
    }

    //Unicode转GBK
    if(0==dEncodeType)
    {
        if(NULL==setlocale(LC_ALL,"zh_CN.gbk"))     //设置目标字符串编码为gbk编码
            return -1;
    }
    //Unicode转UTF8
    if(1==dEncodeType)
    {
        if(NULL==setlocale(LC_ALL,"zh_CN.utf8"))    //设置目标字符串编码为utf8编码
            return -1;
    }

    int dResultByteNum=wcstombs(NULL,wcpWcs,0);     //计算待转换的字节数
    if(dResultByteNum<=0 || dResultByteNum>=dBuffLen)
    {
        return -1;                                  //转换失败或多字节字符串缓冲区大小不足
    }
    wcstombs(cpMbs,wcpWcs,dBuffLen-1);
    return dResultByteNum;
}

3.测试

代码文件使用UTF8编码,代码如下:

代码语言:javascript
复制
int main(int argc,char* argv[])
{
    char* cpMbs="I believe 中国民族将实现伟大复兴";
    wchar_t* wcpWcs=L"I believe 中国民族将实现伟大复兴";
    char cBuff[1024]={'\0'};
    wchar_t wcBuff[1024]={L'\0'};

    //将UTF8编码多字节字符串转换为Unicode字符串
    int ret=mbs2wcs(cpMbs,wcBuff,1024,1);
    //转换后字符串与字符串长度
    printf("返回值:%d,字符数:%d,宽字符串:%S\n",ret,wcslen(wcBuff),wcBuff);    //printf使用%ls也可以输出宽字符串

    //Unicode字符串转换为UTF8编码多字节字符串
    ret=wcs2mbs(wcpWcs,cBuff,1024,1);
    //转换后字符串与字符串字节数
    printf("返回值:%d,字符串字节数:%d,字符串:%s\n",ret,strlen(cBuff),cBuff);
}

测试输出结果为:

代码语言:javascript
复制
返回值:21,字符数:21,宽字符串:I believe 中国民族将实现伟大复兴
返回值:43,字符串字节数:43,字符串:I believe 中国民族将实现伟大复兴

注意:请不要将printf与wprintf同时使用,否则会出现后者无法输出的奇怪现象。该现象的解释与解决办法参见博文printf()详解之终极无惑


[1]Linux C++ gbk转为utf-8 [2]精述字符编码

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2018年01月14日,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1.多字节字符串与宽字符串
  • 2.多字节与宽字符串的相互转化
  • 3.测试
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档