[VxWorks] VxWorks中关于GB2312转换成UTF-8的问题

gtt   2008-6-23 23:38 楼主
请教各位,我现已将汉字取十六进制值,得到GB2312码,现将该码转换成utf-8码,该如何实现,请帮忙写个代码赐教!

回复评论 (15)

有直接开源的代码iconv 可以直接使用
点赞  2008-6-24 09:41
晕死,大哥,这个iconv我看了在linux下面才有的啊,vxworks里没有发现,请问大哥能提供一份吗?谢谢!
点赞  2008-6-24 10:31
转一个帖子,看看有没有启发!
  1. 字符集之间转换(UTF-8,UNICODE,Gb2312)
  2. 特搜集了UTF-8,UNICODE,Gb2312他们3个之间的相互转换.

  3. UTF-8:   3字节一个字符
  4. UNICODE: 2字节一个字符
  5. GB2312:  1字节一个字符

  6. 例子:

  7. “你”字的UTF-8编码: E4 BD A0        11100100 10111101 10100000
  8. “你”的Unicode编码: 4F 60            01001111 01100000
  9. 按照UTF-8的编码规则,分解如下:xxxx0100 xx111101 xx100000
  10. 把除了x之外的数字拼接在一起,就变成“你”的Unicode编码了。
  11. 注意UTF-8的最前面3个1,表示整个UTF-8串是由3个字节构成的。
  12. 经过UTF-8编码之后,再也不会出现敏感字符了,因为最高位始终为1。

  13. 类定义
  14. class CChineseCode
  15. {
  16.    public:
  17.        static void UTF_8ToUnicode(wchar_t* pOut,char *pText);  // 把UTF-8转换成Unicode
  18.        static void UnicodeToUTF_8(char* pOut,wchar_t* pText);  //Unicode 转换成UTF-8
  19.        static void UnicodeToGB2312(char* pOut,wchar_t uData);  // 把Unicode 转换成 GB2312
  20.        static void Gb2312ToUnicode(wchar_t* pOut,char *gbBuffer);// GB2312 转换成 Unicode
  21.        static void GB2312ToUTF_8(string& pOut,char *pText, int pLen);//GB2312 转为 UTF-8
  22.        static void UTF_8ToGB2312(string &pOut, char *pText, int pLen);//UTF-8 转为 GB2312
  23. };

  24. 类实现

  25. void CChineseCode::UTF_8ToUnicode(wchar_t* pOut,char *pText)
  26. {
  27.     char* uchar = (char *)pOut;

  28.     uchar[1] = ((pText[0] & 0x0F) << 4) + ((pText[1] >> 2) & 0x0F);
  29.     uchar[0] = ((pText[1] & 0x03) << 6) + (pText[2] & 0x3F);

  30.     return;
  31. }

  32. void CChineseCode::UnicodeToUTF_8(char* pOut,wchar_t* pText)
  33. {
  34.     // 注意 WCHAR高低字的顺序,低字节在前,高字节在后
  35.     char* pchar = (char *)pText;

  36.     pOut[0] = (0xE0 | ((pchar[1] & 0xF0) >> 4));
  37.     pOut[1] = (0x80 | ((pchar[1] & 0x0F) << 2)) + ((pchar[0] & 0xC0) >> 6);
  38.     pOut[2] = (0x80 | (pchar[0] & 0x3F));

  39.     return;
  40. }

  41. void CChineseCode::UnicodeToGB2312(char* pOut,wchar_t uData)
  42. {
  43.     WideCharToMultiByte(CP_ACP,NULL,&uData,1,pOut,sizeof(wchar_t),NULL,NULL);
  44.     return;
  45. }   

  46. void CChineseCode::Gb2312ToUnicode(wchar_t* pOut,char *gbBuffer)
  47. {
  48.     ::MultiByteToWideChar(CP_ACP,MB_PRECOMPOSED,gbBuffer,2,pOut,1);
  49.     return ;
  50. }

  51. void CChineseCode::GB2312ToUTF_8(string& pOut,char *pText, int pLen)
  52. {
  53.     char buf[4];
  54.     int nLength = pLen* 3;
  55.     char* rst = new char[nLength];
  56.    
  57.     memset(buf,0,4);
  58.     memset(rst,0,nLength);
  59.    
  60.     int i = 0;
  61.     int j = 0;     
  62.     while(i < pLen)
  63.     {
  64.             //如果是英文直接复制就可以
  65.             if( *(pText + i) >= 0)
  66.             {
  67.                     rst[j++] = pText[i++];
  68.             }
  69.             else
  70.             {
  71.                     wchar_t pbuffer;
  72.                     Gb2312ToUnicode(&pbuffer,pText+i);
  73.                   
  74.                     UnicodeToUTF_8(buf,&pbuffer);
  75.                   
  76.                     unsigned short int tmp = 0;
  77.                     tmp = rst[j] = buf[0];
  78.                     tmp = rst[j+1] = buf[1];
  79.                     tmp = rst[j+2] = buf[2];   
  80.                   
  81.                     j += 3;
  82.                     i += 2;
  83.             }
  84.     }
  85.     rst[j] = '\0';

  86.     //返回结果
  87.     pOut = rst;            
  88.     delete []rst;  
  89.    
  90.     return;
  91. }

  92. void CChineseCode::UTF_8ToGB2312(string &pOut, char *pText, int pLen)
  93. {
  94.     char * newBuf = new char[pLen];
  95.     char Ctemp[4];
  96.     memset(Ctemp,0,4);

  97.     int i =0;
  98.     int j = 0;
  99.    
  100.     while(i < pLen)
  101.     {
  102.         if(pText[i] > 0)
  103.         {
  104.                 newBuf[j++] = pText[i++];                     
  105.         }
  106.         else               
  107.         {
  108.                 WCHAR Wtemp;
  109.                 UTF_8ToUnicode(&Wtemp,pText + i);
  110.       
  111.                 UnicodeToGB2312(Ctemp,Wtemp);
  112.            
  113.                 newBuf[j] = Ctemp[0];
  114.                 newBuf[j + 1] = Ctemp[1];

  115.                 i += 3;   
  116.                 j += 2;  
  117.         }
  118.     }
  119.     newBuf[j] = '\0';
  120.    
  121.     pOut = newBuf;
  122.     delete []newBuf;
  123.    
  124.     return;
  125. }  

点赞  2008-6-24 10:31
既然linux里面有,那就移植过来吧
点赞  2008-6-24 10:33
代码转换与系统没有直接关系,linux下有源码,你就移植吧,估计不需要做改动的。
点赞  2008-6-24 10:59
汗,这玩意能移植吗?诶,我汗哪~~~~接着跪求解决算法!
点赞  2008-6-24 11:44
其实所谓移植就是先看懂linux下的代码,然后将其重新封装成Vxworks下的一个函数就行,代码基本不用改的。
至于算法,代码里面已经实现了的。

你是想要一个函数?还是想自己学算法,自己写函数呢?
点赞  2008-6-24 12:20
就是想要一个能够实现功能的函数,自己能够再程序中调用实现就行,跪求各位哥哥此招赐招呀!
点赞  2008-6-24 13:43
3楼的linco_gp 给出的程序看一看,不过其中用到的是WinAPI,你可以参考。
主体结构不需要改变,只要将MultiByteToWideChar,WideCharToMultiByte等替换成VxWorks下的API即可。
不过,可别告诉我VxWorks下面没有窄字符和宽字符进行转换的API呀。如果真没有,那真的只能从最小处开始写了。
点赞  2008-6-24 14:13
继续关注,谢谢楼上的解答,可是我是新手,还不是很清楚vXworks里的宽字符和窄字符之间的关系,能发个小代码帮解答下吗?谢谢!
点赞  2008-6-24 15:18
过了一天,还是关注,希望贵人能够在此解答下小小的问题,谢谢,事成之后,必定散分!谢谢!
点赞  2008-6-25 00:24
这个其实没想象的复杂,简而言之利用Windows下的转换结果构造转换表数据,然后在VxWorks下基于查表实现!
点赞  2008-7-18 23:35
自己写一个吧,看看unicode和utf-8的编码格式,应该不难的。
点赞  2008-8-7 10:15
首先需要一张gb2312到unicode的转换表,然后unicode到utf-8的转换可参考下面的链接:
http://www.ruanyifeng.com/blog/2007/10/ascii_unicode_and_utf-8.html
点赞  2008-8-7 10:19
点赞  2016-2-16 13:54
电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 京公网安备 11010802033920号
    写回复