使用iconv进行内码转换（Big5->GB2312）

概述
iconv是一个通过unicode作为中间码实现各种内码间相互转换的库，它基本上囊括了世界上所有编码方式，例如，ASCII、GB2312、 GBK、 GB18030、BIG5、UTF-8、UCS-2、UCS-2BE、UCS-2LE、UCS-4、UCS-4BE、UCS-4LE、UTF-16、 UTF-16BE、UTF-16LE、UTF-32、UTF-32BE、UTF-32LE、UTF-7等等等，除此之外，还包括泰语、日语、韩语、西欧等 国家语言的编码。下面我们演示如何使用iconv实现Big5到GB2312的转换，当然只要简单修改一下便可实现iconv支持任何编码间的转换。

下载
libiconv是linux版本的iconv，可在 http://www.gnu.org/software/libiconv/ 下载
iconv的win32版本可以在 http://gnuwin32.sourceforge.net/packages/libiconv.htm 下载

SVN源码
另外，还有一些演示代码，需要的可以到我的SVN下载
http://xcyber.googlecode.com/svn/trunk/Convert/

演示代码

1. /****************************************************************************
2.  *  Big5ToGB2312 - Convert Big5 encoding file to GB2312 encoding file
3.  *  File:
4.  *    Big5ToGb2312.c
5.  *  Description:
6.  *    Convert Big5 encoding file to GB2312 encoding file using iconv library
7.  *  Author:
8.  *    XCyber   email:[email protected]
9.  *  Date:
10.  *    August 7, 2008
11.  *  Other:
12.  *    visit http://www.gnu.org/software/libiconv/ for more help of iconv
13.  ***************************************************************************/
16. #include <stdio.h>
17. #include <stdlib.h>
18. #include <tchar.h>
19. #include <locale.h>
20. #include "../iconv-1.9.2.win32/include/iconv.h"
22. //#pragma comment(lib, "../iconv-1.9.2.win32/lib/iconv.lib")  // using iconv dynamic-link lib, iconv.dll
23. #pragma comment(lib, "../iconv-1.9.2.win32/lib/iconv_a.lib")  // using iconv static lib 
25. #define BUFFER_SIZE 1024   //BUFFER_SIZE must >= 2
28. void usage()
29. {
30.     printf("/nBig5ToGB2312 - Convert Big5 encoding file to GB2312 encoding file/n");
31.     printf("[email protected] on August 7, 2008/n");
32.     printf("  Usage:/n");
33.     printf("      Big5ToGB2312 [Big5 file(in)]  [GB2312 file(out)]/n/n");
34. }
37. int main(int argc, char* argv[])
38. {
39.     FILE * pSrcFile = NULL;
40.     FILE * pDstFile = NULL;
42.     char szSrcBuf[BUFFER_SIZE];
43.     char szDstBuf[BUFFER_SIZE];
45.     size_t nSrc  = 0;
46.     size_t nDst  = 0;
47.     size_t nRead = 0;
48.     size_t nRet  = 0;
50.     char *pSrcBuf = szSrcBuf;
51.     char *pDstBuf = szDstBuf;
53.     iconv_t icv;
54.     int argument = 1;
56.     //check input arguments
57.     if(argc != 3)
58.     {
59.         usage();
60.         return -1;
61.     }
64.     pSrcFile = fopen(argv[1],"r");
65.     if(pSrcFile == NULL)
66.     {
67.         printf("can't open source file!/n");
68.         return -1;
69.     }
71.     pDstFile = fopen(argv[2],"w");
72.     if(pSrcFile == NULL)
73.     {
74.         printf("can't open destination file!/n");
75.         return -1;
76.     }
78.     //initialize iconv routine, perform conversion from BIG5 to GB2312
79.     //TODO: if you want to perfom other type of coversion, e.g. GB2312->BIG5, GB2312->UTF-8 ...
80.     //just change following two paremeters of iconv_open()
81.     icv = iconv_open("GB2312","BIG5");
82.     if(icv == 0)
83.     {
84.         printf("can't initalize iconv routine!/n");
85.         return -1;
86.     }
88.     //enable "illegal sequence discard and continue" feature, so that if met illeagal sequence, 
89.     //conversion will continue instead of being terminated
90.     if(iconvctl (icv ,ICONV_SET_DISCARD_ILSEQ,&argument) != 0)
91.     {
92.         printf("can't enable /"illegal sequence discard and continue/" feature!/n");
93.         return -1;
94.     }
96.     while(!feof(pSrcFile))
97.     {
98.         pSrcBuf = szSrcBuf;
99.         pDstBuf = szDstBuf;
100.         nDst = BUFFER_SIZE;
102.         // read data from source file
103.         nRead = fread(szSrcBuf + nSrc,sizeof(char),BUFFER_SIZE - nSrc,pSrcFile);
104.         if(nRead == 0)
105.             break;
107.         // the amount of data to be converted should include previous left data and current read data
108.         nSrc = nSrc + nRead; 
110.         //perform conversion
111.         nRet = iconv(icv,(const char**)&pSrcBuf,&nSrc,&pDstBuf,&nDst);
113.         if(nRet == -1)
114.         {
115.             // include all case of errno: E2BIG, EILSEQ, EINVAL
116.             //     E2BIG: There is not sufficient room at *outbuf.
117.             //     EILSEQ: An invalid multibyte sequence has been encountered in the input.
118.             //     EINVAL: An incomplete multibyte sequence has been encountered in the input
119.             // move the left data to the head of szSrcBuf in other to link it with the next data block
120.             memmove(szSrcBuf,pSrcBuf,nSrc);
121.         }
123.         //wirte data to destination file
124.         fwrite(szDstBuf,sizeof(char),BUFFER_SIZE - nDst,pDstFile);
125.         
126.     }
127.     iconv_close(icv);
128.     fclose(pSrcFile);
129.     fclose(pDstFile);
131.     printf("conversion complete./n");
133.     return 0;
134. }