关于c++的文件编码的研究
生活随笔
收集整理的這篇文章主要介紹了
关于c++的文件编码的研究
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
? ? 今天很有成就感,倒不是做出了多牛的東西,而是終于可以動態的進行編碼的各種轉換了。
? ? 其實這個用到的是網上一搜一大片的iconv,目前有windows版和linux版,linux下的很容易找到,直接裝上就可以進行開發了,windows下的包可以通過這個鏈接下載:win-iconv-0.0.4.zip,直接將放入工程內,就可以使用了。
? ? ?下面給出我自己的測試代碼(基于文件的):
#include <iostream> #include <stdlib.h> #include <stdio.h> #include <fstream> #include "include/iconv.h"using namespace std;int main(void) {string src("");char buf[4096];int fileLen = 0;ifstream file1("sohu.htm");while(!file1.eof()){memset(buf, 0, 4096);file1.read(buf, 4096); int readLen = file1.gcount();buf[readLen] = '\0';printf("readline: \n %s\n", buf); src.append(buf);fileLen += readLen;}file1.close();char *dest = new char[src.length() * 2 + 1]; /* 格式化轉換后的字串 */ memset(dest, 0, src.length() * 2 + 1);size_t src_len = src.length(); size_t dst_len = src.length() * 2; //注意:我用了一塊2倍于源數據長度的buffer const char *in = src.c_str(); char *out = dest; iconv_t cd;cd = iconv_open("utf-8", "gb2312"); /* 將GB2312字符集轉換為UTF-8字符集 */ if ((iconv_t)-1 == cd){ printf("iconv_open err %d\n", errno);return -1; } if(iconv(cd, &in, &src_len, &out, &dst_len) == -1) /* 執行轉換 */ { printf("iconv_open err %d\n", errno);return -1; } ofstream file2("out.txt");file2.write(dest, src.length() * 2 - dst_len);file2.close();iconv_close(cd); /* 執行清理 */ return 0; }?我在寫代碼的時候,遇到了兩種錯誤:
(1)返回errno=7,即E2BIG
? ? 問題原因:目的內存的大小不夠
? ? 解決辦法:就是使用的分配2倍于源數據大小的空間,由于編碼轉換會導致數據量的變化
(2)返回errno=42,即ENOMSG
? ? 問題原因:源數據的編碼與iconv_open輸入的源編碼不同
? ? 解決辦法:就是找到源數據的真正編碼,使用uchardet對字符串進行分析得出真正的編碼格式
如何使用uchardet?
uchardet_t m_uchardet = uchardet_new(); if(m_uchardet) {if(uchardet_handle_data(m_uchardet, m_content.c_str(), m_content.length()) == 0){uchardet_data_end(m_uchardet);m_charSet.assign(uchardet_get_charset(m_uchardet));} } uchardet_delete(m_uchardet);uchardet源碼下載路徑:
BYVoid-uchardet-56a4c0d.zip
類似的,對內存中的數據進行編碼轉換也可以用這個方法,最終輸出的文件編碼格式就是當初設置的目標編碼格式。
轉載于:https://www.cnblogs.com/geekma/archive/2012/08/29/2662233.html
總結
以上是生活随笔為你收集整理的关于c++的文件编码的研究的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 实例:加载图片并添加文本水印
- 下一篇: C++Builder函数集(文件操作、获