您的位置:首页 > 运维架构 > Linux

Linux下批量把GDK编码的文章转化为UTF-8编码的文章以及“iconv: 未知 xxx 处的非法输入序列”错误处理

2014-08-20 14:40 267 查看
Linux下批量转换GBK文件到UTF-8编码方法

  查看文件编码

  file -i filename

  1.递归转换(包括子文件夹)

  find default -type d -exec mkdir -p utf/{} \;

  find default -type f -exec iconv -f GBK -t UTF-8 {} -o utf/{} \;

  这两行命令将default目录下的文件由GBK编码转换为UTF-8编码,目录结构不变,转码后的文件保存在utf/default目录下。

  2.转换

  命令格式如下

  $enca -L 当前语言 -x 目标编码 文件名

  例如要把当前目录下的所有文件都转成utf-8

  $enca -L zh_CN -x utf-8 *


iconv: 未知 xxx 处的非法输入序列

linux命令行bash下,使用iconv转换UTF-8编码到gb2312的时候遇到问题: iconv: 未知 xx 处的非法输入序列

在iconv中加入 -c 选项,忽略无效的字符,竟然成功了。

/*--------------------------------我是分割线--------------------------------*/



以上参考http://hi.baidu.com/maleung/blog/item/a75403ed6ea19fd8b21cb1db.html

-----------------------------------------------------------------

这里还可以像php里一样,参数中加入//IGNOR,如下

iconv -f gbk//IGNORE -t utf8//IGNORE hufu.csv> hufu-utf8.csv

也可以正常执行
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签:  utf-8 GDK 格式转换 linux
相关文章推荐