文件编码处理

Windows 中文版   默认GBK

Linux    默认UTF-8

从Windows 拷贝到Linux的文件, 中文 在命令 cat , grep下是乱码:

cat:

grep:

vim:

1.在Vim中查看文件编码

:set fileencoding

即可显示文件编码格式。

如果只是想查看其它编码格式的文件或者想解决用Vim查看文件乱码的问题,那么可以在

~/.vimrc 文件中添加以下内容:

set encoding=utf-8 fileencodings=ucs-bom,utf-8,cp936

这可以让vim自动识别文件编码(可以自动识别UTF-8或者GBK编码的文件),其实就是依照fileencodings提供的编码列表尝试,如果没有找到合适的编码,就用latin-1(ASCII)编码打开。

2. enca (如果你的系统中没有安装这个命令,可以用#** yum install -y enca** 安装 )查看文件编码

$ enca filename

filename: Universal transformation format 8 bits; UTF-8

CRLF line terminators

需要说明一点的是,enca对某些GBK编码的文件识别的不是很好,识别时会出现:

Unrecognized encoding

3. 编码转换

方法1.在Vim中直接进行转换文件编码,比如将一个文件转换成utf-8格式

:set fileencoding=utf-8

方法2. enconv 转换文件编码(安装enca),比如要将一个GBK编码的文件转换成UTF-8编码,操作如下

enconv -L zh_CN -x UTF-8 filename

方法3. iconv 转换,iconv的命令格式如下:

iconv -f encoding -t encoding inputfile

比如将一个UTF-8 编码的文件转换成GBK编码

iconv -f GBK -t UTF-8 file1 -o file2