查看文件編碼
在Linux中查看文件編碼可以通過以下幾種方式：
1.在Vim中 可以直接查看文件編碼
:set fileencoding
即可顯示文件編碼格式。
如果你只是想查看其它編碼格式的文件或者想解決 用Vim查看文件亂碼的問題，那么你可以在
~/.vimrc 文件中添加以下內(nèi)容：

set encoding=utf-8 fileencodings=ucs-bom,utf-8,cp936

這樣，就可以讓vim自動識別文件編碼（可以自動識別UTF-8或 者GBK編碼的文件），其實(shí)就是依照fileencodings提供的編碼列表嘗試，如果沒有找到合適 的編碼，就用latin-1(ASCII)編碼打開。
2. enca (如果你的系統(tǒng)中沒有安裝這個(gè)命令，可以用sudo yum install -y enca 安裝 )查看文件編碼
$ enca filename
filename: Universal transformation format 8 bits; UTF-8
CRLF line terminators
需要說明一點(diǎn)的是，enca對某些GBK編碼的文件識別的不是很好，識別時(shí)會出現(xiàn)：
Unrecognized encoding

文件編碼轉(zhuǎn)換
1.在Vim中直接進(jìn)行轉(zhuǎn)換文件編碼,比如將一個(gè)文件轉(zhuǎn)換成utf-8格式
:set fileencoding=utf-8

2. enconv 轉(zhuǎn)換文件編碼，比如要將一個(gè)GBK編碼的文件轉(zhuǎn)換成UTF-8編碼，操作如下
enconv -L zh_CN -x UTF-8 filename

3. iconv 轉(zhuǎn)換，iconv的命令格式如下：
iconv -f encoding -t encoding inputfile
比如將一個(gè)UTF-8 編碼的文件轉(zhuǎn)換成GBK編碼
iconv -f GBK -t UTF-8 file1 -o file2

本文地址：http://www.yaronspace.cn/blog/index.php/archives/523

PYTHON UTF-8 亂碼 PYTHON編碼問題總結(jié)

亂碼原因：
因?yàn)槟愕奈募暶鳛閡tf-8，并且也應(yīng)該是用utf-8的編碼保存的源文件。但是windows的本地默認(rèn)編碼是cp936，也就是gbk編碼，所以在控制臺

直接打印utf-8的字符串當(dāng)然是亂碼了。?

解決方法：
在控制臺打印的地方用一個(gè)轉(zhuǎn)碼就ok了，打印的時(shí)候這么寫：
print myname.decode('UTF-8').encode('GBK')?

比較通用的方法應(yīng)該是：
import sys
type = sys.getfilesystemencoding()
print myname.decode('UTF-8').encode(type)

?

?

?

最近利用python抓取一些網(wǎng)上的數(shù)據(jù)，遇到了編碼的問題。非常頭痛，總結(jié)一下用到的解決方案。

• ? ??linux中vim下查看文件編碼的命令 set fileencoding
• ? ??python中一個(gè)強(qiáng)力的編碼檢測包 chardet ，使用方法非常簡單。linux下利用pip install chardet實(shí)現(xiàn)簡單安裝

? ??

1 2 3 4

import?chardet f?=?open('file','r') fencoding=chardet.detect(f.read()) print?fencoding

　　fencoding輸出格式?{'confidence': 0.96630842899499614, 'encoding': 'GB2312'} ，只能判斷是否為某種編碼的概率。比較準(zhǔn)確的結(jié)果了。輸入?yún)?shù)為str類型。

• ? ? ??了解python中str的編碼后可以利用decode和encode來實(shí)現(xiàn)編碼的轉(zhuǎn)換。

? ? ? 一般流程是str利用decode方法根據(jù)str的編碼將其解碼為unicode字符串類型，然后利用encode根據(jù)特定的編碼將unicode字符串類型轉(zhuǎn)換為特定的編碼。python中str和unicode屬于兩種不同的類型，如下。

? ? ?

• ?一般情況下window默認(rèn)編碼gbk，linux默認(rèn)編碼utf8
• ?python編程中?系統(tǒng)編碼，python編碼，文件編碼 的概念。

? ? ?系統(tǒng)編碼：默認(rèn)寫源碼的編輯器的編碼方式。它代表源碼文件內(nèi)的所有內(nèi)容都是根據(jù)詞方式編碼成二進(jìn)制碼流。存入到磁盤中的。linux下通過locale命令查看。

? ? ?python編碼：指python內(nèi)設(shè)置的解碼方式。如果不設(shè)定的話，python默認(rèn)的是ascii解碼方式。如果python源代碼文件中不出現(xiàn)中文的話，這個(gè)地方怎么設(shè)定應(yīng)該不會問題。

? ? ?設(shè)定方法：在源碼文件開頭（一定是第一行）：#-*-coding:UTF-8-*-，源碼文件的設(shè)置解碼方式是UTF-8 或者

1 2 3

import?sys reload(sys) sys.setdefaultencoding('UTF-8')

? ? ?文件編碼：文本的編碼方式，linux下vim利用set fileencoding查看。

? ??

• ? ? 一般情況下輸出亂碼的原因就是 沒有按照系統(tǒng)解碼的方式進(jìn)行編碼。

? ? 比如print s, s類型為str，linux系統(tǒng)下系統(tǒng)默認(rèn)編碼為utf8編碼，s在輸出前就應(yīng)該編碼為utf8。如果s為gbk編碼就應(yīng)該這樣輸出。print s.decode('gbk').encode('utf8')才能輸出中文。

? ? window下面情況相同，window默認(rèn)編碼為gbk編碼，所以s輸出前必須編碼為gbk。

• ? ? python處理中一般處理unicode類型。這樣輸出前直接編碼即可。

轉(zhuǎn)1. http://blog.sina.com.cn/s/blog_40e1ba640102wm26.html

2.http://www.cnblogs.com/joeyupdo/archive/2013/03/03/2941737.html
以下為copy鏈接2中的介紹
(1)encoding: Vim 內(nèi)部使用的字符編碼方式，包括 Vim 的 buffer (緩沖區(qū))、菜單文本、消息文本等。用戶手冊上建議只在 .vimrc 中改變它的值，事實(shí)上似乎也只有在 .vimrc 中改變它的值才有意義

(2)fileencoding: Vim 中當(dāng)前編輯的文件的字符編碼方式，Vim 保存文件時(shí)也會將文件保存為這種字符編碼方式 (不管是否新文件都如此)，網(wǎng)上是這樣介紹的，但是我這樣做在.vimrc中定義為utf-8似乎沒有作用，只能在打開vim文件時(shí)手動設(shè)置才會起效，不知道什么原因。

(3)fileencodings: Vim 啟動時(shí)會按照它所列出的字符編碼方式逐一探測即將打開的文件的字符編碼方式，并且將 fileencoding 設(shè)置為最終探測到的字符編碼方式。因此最好將 Unicode 編碼方式放到這個(gè)列表的最前面，將拉丁語系編碼方式 latin1 放到最后面。

(4)termencoding: Vim 所工作的終端 (或者 Windows 的 Console 窗口) 的字符編碼方式。這個(gè)選項(xiàng)在 Windows 下對我們常用的 GUI 模式的 gVim 無效，而對 Console 模式的 Vim 而言就是 Windows 控制臺的代碼頁，并且通常我們不需要改變它。

系統(tǒng)locale是utf-8（很多l(xiāng)inux系統(tǒng)默認(rèn)的locale形式），編輯的文檔是GB2312或GBK形式的（Windows記事本
默認(rèn)保存形式，大部分編輯器也默認(rèn)保存為這個(gè)形式，所以最常見），終端類型utf-8（也就是假定客戶端是putty類的unicode軟件）
則vim打開文檔后，encoding=utf-8（locale決定的），fileencoding=latin1（自動編碼判斷機(jī)制不準(zhǔn)導(dǎo)致的），termencoding=空（默認(rèn)無需轉(zhuǎn)換term編碼），顯示文件為亂碼。
解決方案1：首先要修正fileencoding為cp936或者euc-cn（二者一樣的，只不過叫法不同），注意修正的方法不是:set
fileencoding=cp936，這只是將文件保存為cp936，正確的方法是重新以cp936的編碼方式加載文件為:edit
++enc=cp936，可以簡寫為:e ++enc=cp936。

但是這樣做，文件關(guān)閉后重新打開又要重新設(shè)置一遍。出現(xiàn)亂碼歸根結(jié)底的原因是vim不能識別該文件的編碼方式，導(dǎo)致不能正常解碼（不知道是不是叫解碼，我的理解）。所以，我在.vimrc中設(shè)置了fileencodings，相當(dāng)于告訴vim當(dāng)以utf-8解碼文件不成功時(shí)以這么幾種方式嘗試，set fileencoding=utf-8 set fileencodings=ucs-bom,utf-8,cp936,latin1. 這樣打開正常了

轉(zhuǎn)載于:https://www.cnblogs.com/klb561/p/11241664.html

總結(jié)

以上是生活随笔為你收集整理的linux查看文件的编码格式的方法 set fileencoding的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。