【原創】python3讀取操作系統設備中文編碼問題——encode、decode


        一、背景和問題

        近期在做一個關於聲卡錄音的項目,開發環境是win10 64位家庭中文版,pycharm2019.1,python3.6(Anaconda3),python模塊pyaudio。因為需要實現內錄音(錄制系統內部聲音,而不是麥克風的聲音),因此需要pyaudio模塊讀取設備名稱來指定相應的設備進行錄制。問題來了,系統是中文的,設備也有中文字符(“立體聲混音”)。試來試去,就是find不到設備,pycharm調試,確實遍歷到有好幾個設備,但是都是亂碼的。問題露出頭來了,果然,又是編碼的問題。為什么用到果然,因為編碼問題之前在做爬蟲的時候可困擾了很久,網頁爬出來的都是各種二進制流數據。再說了,編碼這個即原始又無法回避的問題,坑可不小。

        問題:中文亂碼、AttributeError: 'str' object has no attribute 'decode'、UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc9、Beta版:使用Unicode utf-8提供全球語言支持。

        二、編碼的基礎知識

        這里來學習下有關編碼的一些基本知識。這里要感謝博主joyfixing寫的《徹底搞懂 python 中文亂碼問題》,來龍去脈寫的很詳細,而且相當感同身受,這里主要進行引用借鑒。

  三、關於亂碼

        編碼encode就是將字符轉成二進制流,解碼decode就是把二進制流轉成各種的字符。在這兩個相互轉化的過程中,涉及到操作系統、控制台cmd、IDE、文本保存等等,有一環節出現不兼容就會亂碼,亂碼的形式可謂眼花繚亂,一臉懵逼。(黑人問號臉)可以網上搜索,這里就不闡述了。

        四、解決方法

        在開發的時候,我把程序的編碼設為了utf-8編碼格式。通過這樣設置。# -*- ecoding: utf-8 -*-

        天真的以為應該就可以了吧。發現,沒有那么簡單。如圖,還是一團糟。

        於是乎,就開始了兩天的網上沖浪,而且是手機設的熱點!!!

        有人說pycharm設置里要設下文件編碼模式,我就照做了。

        還是沒解決。有人說看下系統默認的編碼模式,我就看了下。返回的都是utf-8啊。

        還有人說要decode轉到中間的Unicode字符集,再encode到utf-8.新的問題來了,再搜索,哦,python3和python2不一樣了,3里面不能這么用了。(持續黑人問號臉)

        又有人說改成這樣,對。在cmd里輸入chcp指令查詢操作系統編碼為936,為gbk。有道理,有些小激動,感覺要出人頭地了呢。

        新的問題又來了。UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc9

        還有人說加上ignore,把一些沒有的字符集給忽略了,還是亂的!!!

        后面就各種編碼方式(utf-8、gb2312、gbk、gb**、utf-8-sig……),各種encode、decode排列組合了,幾乎到了奔潰的邊緣。(我是誰?我在哪?我在干什么?)

        直到看到有人說更改操作系統的語言設置。

 

 時間和語言-管理語言設置-更改系統區域設置-中文(簡體、中國),沒錯啊!!!我也是這樣的啊。重啟。好噠,使出我的殺手鐧—重啟下!!!

稍等片刻,啟動pycharm,調試程序……還!是!亂!碼!啊!啊!啊!

等下,等下,剛才更改區域語言的時候,下面有一行字是什么來着。Beta版:使用Unicode utf-8提供全球語言支持。

        操作系統沒有默認的嗎???好噠,勾上,重啟。期待的大眼睛!!!

        天啊,解決了,困擾了兩天的問題解決了,真的嗎,喜出望外。(我是誰?我在哪?我在干什么?)

        五、總結

        當然,關於編碼問題,還是那句話,即原始,又避不開。這樣設置后,可能有一些軟件會不兼容的。

        我們站在巨人的肩上,享受時光靜好的同時,適當了解原理和前輩走過的路。希望代碼且調且珍惜,bug漸行漸遠。

        Ps:

        大家在coding的時候,項目文件開始會留下逼格滿滿的注釋,每創建一個就寫一次嗎?不存在的。

        在 File | Settings | Editor | File and Code Templates 設置就可以了。

 

# -*- ecoding: utf-8 -*-

# @ModuleName: ${NAME}

# @FileName  : ${NAME}.py

# @Software  : ${PRODUCT_NAME}

# @Function  :

# @Author    : ***

# @blog      : https://www.cnblogs.com/imu-ai/

# @E-mail    : ***

# @Time      : ${DATE} ${TIME}


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM