python 将文件转为UTF8编码

墨蓝 2022-10-08 12:29 2阅读 0赞

###### C代码在Linux编译正常，放到win上编译各种报错，发现文件编码的问题，写了批量处理文件编码脚本 ######

import codecs
    import os
    import sys
    import shutil
    import re
    import chardet
    
    convertdir = '.'
    convertfiletypes = [".c",".cpp",".h",".hpp"]
    
    def convert_encoding(filename, target_encoding):
        # Backup the origin file.
    
        # convert file from the source encoding to target encoding
        content = codecs.open(filename, 'r').read()
        source_encoding = chardet.detect(content)['encoding']
        print filename, 'encode:', source_encoding
        content = content.decode(source_encoding, 'ignore')# .encode(source_encoding)
        codecs.open(filename, 'w', encoding=target_encoding).write(content)
    
    def main():
        for root, dirs, files in os.walk(convertdir):
            for f in files:
                for filetype in convertfiletypes:
                    if f.lower().endswith(filetype):
                        filename = os.path.join(root, f)
                        print filename
                        try:
                            convert_encoding(filename, 'UTF-8-SIG')
                        except Exception, e:
                            print filename
    
    if __name__ == '__main__':
        main()

发表评论取消回复

表情：

评论列表（有 0 条评论，2人围观）

还没有评论，来说两句吧...

相关阅读

相关【文件编码转换】将GBK编码项目转为UTF-8编码项目

需求因原项目是GBK编码的，现需要使用UTF-8编码。将项目导入UTF-8编码的编辑器后，出现中文乱码。调研 VsCode 可以转文件编码，但只能一个一个转，

我就是我/ 2023年10月05日 23:55/ 0 赞/ 61 阅读

相关将UTF-8编码的文件转化为UTF-8无BOM格式

!/bin/bash if [[ -z "$1" ]];then echo '用法：./rmbom.sh [folder | file

淩亂°似流年/ 2023年07月17日 04:42/ 0 赞/ 60 阅读

相关 python2 utf-8编码

Python中默认的编码格式是`ASCII格式`，在没修改编码格式时无法正确打印汉字，所以在读取中文时会报错。解决方法为只要在文件开头加入 ` -- coding: UTF

刺骨的言语ヽ痛彻心扉/ 2022年10月19日 12:40/ 0 赞/ 250 阅读

相关 python 将文件转为UTF8编码

C代码在Linux编译正常，放到win上编译各种报错，发现文件编码的问题，写了批量处理文件编码脚本 import codecs import os

墨蓝/ 2022年10月08日 12:29/ 0 赞/ 3 阅读

相关无法将项目和文件的编码格式从UTF-8转为GBK

没有GBK的选项，无法将utf-8修改为gbk。但是导入的项目本身是GBK的，不修改编码，就会显示为乱码问题如下图 ![这里写图片描述][SouthEast] -

太过爱你忘了你带给我的痛/ 2022年06月12日 07:17/ 0 赞/ 599 阅读

相关将GBK编码形式的xml文件数据请求转为utf-8

\[java\] [view plain][] [copy][view plain] 1. public String resposeString(String urlSt

喜欢ヅ旅行/ 2022年06月06日 07:14/ 0 赞/ 697 阅读

相关 MATLAB将默认编码方式由GBK转为UTF-8

MATLAB版本：2016b 在命令窗口输入命令： feature('locale') 可以看到多是用 GBK 进行编码。如果想以 utf-8 编码，而不是

柔光的暖阳◎/ 2022年05月26日 06:42/ 0 赞/ 2693 阅读

相关用python将GBK编码文件转为UTF-8编码文件

有的时候我们有一些网页的项目，需要用到JavaScript读取一些文本文件，用以读取数据；但各种文本文件的编码方式不尽相同，特别是带有中文字符的文件，为GBK编码，一般加载后都

深藏阁楼爱情的钟/ 2022年05月17日 11:26/ 0 赞/ 847 阅读

相关 Python文件编码---gbk?OR utf8?

[Python文件编码---gbk?OR utf8?][Python_---gbk_OR utf8] windows文件名的编码是cp936的，你在使用中文文件名的时候转

﹏ヽ暗。殇╰゛Y/ 2022年03月19日 14:46/ 0 赞/ 641 阅读

相关将整个工程的GBK转为utf-8格式

eclipse将整个工程转为utf-8时原先中文注释会变为乱码，13年时写了个脚本将整个文件的java以及配置文件转为utf-8格式，下面是代码 package co

男娘i/ 2021年11月11日 16:28/ 0 赞/ 320 阅读