⑴UTF编码和GB编码是有区别的,在sqlplus中导入UTF编码的sql脚本就会出现乱码错误,这时就需要将UTF编码转换成GB编码,可是一个个的转换十分麻烦,下面小编就教你如何在Linux下将UTF编码批量转换成GB编码。
⑵本人在使用oracle的sqlplus批量导入UTF编码的sql脚本时,由于不了解如何设置让sqlplus识别UTF格式,导致出现乱码、错行等错误,而使工作无法继续,在google无果的情况下只好想办法转换编码。
⑶由于文件较多,手动转换太麻烦,于是想到用脚本批量转换,幸好网上相关脚本比较多,实现起来唯一的麻烦是UTF的BOM标记。
⑷#!/bin/bash
⑸for loop in `find 。 -type f -name “*.sql” -print`do
⑹echo $loop
⑺mv -f $loop $loop.tmp
⑻dosunix $loop.tmp
⑼file_check_utf=‘file_check_utf.log’
⑽sed -n ‘l’ $loop.tmp 》$file_check_utf. if grep ‘^\\\’ $file_check_utf 》/dev/null 》&. then
⑾echo ‘UTF- BOM’
⑿sed -n -e ‘s/^.。。//’ -e ‘w intermediate.txt’ $loop.tmp. iconv -f UTF- -t GB -o $loop intermediate.txt. rm -rf intermediate.txt
⒀rm -rf $loop.tmp
⒁elif iconv -f UTF- -t GB $loop.tmp 》/dev/null 》&. then
⒂echo ‘UTF-’
⒃iconv -f UTF- -t GB -o $loop $loop.tmp. rm -rf $loop.tmp
⒄echo ‘ANSI’
⒅mv -f $loop.tmp $loop
⒆rm -rf $file_check_utf
⒇#模拟unixdos,要求文本文件最后一行必须有换行符. sed -n -e ‘s/$/
⒈/g’ -e ‘w ’$loop.tmp $loop. mv -f $loop.tmp $loop
⒉#!/bin/bash
⒊for loop in `find 。 -type f -name “*.sql” -print`do
⒋echo $loop
⒌mv -f $loop $loop.tmp
⒍dosunix $loop.tmp
⒎file_check_utf=‘file_check_utf.log’
⒏sed -n ‘l’ $loop.tmp 》$file_check_utf. if grep ‘^\\\’ $file_check_utf 》/dev/null 》&. then
⒐echo ‘UTF- BOM’
⒑sed -n -e ‘s/^.。。//’ -e ‘w intermediate.txt’ $loop.tmp. iconv -f UTF- -t GB -o $loop intermediate.txt. rm -rf intermediate.txt
⒒rm -rf $loop.tmp
⒓elif iconv -f UTF- -t GB $loop.tmp 》/dev/null 》&. then
⒔echo ‘UTF-’
⒕iconv -f UTF- -t GB -o $loop $loop.tmp. rm -rf $loop.tmp
⒖echo ‘ANSI’
⒗mv -f $loop.tmp $loop
⒘rm -rf $file_check_utf
⒙#模拟unixdos,要求文本文件最后一行必须有换行符. sed -n -e ‘s/$/
⒚/g’ -e ‘w ’$loop.tmp $loop. mv -f $loop.tmp $loop
⒛.处理UTF的BOM,本人没有找到好的办法,最后用sed+grep判断了一下,如果前三个字节是\\\,则文件必定是UTF,用sed去掉这三个字节再转换
①.为了避免重复或者遗漏,脚本中用iconv对没有BOM的文件尝试转换了一把,转换成功说明文件是UTF,否则说明是ANSI也就是GB
②.关于最后的sed命令,那是因为本人的系统上没有unixdos命令,所以进行了模拟,目的是为了方便自己在windows下查看和编辑
③以上就是Linux下将UTF编码批量转换成GB编码的方法介绍了,转换后就能解决乱码等问题,可使用命令镜像批量转换,你学会了吗?