一个批量移除BOM头的bash脚本

最新推荐文章于 2021-06-25 16:58:01 发布

转载最新推荐文章于 2021-06-25 16:58:01 发布 · 63 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/mondol/p/5830008.html

本文介绍了一个用于批量去除UTF-8编码文件BOM头的Shell脚本。该脚本能够处理单个文件或整个目录，对于需要提交到特定SVN服务器（如不允许BOM头存在）的情况非常有用。

有时候我们的文件可能不需要BOM头，例如：我们公司的SVN服务器提供的代码都UTF8编码保存（不能有BOM头）否则代码提交不上去。

文件很多的时候就需要批量操作。

脚本使用方法：remove-bom.sh filePath|dirPath

参数可传文件路径或目录路径。具体代码如下：

#!/usr/bin/env bash

# @author frank
# @email frank@mondol.info
# @created 2016-09-01
#
# Usage: remove-bom.sh filePath|dirPath

removeBomByFile() {
    bomFile=`grep -I -l $'^\xEF\xBB\xBF' $1`
    if [ x$1 = x$bomFile ]; then
        # has BOM
        sed -i 's/\xEF\xBB\xBF//' $1
        echo BOM removed by file: $1
    fi
}

if [ -d $1 ]; then
    for filePath in `find $1 -type f | grep -vE "/\.[^/]+/"`
    do
        # grep exclude hide files
        removeBomByFile $filePath
    done
elif [ -e $1 ]; then
    removeBomByFile $1
else
    echo $1 is not a file or directory
fi