文件中显示<0xEF，0xBB，0xBF>字符。如何删除它们？

我正在压缩JavaScript文件，而压缩程序则抱怨我的文件中含有字符。

如何搜索并删除这些字符？

perl -pi~ -CSD -e 's/^\x{fffe}//' file1.js path/to/file2.js

如果文件中包含其他utf-8，我认为该工具会损坏，但是如果没有，也许该解决方法可以为您提供帮助。（未经测试...）

编辑：-CSD根据tchrist的评论添加了该选项。

您可以使用vim轻松删除它们，步骤如下：

1）在终端中，使用vim打开文件：

vim file_name

2）删除所有BOM表字符：

:set nobomb

3）保存文件：

:wq

删除那些字符的另一种方法-使用Vim：

vim -b文件名

现在，那些“隐藏”字符是可见的（<feff>），可以将其删除。

感谢您之前的回答，以下是sed（1）的变体，以防万一：

sed '1s/^\xEF\xBB\xBF//'

在Unix / Linux上：

sed 's/\xEF\xBB\xBF//' < inputfile > outputfile

在MacOSX上

sed $'s/\xEF\xBB\xBF//' < inputfile > outputfile

注意Mac sed之后的$。

在Windows上

Super Sed是sed的增强版本。对于Windows，这是一个独立的.exe，旨在从命令行运行。

使用tail可能会更容易：

tail --bytes=+4 filename > new_filename

@tripleee的解决方案对我不起作用。但是将文件编码更改为ASCII并再次更改为UTF-8可以达到目的:-)

我为此使用了vimgrep

:vim "[\uFEFF]" *

也是正常的vim搜索命令

/[\uFEFF]

“文件”命令显示BOM是否存在：

例如：“ file myfile.xml”显示：“ XML 1.0文档，UTF-8 Unicode（带有BOM）文本，行很长，带有CRLF行终止符”

dos2unix将删除BOM。

在Windows中，您可以使用UnxUtils的backported recode实用程序。

在Sublime Text中，您可以安装Highlighter包，然后在用户设置中自定义正则表达式。

在这里，我添加\uFEFF到highlighter_regex属性的末尾。

{
    "highlighter_enabled": true,
    "highlighter_regex": "(\t+ +)|( +\t+)|[\u2026\u2018\u2019\u201c\u201d\u2013\u2014\uFEFF]|[\t ]+$",
    "highlighter_scope_name": "invalid",
    "highlighter_max_file_size": 1048576,
    "highlighter_delay": 3000
}

要覆盖默认软件包设置，请在以下位置放置文件：

〜/ .config / sublime-text-3 / Packages / User / highlighter.sublime-settings

我建议使用“ dos2unix”工具，请测试运行dos2unix ./thefile.js。

如有必要，请尝试对多个文件使用类似的方法：

for x in $(find . -type f -exec echo {} +); do dos2unix $x ; done

致以我的问候。

保存文件，不带代码签名。