在字符集之间转换文本文件的最快，最简单的工具或方法是什么？

具体来说，我需要从UTF-8转换为ISO-8859-15，反之亦然。

一切顺利：以您喜欢的脚本语言，命令行工具或其他适用于OS，网站等的实用工具进行一线处理

迄今为止最好的解决方案：

在Linux / UNIX / OS X / cygwin上：

• Troels Arvin建议的Gnu iconv最好用作过滤器。它似乎是普遍可用的。例：

  $ iconv -f UTF-8 -t ISO-8859-15 in.txt > out.txt
  

  正如Ben指出的，有一个使用iconv的在线转换器。

• Cheekysoft建议的Gnu recode（手册）将就地转换一个或几个文件。例：

  $ recode UTF8..ISO-8859-15 in.txt
  

  这使用较短的别名：

  $ recode utf8..l9 in.txt
  

  重新编码还支持可用于在不同的行尾类型和编码之间进行转换的表面：

  将换行符从LF（Unix）转换为CR-LF（DOS）：

  $ recode ../CR-LF in.txt
  

  Base64编码文件：

  $ recode ../Base64 in.txt
  

  您也可以将它们结合在一起。

  将具有Unix行结尾的Base64编码的UTF8文件转换为具有Dos行结尾的Base64编码的Latin 1文件：

  $ recode utf8/Base64..l1/CR-LF/Base64 file.txt
  

在带有Powershell的 Windows （Jay Bazuzi）上：

• PS C:\> gc -en utf8 in.txt | Out-File -en ascii out.txt

  （尽管没有ISO-8859-15支持；它说支持的字符集是unicode，utf7，utf8，utf32，ascii，bigendianunicode，default和oem。）

编辑

您是说iso-8859-1支持吗？使用“字符串”可以做到这一点，反之亦然

gc -en string in.txt | Out-File -en utf8 out.txt

注意：可能的枚举值为“未知，字符串，Unicode，字节，BigEndianUnicode，UTF8，UTF7，Ascii”。

• CsCvt- Kalytta的字符集转换器是Windows另一个基于命令行的出色转换工具。

独立实用程序方法

iconv -f ISO-8859-1 -t UTF-8 in.txt > out.txt

-f ENCODING  the encoding of the input
-t ENCODING  the encoding of the output

您不必指定这两个参数。它们将默认为您当前的语言环境，通常为UTF-8。

尝试VIM

如果可以的vim话，可以使用以下命令：

未针对每种编码进行测试。

与此有关的最酷的部分是，您不必知道源编码

vim +"set nobomb | set fenc=utf8 | x" filename.txt

请注意，此命令直接修改文件

说明部分！

1. +：在打开文件时，vim用来直接输入命令。通常用于在特定行打开文件：vim +14 file.txt
2. |：多个命令的分隔符（如;bash中的命令）
3. set nobomb ：没有utf-8 BOM
4. set fenc=utf8：将新编码设置为utf-8 doc链接
5. x ：保存并关闭文件
6. filename.txt ：文件的路径
7. "：由于管道的缘故，这里在这里。（否则bash会将它们用作bash管道）

在Linux下，您可以使用功能非常强大的recode命令尝试在不同的字符集以及任何行尾问题之间进行转换。recode -l将向您显示该工具可以转换的所有格式和编码。这很可能会很长。

iconv（1）

iconv -f FROM-ENCODING -t TO-ENCODING file.txt

此外，还有多种语言的基于iconv的工具。

Get-Content -Encoding UTF8 FILE-UTF8.TXT | Out-File -Encoding UTF7 FILE-UTF7.TXT

最短的版本，如果可以假设输入的BOM是正确的：

gc FILE.TXT | Out-File -en utf7 file-utf7.txt

尝试iconv Bash功能

我把它放进去了.bashrc：

utf8()
{
    iconv -f ISO-8859-1 -t UTF-8 $1 > $1.tmp
    rm $1
    mv $1.tmp $1
}

..以便能够像这样转换文件：

utf8 MyClass.java

尝试记事本++

在Windows上，我能够使用Notepad ++进行从ISO-8859-1到UTF-8的转换。单击"Encoding"，然后单击确定"Convert to UTF-8"。

Oneliner使用查找，具有自动字符集检测

将自动检测所有匹配文本文件的字符编码，并将所有匹配文本文件转换为utf-8编码：

$ find . -type f -iname *.txt -exec sh -c 'iconv -f $(file -bi "$1" |sed -e "s/.*[ ]charset=//") -t utf-8 -o converted "$1" && mv converted "$1"' -- {} \;

要执行这些步骤，子壳sh使用具有-exec，运行一衬垫与所述-c标志，并且使文件名作为位置参数"$1"与-- {}。在这两者之间，utf-8输出文件被临时命名为converted。

从而file -bi表示：

• -b，--brief 不要在输出行前添加文件名（简短模式）。

• -i，--mime 使file命令输出mime类型的字符串，而不是更传统的人类可读字符串。因此它可以说text/plain; charset=us-ascii而不是ASCII text。该sed命令仅将其切us-ascii为iconv。

该find命令对于这种文件管理自动化非常有用。点击查看更多find嘉豪。

PHP iconv（）

iconv("UTF-8", "ISO-8859-15", $input);

DOS / Windows：使用代码页

chcp 65001>NUL
type ascii.txt > unicode.txt

命令chcp可用于更改代码页。代码页65001是UTF-8的Microsoft名称。设置代码页后，以下命令生成的输出将被设置为代码页。

编写属性文件（Java）通常我在Linux中使用它（mint和ubuntu发行版）：

$ native2ascii filename.properties

例如：

$ cat test.properties 
first=Execução número um
second=Execução número dois

$ native2ascii test.properties 
first=Execu\u00e7\u00e3o n\u00famero um
second=Execu\u00e7\u00e3o n\u00famero dois

PS：我在葡萄牙语中写了执行编号一/二来强制使用特殊字符。

就我而言，在第一次执行时，我收到以下消息：

$ native2ascii teste.txt 
The program 'native2ascii' can be found in the following packages:
 * gcj-5-jdk
 * openjdk-8-jdk-headless
 * gcj-4.8-jdk
 * gcj-4.9-jdk
Try: sudo apt install <selected package>

当我安装第一个选件（gcj-5-jdk）时，问题就解决了。

我希望这可以帮助某人。

与红宝石：

ruby -e "File.write('output.txt', File.read('input.txt').encode('UTF-8', 'binary', invalid: :replace, undef: :replace, replace: ''))"

资料来源：https : //robots.thoughtbot.com/fight-back-utf-8-invalid-byte-sequences

使用此Python脚本：https : //github.com/goerz/convert_encoding.py 在任何平台上均可使用。需要Python 2.7。

我最喜欢的工具是Jedit（基于Java的文本编辑器），它具有两个非常方便的功能：

• 一种使用户可以使用不同的编码重新加载文本的方法（因此可以直观地控制结果）
• 另一个允许用户在保存之前明确选择编码（和行尾）的编码

只需在状态栏右侧（底部）指示当前字符集的IntelliJ IDEA IDE中更改已加载文件的编码。它提示重新加载或转换，请使用转换。请确保您事先备份了原始文件。

如果使用macOS GUI应用程序是麻烦的事，SubEthaEdit是我通常用于编码处理的文本编辑器-其“转换预览”可让您查看输出编码中的所有无效字符，并修复/删除它们。

而且它现在是开源的，所以对他们来说是😉。

如如何纠正文件的字符编码中所述？ 合成吧！使您可以在ICU库支持的所有编码之间的OS X上轻松转换。

另外，您可以显示从所有编码转换为Unicode的文件的某些字节，以快速查看哪一个字节适合您的文件。