Bash에서 UTF-8 특수 문자를 어떻게 변환합니까?

Question 1

이 UTF-8 텍스트를 bash에서 특수 문자가 포함된 텍스트로 어떻게 변환합니까?

당신이 가지고 있는 것은 그렇지 않습니다.상당히"UTF-8 텍스트". 당신은 실제로원하다일반 UTF-8 텍스트산출, Linux가 모든 곳에서 "특수 문자"에 사용하는 것이기 때문입니다.

대신 입력은 MIME(RFC 2047) UTF-8로 인코딩되었습니다. "Q"는 Quoted-Printable 모드를 표시하고 "B"는 Base64 모드를 표시합니다. 그 중에서도 Perl의인코딩::MIME::헤더다음 두 가지를 모두 디코딩하는 데 사용할 수 있습니다.

#!/usr/bin/env perl
use open qw(:std :utf8);
use Encode qw(decode);

while (my $line = <STDIN>) {
        print decode("MIME-Header", $line);
}

Oneliner( perldoc perlrun설명은 참조):

perl -CS -MEncode -ne 'print decode("MIME-Header", $_)'

이는 어떤 형식이든 입력으로 사용할 수 있습니다.

$ echo "Subject: =?UTF-8?Q?Meine_G=c3=bcte?=, \
                 =?UTF-8?B?U2Now7ZuZSBHcsO8w59lIQ==?=" | perl ./decode.pl
Subject: Meine Güte, Schöne Grüße!

Python 3 버전:

#!/usr/bin/env python3
import email.header, sys

words = email.header.decode_header(sys.stdin.read())
words = [s.decode(c or "utf-8") for (s, c) in words]
print("".join(words))

Answer

이 UTF-8 텍스트를 bash에서 특수 문자가 포함된 텍스트로 어떻게 변환합니까?

당신이 가지고 있는 것은 그렇지 않습니다.상당히"UTF-8 텍스트". 당신은 실제로원하다일반 UTF-8 텍스트산출, Linux가 모든 곳에서 "특수 문자"에 사용하는 것이기 때문입니다.

대신 입력은 MIME(RFC 2047) UTF-8로 인코딩되었습니다. "Q"는 Quoted-Printable 모드를 표시하고 "B"는 Base64 모드를 표시합니다. 그 중에서도 Perl의인코딩::MIME::헤더다음 두 가지를 모두 디코딩하는 데 사용할 수 있습니다.

#!/usr/bin/env perl
use open qw(:std :utf8);
use Encode qw(decode);

while (my $line = <STDIN>) {
        print decode("MIME-Header", $line);
}

Oneliner( perldoc perlrun설명은 참조):

perl -CS -MEncode -ne 'print decode("MIME-Header", $_)'

이는 어떤 형식이든 입력으로 사용할 수 있습니다.

$ echo "Subject: =?UTF-8?Q?Meine_G=c3=bcte?=, \
                 =?UTF-8?B?U2Now7ZuZSBHcsO8w59lIQ==?=" | perl ./decode.pl
Subject: Meine Güte, Schöne Grüße!

Python 3 버전:

#!/usr/bin/env python3
import email.header, sys

words = email.header.decode_header(sys.stdin.read())
words = [s.decode(c or "utf-8") for (s, c) in words]
print("".join(words))

Question 2

이메일 제목 자체가 헤더이며 헤더에는 ASCII 문자만 포함되어야 합니다. 이것이 UTF-8(또는 기타 비ASCII 문자 세트) 주제를 인코딩해야 하는 이유입니다.

ASCII가 아닌 문자를 ASCII로 인코딩하는 방법은 RFC 1342에 설명되어 있습니다.

기본적으로 인코딩된 주제는 (예제에 이미 나열한 대로) 다음과 같은 형식을 갖습니다.

=?charset?encoding?encoded-text?=

인코딩 값에 따라 인코딩된 텍스트는 quoted-printable(Q) 또는 base64(B)로 디코딩됩니다.

사람이 읽을 수 있는 형식을 얻으려면 제목 헤더 값의 인코딩된 텍스트 부분을 디코딩하는 프로그램에 전달해야 합니다. 나는 이를 수행하는 몇 가지 독립 실행형 명령(uudecode)이 있다고 생각하지만 Perl 한 줄짜리 명령을 사용하는 것을 선호합니다.

인용 인쇄용:

perl -pe 'use MIME::QuotedPrint; $_=MIME::QuotedPrint::decode($_);'

base64의 경우:

perl -pe 'use MIME::Base64; $_=MIME::Base64::decode($_);'

전체 제목 헤더 값이 아닌 인코딩된 텍스트 부분만 전달해야 합니다.

Answer