Por que xxd não mostra a marca de ordem de bytes?

Por que xxd não mostra a marca de ordem de bytes?

Eu tenho uma classe Java que o compilador se recusa a compilar devido \ufeffao início do arquivo. Posso ver o fato de que a lista técnica está presente vim -b file.java, mas nem xxdmostra hexdumpos dois bytes. Existe alguma maneira de fazê-los fazer isso?

Responder1

O caractere U+FEFF é codificado em UTF-8 em 3 bytes: ef bb bf.

xxdou hexdumpmostra o conteúdo de bytes, portanto, esses 3 bytes, não o caractere que esses 3 bytes codificam vim -b.

Para remover essa lista técnica (que não faz sentido em UTF-8) e corrigir outras idiossincrasias dos arquivos de texto da Microsoft (que provavelmente são a origem do seu problema), você pode usar dos2unix.

$ printf '\ufefffoobar\r\n' | hd
00000000  ef bb bf 66 6f 6f 62 61  72 0d 0a                 |...foobar..|
0000000b
$ printf '\ufefffoobar\r\n' | uconv -x name
\N{ZERO WIDTH NO-BREAK SPACE}\N{LATIN SMALL LETTER F}\N{LATIN SMALL LETTER O}\N{LATIN SMALL LETTER O}\N{LATIN SMALL LETTER B}\N{LATIN SMALL LETTER A}\N{LATIN SMALL LETTER R}\N{<control-000D>}\N{<control-000A>}
$ printf '\ufefffoobar\r\n' | uconv -x hex
\uFEFF\u0066\u006F\u006F\u0062\u0061\u0072\u000D\u000A
$ printf '\ufefffoobar\r\n' | dos2unix | hd
00000000  66 6f 6f 62 61 72 0a                              |foobar.|
00000007

informação relacionada