Обнаружение кодирования перед открытием файла

Question

У меня есть файл с неизвестной кодировкой. Запуск file -bi test.trace возвращается text/plain; charset=us-ascii, но с использованием

(with-open-file (stream "/home/*/test.trace" :external-format :us-ascii) 
(code-to-work-with-file)) 

дает мне исключение:

:ASCII stream decoding error on 
#<SB-SYS:FD-STREAM for "file /home/*/test.trace" {10208D2723}>: 

    the octet sequence #(194) cannot be decoded. [Condition of type SB-INT:STREAM-DECODING-ERROR] 

Как я могу определить кодировку файла перед его открытием?

Я могу открыть файл с emacs, less и nano просто отлично, так что, кажется, мисс-обнаружение кодировки или разница в том, что file и sbcl думают кодирование должно выглядеть.

В настоящее время я избегаю этой проблемы, заставляя каждый файл иметь кодировку utf8 с vim +set nobomb | set fenc=utf8| x file-path. Но даже после этого file все еще думает, что это кодировка us-ascii. Дополнительное это не действительное постоянное решение, а грязный взломать его работу.

Answer 1

Как указано в prorgammers stackexchange в here,

Files generally indicate their encoding with a file header. There are many examples here. However, even reading the header you can never be sure what encoding a file is really using.

Я искал файлы трассировки в моей системе и нашел это, но это не имеет никакого курьез

2016-06-22 13:10 : 07 ☆ | ruby-2.2.3@laguna | Antonios-MacBook-Pro в ~/learn/lisp/stackoverflow/scripts ○ → файл -I ресурсы/hello.trace ресурсы/hello.trace: text/plain; charset = us-ascii

2016-06-22 13:11:50 ☆ | ruby-2.2.3@laguna | Antonios-MacBook-Pro в ~/learn/lisp/stackoverflow/скрипты ○ → cat resources/hello.trace println! { "Привет мир!" } печать! {concat! ("Hello, World!", "\ П")}

Так С помощью этого кода можно прочитать:

CL-USER> (with-open-file (in "/Users/toni/learn/lisp/stackoverflow/scripts/resources/hello.trace" :external-format :us-ascii) 
      (when in 
    (loop for line = (read-line in nil) 
     while line do (format t "~a~%" line)))) 
println! { "Hello, World!" } 
print! { concat ! ("Hello, World!" , "\n") } 
NIL 

или даже на китайском или то, что было:

мы можем прочитать ascci характер, как этот

CL-USER> (format nil "~{~C~}" (mapcar #'code-char '(194))) 
"Â" 

или любой другой странный характер, так что кажется, что может быть символы с акцентами добавить это в файл:

println! { "Hello, World!" } 
print! { concat ! ("Hello, World!" , "\n") } 
 
patatopita 

, и я получаю ту же ошибку:

: ASCII ошибка декодирования потока на

для «Файл/Users/toni/learn/lisp/stackoverflow/scripts/resources/hello.trace " {1003994043}>:

Последовательность октетов # (195) не может быть расшифрована. [Состояние типа SB-INT: STREAM-DECODING-ERROR]

Итак, на этом этапе вы можете работать с соревнованиями и перезапусками, чтобы изменить характер, есть опция, я не специалист в этом виде кода, но там может быть рестарт с

Restarts: 
0: [ATTEMPT-RESYNC] Attempt to resync the stream at a character boundary and continue. 
1: [FORCE-END-OF-FILE] Force an end of file. 
2: [INPUT-REPLACEMENT] Use string as replacement input, attempt to resync at a character boundary and continue. 
3: [*ABORT] Return to SLIME's top level. 
4: [ABORT] abort thread (#<THREAD "repl-thread" RUNNING {10050E0003}>) 

ввода-замены, если не попробовать остроумие европейская как Latin-1 или ISO ....

CL-USER> (with-open-file (in "/Users/toni/learn/lisp/stackoverflow/scripts/resources/hello.trace" :external-format :latin-1) 
      (when in 
    (loop for line = (read-line in nil) 
     while line do (format t "~a~%" line)))) 
println! { "Hello, World!" } 
print! { concat ! ("Hello, World!" , "\n") } 
¬ 
patatopita 
NIL 

И он должен работать, удачи

поэтому давайте прочитаем с европейской кодировкой