как конвертировать^M $ новая строка от dos до unix (dos2unix не работает)

Question

пытался удалить ошибочные символы новой строки, созданные из Windows.

$cat -e file.xml 
foo^M$ 
bar$ 
$ 
hello world1$ 
hello world2$ 

там, где должно быть «Foobar» без каких-либо новых строк между в то время как все новые строки должны быть сохранены. Я знаю, что в emacs мы могли бы заменить «^ M^J» на «RET», но у меня есть огромный файл, который я не хочу открывать, но только хотел использовать командную строку для его преобразования.

Я пробовал dos2unix, но он удалил только часть «^ M», все еще создавая сломанное слово/предложение. Также попробовал tr -d '\r' и sed 's:^M$::g' или sed 's:^M$\n:\n:g', все не сработало. У кого-нибудь есть идея, как это сделать правильно?

Answer 1

я копировал свой файл примера, как:

$ cat -e so.txt 
foo^M$ 
bar$ 
line2$ 
line3$ 

Вы можете использовать Perl в режиме 'Глоток' делать:

$ perl -0777 -pe 's/\r\n//g' so.txt 
foobar 
line2 
line3 

Проблема с использованием большинства ориентированных на линию подходов - это номер \r\n.

---

Вы можете сделать:

$ perl -pe 's/\r\n//' /tmp/so.txt 
foobar 
line2 
line3 

а ...

Answer 2

Возможно, следующее будет работать

sed -e 's/[\n\r]//g' old_file.txt > new_file.txt 

будет работать

Answer 3

Использование awk:

$ cat -e so.txt 
foo^M$ 
bar$ 
line2$ 
line3$ 

$ awk 1 RS=$'\r\n' ORS= so.txt 
foobar 
line2 
line3 

$ awk 1 RS=$'\r\n' ORS= so.txt | cat -e # Just for verification 
foobar$ 
line2$ 
line3$ 

Он устанавливает разделитель для \r\n & гравюр записи с ORS=<empty string>