Символ '^ M' в конце строк

Когда я запускаю конкретный сценарий SQL в средах Unix, я вижу символ «^ M» в конце каждой строки сценария SQL, поскольку он отображается в командной строке. Я не знаю, на какой ОС изначально был создан сценарий SQL.

Что вызывает это и как это исправить?

Это вызвано символами конца строки DOS / Windows. Как сказал Энди Уитфилд, команда dos2unix в Unix поможет решить эту проблему. Если вам нужна дополнительная информация, вы можете прочитать страницы руководства по этой команде.

Исправьте окончание строки vi, выполнив следующее:

:set fileformat=unix

:w

Причина в разнице между тем, как ОС на базе Windows и ОС на базе Unix хранят маркеры конца строки.

Операционные системы на базе Windows, благодаря наследию DOS, сохраняют конец строки как пару символов - 0x0D0A(возврат каретки + перевод строки). Операционные системы на основе Unix просто используют 0x0A( перевод строки ). ^MВы видите визуальное представление 0x0D(а возврат каретки ).

dos2unix поможет в этом. Возможно, вам также потребуется настроить источник сценариев, чтобы он был «дружественным к Unix».

Самый простой способ - использовать vi. Я знаю, что это звучит ужасно, но это просто и уже установлено в большинстве сред UNIX. ^ M - это новая строка из среды Windows / DOS.

из командной строки: $ vi filename

Затем нажмите « :», чтобы перейти в командный режим.

Искать и заменить все глобально - это :%s/^M//g« Нажмите и удерживайте элемент управления, затем нажмите V, затем M », который заменит ^ M ничем.

Затем, чтобы написать и выйти, введите " :wq" Готово!

Попробуйте использовать dos2unix для удаления ^ M.

В vi выполните :%s/^M//g

Чтобы ^Mудерживать CTRLклавишу, нажмите Vзатем M(оба, удерживая клавишу Control), и ^Mпоявится значок. Это найдет все вхождения и ничего не заменит.

Скрипт SQL изначально был создан в ОС Windows. Символы '^ M' являются результатом того, что Windows и Unix имели разные представления о том, что использовать для символа конца строки. Вы можете использовать perl в командной строке, чтобы исправить это.

perl -pie 's/\r//g' filename.txt

^ M обычно вызывается оператором новой строки Windows и переводится в Unix выглядит как ^ M. Команда dos2unix должна удалить их красиво

dos2unix [параметры] [-c convmode] [-o файл ...] [-n infile outfile ...]

C:\tmp\text>dos2unix hello.txt helloUNIX.txt

Sed еще более широко доступен и может делать подобные вещи, даже если dos2unix не установлен.

C:\tmp\text>sed s/\r// hello.txt > helloUNIX.txt  

Вы также можете попробовать tr:

cat hello.txt | tr -d \r > helloUNIX2.txt  

Вот результаты:

C:\tmp\text>dumphex hello.txt  
00000000h: 48 61 68 61 0D 0A 68 61 68 61 0D 0A 68 61 68 61 Haha..haha..haha  
00000010h: 0D 0A 0D 0A 68 61 68 61 0D 0A                   ....haha..  

C:\tmp\text>dumphex helloUNIX.txt  
00000000h: 48 61 68 61 0A 68 61 68 61 0A 68 61 68 61 0A 0A Haha.haha.haha..  
00000010h: 68 61 68 61 0A                                  haha.  

C:\tmp\text>dumphex helloUNIX2.txt  
00000000h: 48 61 68 61 0A 68 61 68 61 0A 68 61 68 61 0A 0A Haha.haha.haha..  
00000010h: 68 61 68 61 0A                                  haha.  

Чтобы заменить символы ^ M в редакторе vi, используйте ниже

откройте текстовый файл, скажем t1.txt

vi t1.txt

Войдите в командный режим, нажав shift + :

затем нажмите клавиши, как указано %s/^M/\r/g

in above ^M is not (shift + 6)M instead it is (ctrl + V)(ctrl + M)

Альтернативой dos2unixкоманде может быть использование стандартных утилит, например sed.

Например, dos to unix:

sed 's/\r$//' dos.txt > unix.txt

unix для dos:

sed 's/$/\r/' unix.txt > dos.txt

Вы можете удалить ^ M из файлов напрямую с помощью команды sed, например:

sed -i'.bak' s/\r//g *.*

Если вас устраивают изменения, удалите файлы .bak:

rm -v *.bak

Преобразуйте окончания строк DOS / Windows (\ r \ n) в окончания строк Unix (\ n) с помощью tr:

tr '\r\n' '\n' < dosFile.txt > unixFile.txt

Сообщение о замене новой строки из командной строки Unix

od -a $file полезен для изучения этих типов вопросов в Linux (аналогично dumphex выше).

В Perl, если вы не хотите устанавливать переменную $ / и использовать chomp (), вы также можете:

$var =~ /\r\n//g;

Мои два цента

Другая команда vi, которая подойдет: :%s/.$// удаляет последний символ каждой строки в файле. Недостатком этой команды поиска и замены является то, что ей все равно, какой будет последний символ, поэтому будьте осторожны, чтобы не вызывать его дважды.