Добавление столбца значений в файл с разделителями табуляции

Как я могу добавить столбец значений в файл, который имеет определенное количество строк. У меня есть входной файл, как это:

Входной файл:

SPATA17 1   217947738
LYPLAL1 1   219383905
FAM47E  4   77192838
SHROOM3 4   77660162
SHROOM3 4   77660731
SHROOM3 4   77662248

Выходной файл:

SPATA17 1   217947738 file1
LYPLAL1 1   219383905 file1
FAM47E  4   77192838  file1
SHROOM3 4   77660162  file1
SHROOM3 4   77660731  file1
SHROOM3 4   77662248  file1

В этом случае я хочу добавить Столбец значений до количества строк в файле. Значение остается неизменным, например «file1».

Причина в том, что у меня есть 100 таких файлов. Я не хочу открывать каждый файл и вставлять столбец. Также есть ли способ автоматизировать это, перейдя в каталог и добавив столбец значений. Значение берется из имени файла, которое должно быть добавлено в каждую строку файла в последнем / первом столбце.

linux shell-script awk

— Рон
источник

Ответы:

Вы можете использовать однолинейный цикл следующим образом:

for f in file1 file2 file3; do sed -i "s/$/\t$f/" $f; done

Для каждого файла в списке это будет использоваться sedдля добавления в конец каждой строки вкладки и имени файла.

Объяснение:

Использование -iфлага с sedдля выполнения замены на месте, перезаписи файла
Выполните замену с помощью s/PATTERN/REPLACEMENT/. В этом примере PATTERN - $это конец строки, а REPLACEMENT - это \t(= TAB) и $fэто имя файла из переменной цикла. Команда s///находится в двойных кавычках, так что оболочка может раскрывать переменные.

— Янош
источник

Код работает. Можете ли вы объяснить содержание в кавычках?

— Рон

Так же, как «awk» используется при работе со столбцами, «sed» также используется для аналогичных ситуаций. Я новичок в «awk» и «sed».

— Рон

@Ron sedнаиболее удобен для замены шаблонов и сохранения на месте. Для вашего требования сохранения файла это был относительно удобный вариант. Если вам не нужно записывать обратно в тот же файл, который вы обрабатываете, то awkобычно с ним гораздо проще работать.

— Janos

Лично меня awkслишком часто отключают входные / выходные разделители полей, поэтому я стараюсь по возможности избегать его использования, делая его sedболее привлекательным.

— user5359531

Давай, почему вы, ребята, рекомендуете эти мощные инструменты, когда есть pasteкоманда!

$ cat a
A
B
C
D
$ cat b
1
2
3
4
$ paste a b
A   1
B   2
C   3
D   4

С небольшой хитростью, вы можете использовать pasteдля целей ОП. Тем не менее, он не заменит файлы на месте:

for f in file1 file2 file3; do 
    paste $f <(yes $f | head -n $(cat $f | wc -l)) > $f.new
done

Это вставит соответствующее имя файла в качестве последнего столбца каждого файла в новый файл filename.new

— yegle
источник

Благодарность! pasteбезусловно, скрытый драгоценный камень.

— neu242

Вы можете использовать awk:

awk '{print $0, FILENAME}' file1 file2 file3 ...

— cuonglm
источник

Поскольку у каждого файла свое имя, я должен сделать это 100 раз. Есть ли способ сделать это один раз?

— Рон

Нет, FILENAMEэто переменная awk, она расширяется до текущего имени файла, который awkобрабатывается. Вы просто делаете это один, кормить все файлы awk.

— cuonglm

Хорошо, но как направить вывод в новый файл каждого файла? Сохраняет ли awk каждый файл при обработке?

— Рон

Если у вас есть GNU awk 4.1.0или позже, вы можете использовать -iдля редактирования на месте. В противном случае вы должны перенаправить awkвывод в временный файл, а затем использовать grepдля извлечения строки из каждого файла.

— cuonglm

Ну, вы можете сделатьfor file in *; do awk 'BEGIN{OFS="\t"}{print $0, FILENAME}' $file; done

— Федорки