Bash: перебор строк в переменной

Как правильно перебирать строки в bash либо в переменной, либо из вывода команды? Простая установка переменной IFS для новой строки работает для вывода команды, но не для обработки переменной, содержащей новые строки.

Например

#!/bin/bash

list="One\ntwo\nthree\nfour"

#Print the list with echo
echo -e "echo: \n$list"

#Set the field separator to new line
IFS=$'\n'

#Try to iterate over each line
echo "For loop:"
for item in $list
do
        echo "Item: $item"
done

#Output the variable to a file
echo -e $list > list.txt

#Try to iterate over each line from the cat command
echo "For loop over command output:"
for item in `cat list.txt`
do
        echo "Item: $item"
done

Это дает вывод:

echo: 
One
two
three
four
For loop:
Item: One\ntwo\nthree\nfour
For loop over command output:
Item: One
Item: two
Item: three
Item: four

Как видите, при выводе переменной или итерации по catкоманде каждая строка выводится правильно. Однако первый цикл for печатает все элементы в одной строке. Есть идеи?

В bash, если вы хотите встроить строки в строку, заключите строку в $'':

$ list="One\ntwo\nthree\nfour"
$ echo "$list"
One\ntwo\nthree\nfour
$ list=$'One\ntwo\nthree\nfour'
$ echo "$list"
One
two
three
four

И если у вас уже есть такая строка в переменной, вы можете читать ее построчно с помощью:

while read -r line; do
    echo "... $line ..."
done <<< "$list"

Вы можете использовать while+ read:

some_command | while read line ; do
   echo === $line ===
done

Btw. -eвозможность echoнестандартно. Используйте printfвместо этого, если вы хотите переносимость.

#!/bin/sh

items="
one two three four
hello world
this should work just fine
"

IFS='
'
count=0
for item in $items
do
  count=$((count+1))
  echo $count $item
done

Вот забавный способ сделать цикл for:

for item in ${list//\\n/
}
do
   echo "Item: $item"
done

Немного более разумным / читабельным было бы:

cr='
'
for item in ${list//\\n/$cr}
do
   echo "Item: $item"
done

Но это слишком сложно, вам нужно только место там:

for item in ${list//\\n/ }
do
   echo "Item: $item"
done

Ваша $lineпеременная не содержит новых строк. Он содержит случаи, \сопровождаемые n. Вы можете видеть это ясно с:

$ cat t.sh
#! /bin/bash
list="One\ntwo\nthree\nfour"
echo $list | hexdump -C

$ ./t.sh
00000000  4f 6e 65 5c 6e 74 77 6f  5c 6e 74 68 72 65 65 5c  |One\ntwo\nthree\|
00000010  6e 66 6f 75 72 0a                                 |nfour.|
00000016

Подстановка заменяет те пробелами, которых достаточно для работы циклов:

$ cat t.sh
#! /bin/bash
list="One\ntwo\nthree\nfour"
echo ${list//\\n/ } | hexdump -C

$ ./t.sh 
00000000  4f 6e 65 20 74 77 6f 20  74 68 72 65 65 20 66 6f  |One two three fo|
00000010  75 72 0a                                          |ur.|
00000013

Демо-версия:

$ cat t.sh
#! /bin/bash
list="One\ntwo\nthree\nfour"
echo ${list//\\n/ } | hexdump -C
for item in ${list//\\n/ } ; do
    echo $item
done

$ ./t.sh 
00000000  4f 6e 65 20 74 77 6f 20  74 68 72 65 65 20 66 6f  |One two three fo|
00000010  75 72 0a                                          |ur.|
00000013
One
two
three
four

Вы также можете сначала преобразовать переменную в массив, а затем выполнить итерацию.

lines="abc
def
ghi"

declare -a theArray

while read -r line
do
    theArray+=($line)            
done <<< "$lines"

for line in "${theArray[@]}"
do
    echo "$line"
    #Do something complex here that would break your read loop
done

Это полезно только в том случае, если вы не хотите связываться с командой, IFSа также возникают проблемы с readкомандой, как это может случиться, если вы вызовете другой скрипт внутри цикла, чтобы этот скрипт мог очистить буфер чтения перед возвратом, как это случилось со мной. ,