Рекурсивно искать шаблон / текст только в указанном имени файла каталога?

У меня есть каталог (например, abc/def/efg) со многими подкаталогами (например,:) abc/def/efg/(1..300). Все эти подкаталоги имеют общий файл (например, file.txt). Я хочу искать строку только в этом, file.txtза исключением других файлов. Как я могу это сделать?

Я использовал grep -arin "pattern" *, но это очень медленно, если у нас много подкаталогов и файлов.

В родительском каталоге вы можете использовать findи запускать grepтолько эти файлы:

find . -type f -iname "file.txt" -exec grep -Hi "pattern" '{}' +

Вы также можете использовать Globstar.

Создание grepкоманд с помощью find, как в ответе Занны , является очень надежным, универсальным и переносимым способом сделать это (см. Также ответ Судодуса ). И Муру опубликовали отличный подход использования grep«s --includeварианта . Но если вы хотите использовать только grepкоманду и вашу оболочку, есть другой способ сделать это - вы можете заставить саму оболочку выполнить необходимую рекурсию :

shopt -s globstar   # you can skip this if you already have globstar turned on
grep -H 'pattern' **/file.txt

В -Hфлаг марки grepпоказать имя файла , даже если только один соответствующий файл найден. Вы можете передать -a, -iи -nфлаги (из вашего примера), grepа также, если это то, что вам нужно. Но не пропустите -rили -Rпри использовании этого метода. Это оболочка, которая рекурсивно использует каталоги в расширении шаблона glob, содержащего **, а неgrep .

_{Эти инструкции относятся к оболочке Bash. Bash - это пользовательская оболочка по умолчанию в Ubuntu (и в большинстве других операционных систем GNU / Linux), поэтому, если вы используете Ubuntu и не знаете, какая у вас оболочка, это почти наверняка Bash. Несмотря на то, что популярные оболочки обычно поддерживают **глобальные списки, они не всегда работают одинаково. Для получения дополнительной информации см Stéphane Chazelas «s отличный ответ на Результат логинсервера *, ** Ls и Ls *** на Unix.SE .}

Как это устроено

Включение опции оболочки globstar bash позволяет **сопоставлять пути, содержащие разделитель каталогов ( /). Таким образом, это рекурсивный глобус каталога. В частности, как man bashобъясняет:

Когда опция оболочки globstar включена и * используется в контексте расширения имени пути, два смежных *, используемых в качестве единого шаблона, будут соответствовать всем файлам и нулю или более каталогов и подкаталогов. Если после / / два соседних * будут соответствовать только каталогам и подкаталогам.

Вы должны быть осторожны с этим, так как вы можете запускать команды, которые изменяют или удаляют гораздо больше файлов, чем вы предполагаете, особенно если вы пишете, **когда намеревались писать *. (Это безопасно в этой команде, которая не меняет никаких файлов.) shopt -u globstarОтключает опцию оболочки globstar.

Есть несколько практических различий между Globstar и find.

findгораздо более универсален, чем Globstar. Все, что вы можете сделать с globstar, вы можете сделать и с findкомандой. Мне нравится globstar, и иногда это удобнее, но globstar не является общей альтернативой find.

Метод выше не ищет внутри каталогов, имена которых начинаются с .. Иногда вы не хотите использовать такие папки, но иногда это так.

Как и в случае с обычным глобаном, оболочка создает список всех подходящих путей и передает их в качестве аргументов вашей команде ( grep) вместо самого глобуса. Если вы называете так много файлов, file.txtчто полученная команда будет слишком длинной для выполнения системой, то приведенный выше метод завершится ошибкой. На практике вам понадобится (как минимум) тысячи таких файлов, но это может произойти.

Используемые методы findне подпадают под это ограничение, потому что:

• Путь Занны строит и запускает grepкоманду с потенциально большим количеством аргументов пути. Но если найдено больше файлов, чем может быть указано в одном пути, действие +-terminated -execзапускает команду с некоторыми из путей, затем запускает ее снова с еще несколькими путями и так далее. В случае использования grepдля строки в нескольких файлах это приводит к правильному поведению.

  ^{Как и описанный здесь метод globstar, он печатает все совпадающие строки с путями, добавленными к каждой.}

• Путь Судодуса проходит grepотдельно для каждого file.txtнайденного. Если есть много файлов, это может быть медленнее, чем некоторые другие методы, но это работает.

  ^{Этот метод находит файлы и печатает их пути, после чего следуют соответствующие строки, если таковые имеются. Это формат вывода, отличный от формата, созданного моими методами, Zanna и Muru .}

Получение цвета с find

Одним из непосредственных преимуществ использования globstar является то, что по умолчанию в Ubuntu grepбудет производить цветной вывод. Но вы можете легко получить это findтоже .

Учетные записи пользователей в Ubuntu создаются с псевдонимом, который grepдействительно запускает grep --color=auto(бегите, alias grepчтобы увидеть). Это хорошая вещь , что псевдонимы в значительной степени только расширяется , когда вы выдаете их в интерактивном режиме , но это означает , что если вы хотите , findчтобы вызвать grepс --colorфлагом, вы должны написать его в явном виде. Например:

find . -name file.txt -exec grep --color=auto -H 'pattern' {} +

Вам не нужно findдля этого; grepможет справиться с этим совершенно нормально самостоятельно:

grep "pattern" . -airn --include="file.txt"

От man grep:

--exclude=GLOB
      Skip  files  whose  base  name  matches  GLOB  (using   wildcard
      matching).   A  file-name  glob  can  use  *,  ?,  and [...]  as
      wildcards, and \ to quote  a  wildcard  or  backslash  character
      literally.

--exclude-from=FILE
      Skip  files  whose  base name matches any of the file-name globs
      read from FILE  (using  wildcard  matching  as  described  under
      --exclude).

--exclude-dir=DIR
      Exclude  directories  matching  the  pattern  DIR from recursive
      searches.

--include=GLOB
      Search  only  files whose base name matches GLOB (using wildcard
      matching as described under --exclude).

Метод, приведенный в ответе Муру , о бегеgrep с использованием --includeфлага для указания имени файла, часто является лучшим выбором. Тем не менее, это также может быть сделано с find.

Подход в этом ответе используется findдля запуска grepотдельно для каждого найденного файла и печатает путь к каждому файлу ровно один раз. , над совпадающими строками, найденными в каждом файле. (Методы, которые печатают путь перед каждой соответствующей строкой, описаны в других ответах.)

Вы можете изменить каталог на вершину дерева каталогов, где у вас есть эти файлы. Затем запустите:

find . -name "file.txt" -type f -exec echo "##### {}:" \; -exec grep -i "pattern" {} \;

При этом печатается путь (относительно текущего каталога .и включая само имя файла) каждого именованного файла file.txt, за которым следуют все совпадающие строки в файле. Это работает, потому что{} это заполнитель для найденного файла. Путь к каждому файлу устанавливается отдельно от его содержимого с помощью префикса #####и печатается только один раз перед соответствующими строками из этого файла. (В вызываемых файлах file.txt, не содержащих совпадений, пути по-прежнему печатаются.) Вы можете обнаружить, что эти выходные данные менее загромождены, чем то, что вы получаете от методов, которые печатают путь в начале каждой совпадающей строки.

Использование findтакого почти всегда будет быстрее, чем запуск grepна каждом файле (grep -arin "pattern" * ), потому что findищет файлы с правильным именем и пропускает все остальные файлы.

_{Ubuntu использует GNU find , который всегда расширяется, {}даже когда он появляется в большей строке , например ##### {}:. Если вам нужна ваша команда для работы findв системах, которые могут не поддерживать это , или вы предпочитаете использовать это -execдействие только тогда, когда это абсолютно необходимо, вы можете использовать:}

find . -name "file.txt" -type f -printf '##### %p:\n' -exec grep -i "pattern" {} \;

Чтобы облегчить чтение выходных данных , вы можете использовать escape-последовательности ANSI для получения цветных имен файлов. Это делает заголовок пути каждого файла лучше, чем совпадающие строки, которые печатаются под ним:

find . -name file.txt -printf $'\e[32m%p:\e[0m\n' -exec grep -i "pattern" {} \;

Это приводит к тому, что ваша оболочка превращает управляющий код для зеленого в фактическую управляющую последовательность, которая создает зеленый цвет в терминале, и делает то же самое с управляющим кодом для обычного цвета. Эти экранированные значения передаются find, который использует их, когда печатает имя файла. ( $' 'цитата необходима здесь, потому чтоfind «S -printfдействие не признает \eдля интерпретации ANSI маскирование) .

Если вы предпочитаете, вы можете использовать вместо этого -execс системной printfкомандой (которая не поддерживает \e). Итак, еще один способ сделать то же самое:

find . -name file.txt -exec printf '\e[32m%s:\e[0m\n' {} \; -exec grep -i "pattern" {} \;

Просто чтобы указать, что если условия вопроса могут быть взяты литературными, вы можете использовать прямой grep:

grep 'pattern' abc/def/efg/*/file.txt

или

grep 'pattern' abc/def/efg/{1..300}/file.txt