awk и вырезать на очень большой файл


0

Я должен извлечь столбец данных из очень большого файла & gt; 100 ГБ.

Я знаю, как использовать awk а также cut Команды делают это, но хотели бы знать, является ли кто-то более эффективным (с точки зрения скорости) для такой задачи.


Grep должен быть самым быстрым способом поиска строки в файле: grep -o "\w*pattern\w*" /path/to/file, Возможно, вы захотите прочитать также о parallel для использования нескольких grep это на куски этого файла.
Alex

Если cut можно использовать, это должно быть быстрее, так как это намного проще и, следовательно, менее способно.
Michael Vehrs
Используя наш сайт, вы подтверждаете, что прочитали и поняли нашу Политику в отношении файлов cookie и Политику конфиденциальности.
Licensed under cc by-sa 3.0 with attribution required.