awk и вырезать на очень большой файл


0

Я должен извлечь столбец данных из очень большого файла & gt; 100 ГБ.

Я знаю, как использовать awk а также cut Команды делают это, но хотели бы знать, является ли кто-то более эффективным (с точки зрения скорости) для такой задачи.


Grep должен быть самым быстрым способом поиска строки в файле: grep -o "\w*pattern\w*" /path/to/file, Возможно, вы захотите прочитать также о parallel для использования нескольких grep это на куски этого файла.
— Alex

Если cut можно использовать, это должно быть быстрее, так как это намного проще и, следовательно, менее способно.
— Michael Vehrs
Используя наш сайт, вы подтверждаете, что прочитали и поняли нашу Политику в отношении файлов cookie и Политику конфиденциальности.
Licensed under cc by-sa 3.0 with attribution required.