Сортировка и подсчет количества появлений строк

У меня есть Apacheлог-файл, access.logкак посчитать количество вхождений строк в этом файле? например , результатом cut -f 7 -d ' ' | cut -d '?' -f 1 | tr '[:upper:]' '[:lower:]'является

a.php
b.php
a.php
c.php
d.php
b.php
a.php

результат, который я хочу, это:

3 a.php
2 b.php
1 d.php # order doesn't matter
1 c.php 

| sort | uniq -c

Как указано в комментариях.

Конвейер вывода в sortупорядочивает вывод в алфавитном / числовом порядке.

Это требование, потому что uniqсовпадает только на повторных строках, т.е.

a
b
a

Если вы используете uniqэтот текстовый файл, он вернет следующее:

a
b
a

Это потому, что два as разделены b- они не являются последовательными строками. Однако, если вы сначала отсортируете данные в алфавитном порядке, сначала как

a
a
b

Затем uniqудалите повторяющиеся строки. -cВариант uniqподсчета числа копий и обеспечивает вывод в виде:

2 a
1 b

Рекомендации:

• sort(1)
• uniq(1)

[your command] | sort | uniq -c | sort -nr

Принятый ответ почти завершен, вам может понадобиться добавить лишний sort -nrв конце, чтобы отсортировать результаты по наиболее часто встречающимся строкам.

уникальные опции:

-c, --count
       prefix lines by the number of occurrences

варианты сортировки :

-n, --numeric-sort
       compare according to string numerical value
-r, --reverse
       reverse the result of comparisons

В конкретном случае, если строки, которые вы сортируете, являются числами, вам нужно использовать sort -grвместо sort -nr, см. Комментарий

Вы можете использовать ассоциативный массив в awk, а затем -optionally- sort :

cat access.log  | awk ' { tot[$0]++ } END { for (i in tot) print tot[i],i } ' | sort

выход:

1 c.php
1 d.php
2 b.php
3 a.php