Вывод заданного количества совпадений

[Ввысь]

Здравствуйте.

Есть два файла. Нахожу во втором совпадающие строки из первого.

Код: (txt) [Выделить]

grep -f file1 file2 > file3во втором файле совпадений может быть одно, а может быть и сто.
Как ограничить запись в file3 количества совпадений, например, 5 строками?

Т.е. совпадение есть, совпало 50 строк, но нужно записать только 5.
Может искать каким-то другим способом нужно?

Спасибо.

[qpdb]

Приветствую!

Если упростить задачу до, положим, поиска и удаления дубликатов, то можно, например, сначала сложить оба файла в один, а потом применить команду:

Код: [Выделить]

awk -i inplace '!($0 in a) {a[$0];print}' A+B=C.txt
в итоговом файле останутся только уникальные строки, т.е. дубликаты будут удалены. При этом порядок строк не изменится. Если файл очень большой, то работать будет не мгновенно!

Как оставлять именно, скажем, по 5 похожих строк это нужно подумать 

Естественно можно удалять дубликаты из каждого файла по отдельности, если это поможет, в общем пробуйте…

2021 Oct 07; 07:17 AM

[БТР]

Как ограничить запись в file3 количества совпадений, например, 5 строками?

попробуйте так:

Код: [Выделить]

grep -f file1 file2 | head -n5 > file3

[Ввысь]

БТР, так просто обрезает количество строк в выдаче.
Становится без разницы количество совпадений, выдает 5 строк и всё.

[ALiEN]

Как ограничить запись в file3 количества совпадений, например, 5 строками?

выдает 5 строк и всё.

[qpdb]

Ввысь, хотелось бы задачу которую Вы перед собой поставили понять более чётко 

Было бы лучше иметь файлы для примера, если они не секретно-конфиденциальные, а если нельзя «родные» файлы показать, то составьте два файла для примера…

2021-10-07 14:07:38

[Ввысь]

ALiEN175,

Ищем совпадения, всех совпадений по 16 штук, выхлоп сократил и посчитал чтоб простыни не было.

Код: (txt) [Выделить]

grep -f file1 file2 | /usr/bin/sort | /usr/bin/uniq -c

(Нажмите, чтобы показать/скрыть)

     16 91
     16 89
     16 78
     16 67
     16 44
     16 23

Пытаемся сделать head -n5

Код: (txt) [Выделить]

grep -f file1 file2 | head -n5| /usr/bin/sort | /usr/bin/uniq -c

(Нажмите, чтобы показать/скрыть)

      1 91
      1 89
      1 67
      1 44
      1 23

и тут мы теряем 78 и 91.


Я хочу получить не 16 строк при совпадении, а только 5.
Т.е.
если число 91 встретилось в file2 16 раз, то мне нужны 5 строк об этом,
если число 89 встретилось в file2 16 раз, то мне нужны 5 строк об этом,
если число 67 встретилось в file2 16 раз, то мне нужны 5 строк об этом и т.д.

Если я использую head -n5, то я получаю всего 5 строк.

     


Пользователь добавил сообщение 07 Октября 2021, 21:45:59:qpdb, да, я тоже так подумал, в голове все складно, а толково объяснить не  получается)

[ALiEN]

если число 91 встретилось в file2 16 раз, то мне нужны 5 строк об этом,

Почему одной не хватит?
А если 17 раз? Сколько строк нужно? А если 177 раз?
Пользователь добавил сообщение 07 Октября 2021, 22:07:10:PS - спойлеры содержимого file1 и file2 уберите - они у вас продублированы во вложении.

[Ввысь]

ALiEN175, пишутся строки в разные дни, в строках есть информация о дате, хотелось бы 5, просто мне для наглядности.
Если 17 раз, то нужно 5 записать, и если 177 то тоже 5 записываем.

Сейчас поправлю.

[valrust]

А если так попробовать

Код: [Выделить]

xargs -n 1 -a file1.txt -I {} grep -m 5 {} file2.txt > file3.txt

[ALiEN]

Как вариант:

Код: [Выделить]

grep -f file1.txt file2.txt | sort | uniq -c

     16 23
     16 44
     16 67
     16 78
     16 89
     16 91
Первый столбик - количество вхождений.
Второй столбик - содержимое строки.

[Ввысь]

ALiEN175, если этот вариант использовать, то придется что-то дальше придумывать.
valrust, да, это оно) Спасибо огромное.

Спасибо всем кто откликнулся.