Почистить файл от дублей строк и сохранить их в отдельный файл

[zorgingyaringen]

Добрый день ! подскажите пожалуйста новичку, как удалить дубли строк из файла и сохранить их в отдельный файл.
Ранее дубли удалял вот таким способом cat 1.txt |sort -u >res.txt.
Сейчас потребовалось сохранить дубли в отдельный файл, поискал по форуму что то ничего подходящего не нашел.

[ArcFi]

Код: [Выделить]

sort -u file.in >file.out.uniq
sort file.in | uniq -d >file.out.dup

[zorgingyaringen]

Ребят подскажите еще момент. Стоит такая задача.
Есть база данных в txt формате. Надо сделать из нее выборку по каждому запросу в отдельный файл.

т.е есть База данных base.txt и список запросов name.txt
name.txt содержит список сотрудников.
Вася
Илья
Ильдар
Володя 

Нужно пройтись по списку и сделать выборку из базы по каждому имени и сохранить каждую выборку в отдельный файл > Вася.txt  Илья.txt Ильдар.txt Володя.txt

Подскажите пожалуйста как это можно реализовать.

[Azure]

Код: (bash) [Выделить]

while IFS= read -r name
do
  grep "$name" base.txt > "${name}.txt"
done < name.txt

[zorgingyaringen]

Код: (bash) [Выделить]

while IFS= read -r name
do
  grep "$name" base.txt > "${name}.txt"
done < name.txt

Azure, благодарю за помощь.
Но что то у меня не получается разобраться.
Скрипт выполняю в системе на сервере Centos 6.5
при выполнении никаких ошибок не пишет, после выполнения в каталоге создаются пустые файлы в конце имени у которых знак вопроса.





Если смотреть через ftp просмотщик в винде то почему то не показывает вообще расширения txt у этих файлов



Тестовый файл base.txt содержит в себе строки



и файл name.txt содержит в себе имена



Подскажите пожалуйста что делаю не так.

Правила форума

1.5. Для добавления графических изображений в сообщения требуется использовать внешние сервисы. Подробную инструкцию, а так же список рекомендованных и запрещенных сервисов можно посмотреть в «Руководстве по добавлению изображений на форум».

--chemtech

[Azure]

zorgingyaringen,
Если файлы создавались в Винде стоит модифицировать скрипт

Код: (bash) [Выделить]

while read name
do
  grep "$name" base.txt > "${name}.txt"
done < name.txt

[zorgingyaringen]

zorgingyaringen,
Если файлы создавались в Винде стоит модифицировать скрипт

Код: (bash) [Выделить]

while read name
do
  grep "$name" base.txt > "${name}.txt"
done < name.txt

Azure, спасибо большое, разобрался.
Только теперь вылез еще один момент. Скрипт реагирует на регистр искомых значений.
Можно ли сделать так что бы он делал выборку не обращая на регистр искомого значения ?

[Azure]

Поиск без учёта регистра : опция -i команды grep. Кроме того, советую названия файлов писать как-нибудь однообразно, например все с большой буквы:

Код: [Выделить]

grep --ignore-case "$name" base.txt > "${name^}.txt"