парсер для нуба

[грусть]

помогите реализовать простую нубскую весч, вобщем есть файл приерно такого вида:

Код: Выделить всё

пароль: gksi3f9g   логин: вася
пароль: gksi3f9g   логин: вася
пароль: fk4jhj6h   логин: женя
пароль: sdf8u3f   логин: катя
пароль: gk777g   логин: вася
пароль: gk777g   логин: вася
пароль: gk777g   логин: вася
пароль: gk777g   логин: вася
пароль: 666   логин: admin
пароль: gk777g   логин: вася
пароль: 666   логин: admin

Как можно пропарсить файл чтобы он из него взял только неповторяющиеся пароли ?

тоесть примерно в идеале в конечном итоге вот так было:

Код: Выделить всё

пароль: gksi3f9g   логин: вася
пароль: fk4jhj6h   логин: женя
пароль: sdf8u3f   логин: катя
пароль: gk777g   логин: вася
пароль: 666   логин: admin
пароль: gk777g   логин: вася

[Хостинг HostFood.ru]

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

[Electronik]

Код: Выделить всё

man sort

[грусть]

Код: Выделить всё

man sort

если ты про параметр -u то мне кажется он не подойдёт так как строки отличаются всё равно в начале там стоят даты и они везде разные....

[грусть]

хотя там вроде отступ можно делать....сейчас попробую......

[Bayerische]

Подключите awk

[Гость]

хм вроде получилось тока не уверен точно...
параметр у sort -u -k1.50 будет с 1 строки с 50 символа для первой только строки или для всех последующих тоже ?? тоесть мне надо что бы со всех строк с 50 символа начинал сортировать....но судя повсему он так и делает.....