Поиск похожих строк.

[J.Korvin]

Здравствуйте, подскажите пожалуйста как можно организовать поиск по файлу и удалить строки которые повторяющийся но не целиком а только выше стоящий домен. Например файл состоит из таки строк

Код: Выделить всё

18plus-portaal.2link.be
2link.be
google.com
mail.google.com

Нужно на выходе получить

Код: Выделить всё

2link.be
google.com

Спасибо

[Хостинг HostFood.ru]

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

[liet]

а если поиграться с чем-то типа php-шного split($str,-10) ?
выделять с конца точку и на основании этой точки отрезать домен. потом после этого смотреть какого он может быть уровня. геморно по идее выйдет. но таки вариант.

[kpp]

Код: Выделить всё

sed 's/\(.*[^\.]*\.\)\([^\.]*\..*\)$/\2/'  "ИМЯ_ФАЙЛА" | sort -u

[J.Korvin]

Код: Выделить всё

sed 's/\(.*[^\.]*\.\)\([^\.]*\..*\)$/\2/'  "ИМЯ_ФАЙЛА" | sort -u

Да вроде получилось. Потестирую не обрезает ли лишнего. Спасибо