text dosyası duplicate temizleme?

1 txt dosyam var
içinde 250 den fazla web adresi var
ama aynı adresler de var. bunları nasıl temizlerim?

tek tek kontrol ederek yapamıyorum. gözlerim ağrıdı

çok güzel bir araç buldum bu konuda
işinize yararsa kullanın

http://mytexttools.com/Remove-Duplicate-Lines.html