Txt Dosyada 1 Milyondan fazla satır olduğundan dolayı tümünü excel ile yenilenenleri kaldır yapamıyorum.
Ancak python ile duplicate leri kaldırmama rağmen excel duplicate değerleri buluyor.
Verinin bir kısmını excele ekledim. Tümünü excel kabul etse zaten excel ile yapacağım
kullandığım kod;

file = open('TümTxtIcerigi.txt', "r", encoding="utf-8")
file2 = file.readlines()
file.close()
mylist = list(dict.fromkeys(file2))
res = [*set(mylist)]
len(res)