Verisi hiçbir şekilde kopyalanması veya çekilmesi mümkün olmayan web sitesi

12
●
430

Question

Herkese merhabalar. Aklımda bir soru işareti belirdi sizlere de sormak istedim.

Malumunuz günümüzde doğru ve kaliteli verinin önemi git gide artıyor. Özellikle yapay zeka ile yazdırılan makaleler vs sonrasında daha da bu durum belirginleşmeye başladı.

Sorum şudur ki: Verisi hiçbir şekilde bot ile vs. kopyalanamayan (selenium vs. ile bile kopyalanması mümkün olmayan)  bir web sitesi yapılabilir mi, bunun yapılabilirliği ne derecedir.

Şundan ötürü soruyorum. Bir web sitesi inceledim. Bir kısım butonlara veya seçeneklere atadığı İD'ler sürekli değişkenlik gösteriyor. Her yenilemede farklı bir ID geliyor.

anka · Answer

Sen ne yaparsan yap en sonunda OCR ile taratıp yine çekilir. Sadece karşı atarafın maaliyetini bir ölçü arttırırsın ki senin içeriklerden kazanacağı tutar daha yüksek ise o zaman kimse tutamaz onu.

lwur · Answer

%100 kopyalanamaz bir web sitesi yapmak teknik olarak mümkün değil. Ama veriyi kopyalamayı zorlaştırmak veya ekstra emek gerektirir hale getirmek mümkün.

FurkanAkman · Answer

Veri her türlü çekilir hocam. Sadece işleri zorlaştırabilirsiniz. Tecrübeli birisi veriyi her türlü alabilir.

JaimeLannister · Answer

idlerin sürekli değişmesinin pek önemi yok gibi xpath veya css selectorlarla aşılabilir ayrıca dediğin şeyi yapmak teknik olarak mümkün değil her site kopyalanabilir sadece bu işi zorlaştırabilirsin

GOLDTR · Answer

Bir şeyi gözünüzle görebiliyorsanız kopyalanmasına engel olamazsınız

Hunper · Answer

Günümüzde pek mümkün durmuyor hocam, css selector'e gerek yok bile. AI ile çalışan scrape araçları mevcut artık. Standart bir veri çekmeden ziyade tarayıcının okuyabildiği tüm kodu alıp (SSR SSG CSR fark etmeden gerekirse tüm renderi bekliyor) kazıp ayrıştırma yapabilen araçlar mevcut. Kafaya koyan biri tüm sayfanın ekran görüntüsünü alıp optimize edilmiş bir image to text servisi kullanarak verileri yine alabilir koda bakmasına gerek kalmadan.
Asıl soru şu aslında, bir sitenin verileri kolay yoldan css selector veya en basit haliyle request ile çekilebilir mi, apileri reverse engineer için güvenli mi kolayca veriler alınabilir mi yoksa nispeten daha zor olan yöntemlerle mi yapılabilir?

TheHoligan · Answer

6 saatte bir class ve id'leri değişen bir site var geçen sene yazdığım kod ile bugün bile çekebiliyorum

madonetr · Answer

sahibinden.com

Seyit25 · Answer

Google beni indexlesin ama başkaları bir şey alamasın diye bir şey mümkün değil.

lwur · Answer

madonetr adlı üyeden alıntı:						mesajı görüntüle									sahibinden.com 		Telegram bot siparişi aldık sahibindendeki ilanları otomatik paylaşması için. Yani kısacası çektiriliyor.

fatiheryildiz · Answer

Herkese teşekkürler. Demekki çekilmesinin mümkün olmamasını araştırmaktan ziyade karşıyı zorlayıcı tedbirler almak çok daha mantıklı gibi görünüyor. Peki karşıyı zorlamak için neler yapılabilir.

YasinReal · Answer

Eğerki önlem alacak olsaydım:
İçeriklerinize googleden giriyorlar ise referer: değeri google olarak görünür.
Ufak bi php kodu ile referer değerinde google içermeyenlere random 1 veya 2 değerini atardım. eğer değer 1 ise içerikteki tüm a ve e harflerini o ya, eğer değer 2 ise a ve e harflerini i harfi ile değiştirip içeriği öyle göstertirdim.
İçerik çekme botunu yapan arkadaş sorunu bulup fixleyene kadar   Google botlarını es geçtirmeyide unutmazdım...