Merhaba arkadaşlar, Yazılım dilimi geliştirmek için bir arama motoru yazıyorum (kendi çapımda) Örümcekler 1-2 aksaklık olsada bitti. Şimdi arama algoritması geliştiriyorum ama aklıma takılan bir sorun var.

Örnek ben 3 alanda arama yapıcam (title,desc,keyword) kişi "Webmaster" diye arattığında, bu 3 ün dede arama yapacak ve alakaya göre sıralayacak. (Buraya kadar yaptım) Takıldığım nokta ise, Örnek title ye 100 üzerinden 60 önem vericem. desc e 10 ve keyword ada 30. Yani verdiğim değere göre site sıralaması yapılacak.

Bu konu hakkında acaba bi fikri olan var mı ?

2. Olarak

Yaptığım örümcekler indexliyor ama bazı sitelerin title des ve keywordları karakter hatalı oluyor. Tamamen nasıl bu karakter hatalarını filtre edebilirim ?