Toplamda 2,308,070 satır, toplam 5 tablo, her tabloda 130 ile 160 arasında sütun ve her sütunda ortalama 400,000 satır, google cloud sql kullanıyorum fakat son zamanlarda ciddi yavaşlamalar oluyor bu 5 tablo aynı anda güncelleniyor ve 10 dk aralıkla, jqgrid ile kullanıcılara bu tablodaki verileri sunuyoruz analiz yapmaları için sorgu sayısıda yüksek oluyor haliyle, bu tür bir veri tabanı için nasıl önerilerde bulunabilirsiniz ? Açıkçası google maliyeti yüksek fakat verimlilik çok güzel son zamanlarda kurların yükselmesiyle ciddi oranda maliyet artışı yaşadık bu konuda siz olsanız nasıl bir yol izlerdiniz?
Merhaba,
Verileri Hadoop HDFS üzerinde saklayabilirsiniz. Ayrıca MapReduce ile verilerinizi analiz edebilirsiniz. Çok güçlü sunucular almanıza da gerek yok. Bir kaç makine ile de bu işlemleri yapabiliriz.
"Low-latency data access" diye bi kavram var. Bu sayede verilere hızlı erişebilirsiniz. Digitalocean üzerinde denemeler yapmıştım. Güzel sonuçlar aldım. Tabi bu işlemleri nosql veritabanları(Mongo , ElasticSearch) ile daha da güzel bir kurgu yaparak geliştirebilirsiniz.
Hadoop'a alternatif olarak Apache Spark önerebilirim.
İyi çalışmalar.