Gemini Pro, GPT 3.5 Turbo'ya yenildi

Gemini'nin gerçek gücünü anlamak için Carnegie Mellon Üniversitesi ve BerriAI'den araştırmacılar, modelin dil anlama ve üretme yeteneklerine ilişkin derinlemesine bir araştırma gerçekleştirdi.
Gemini Pro, GPT 3.5 Turbo, GPT 4 Turbo ve Mixtral'in metin anlama ve oluşturma yeteneklerini on veri seti üzerinde test ettiler.

Aşağıdaki Tablo 1 karşılaştırmanın ana sonuçlarını sunmaktadır. Genel olarak, makalenin yayınlanma tarihi itibariyle Gemini Pro, tüm görevlerde doğruluk açısından OpenAI GPT 3.5 Turbo'ya yakındır, ancak yine de biraz daha düşüktür. Ayrıca Gemini ve GPT'nin açık kaynaklı rakip model Mixtral'den daha iyi performans gösterdiğini de buldular.



Bu Konuda düşünceleriniz nedir?

Sanırım gemini ve mixtral önümüzde ki süreçte çok rekabete giricek gibi duruyor

GPT'nin yeri ayrıdır...