Pythonda,Model Nasıl Eğitilir?

Question

Selamlar,

Bazı arkadaşlar tarafından yapıldığını gördüm şöyle bir sistem ki;
Yazılımcımız; "Naber","Nasılsın, gibi kullanıcının hal durumunu soracağı durumları yazılıma eğitiyor. Bunlara karşı "İyiyim,teşekkürler." gibi ifadelerle de cevap vermesini sağlıyor.
Yazılımcımız; Aynı şekilde "X konusu hakkında işlem yapın" durumlarıan da aynı şekilde eğitiyor.
Ve python modelinde sadece "Naber ve Nasılsın" için eğitilmişken sistem "Nasıl gidiyor?" sorusunu da "İyiyim,teşekkürler." olarak cevap verebiliyor ve ayrıca;
"Nasıl gidiyor,X için işlem yapın" dediğinde Hem "İyiyim,teşekkürler kontrol ediyorum.Sonuç X'dir." olarak işlemini yapıyor.
Ama arkada ne yapay zeka apisi var,ne de herhangibi LLM ile bağlantısı var sadece python ile yapılmış.

İnternette bunun hakkında bir sonuç pek bulamadım gibi.
Bu konu hakkında deneyimi veyahut nasıl olabileceğini karşı düşüncesi olan varsa paylaşabilir mi?
Teşekkürler.

ByTriSLaSiS · Answer

Python bilginiz varsa PyTorch veya TensorFlow öğrenerek başlamanız iyi olur. tavsiyem pytorch olacaktır.
Lokalde deneyecekseniz (bunu çok tavsiye etmiyorum) Google Colab ya da AWS üzerinde GPU sunucuları öneririm.
Ayrıca sıfırdan bir model geliştirmek, dataset vb. derken inanılmaz zahmetli bir süreç; fakat fine-tuning yapabilirsiniz. Şu an Gemma gibi modellerle bunu yapmanız mümkün.
Ben RTX 4090 ile StyleGAN kullanarak hazırladığım datasetlerde bulunan resimlere benzer görseller ürettim; ama açıkçası uğraştığıma değmedi.
Profesyonel düzeyde yapmayı düşünüyorsanız güzel bir süreci var.
Huggingface ile başlayabilrisiniz bir çok kaynak mevcut.
Live Translate uygulması yayınladım steam'de bu süreçte realtime TTS model ihtiyaçlarım ile başlamıştım araştırmaya hepsi ayrı birer dünya.
Son olarak facefusion 3 modellerini comfyui entegre ettim bu süreçte yine çok çaba sarf ettim fakat büyük bir hedefiniz ve yatırım gücünüz veya yatırımcınız yoksa zahmete girmeyin derim.
Arkadaşınız finetuning yapmış olabilir bu localde yapılabilen bir şey zaten;
kendi deneyimlerimi yazdım hatalarım olabilir arkadaşlar.

Edit : Storyllm.com'da kendi eğittiğim modellerde mevcut  proje içerisinde.

soylenmezsmt · Answer

ByTriSLaSiS adlı üyeden alıntı:						mesajı görüntüle									Python bilginiz varsa PyTorch veya TensorFlow öğrenerek başlamanız iyi olur. tavsiyem pytorch olacaktır.
Lokalde deneyecekseniz (bunu çok tavsiye etmiyorum) Google Colab ya da AWS üzerinde GPU sunucuları öneririm.
Ayrıca sıfırdan bir model geliştirmek, dataset vb. derken inanılmaz zahmetli bir süreç; fakat fine-tuning yapabilirsiniz. Şu an Gemma gibi modellerle bunu yapmanız mümkün.
Ben RTX 4090 ile StyleGAN kullanarak hazırladığım datasetlerde bulunan resimlere benzer görseller ürettim; ama açıkçası uğraştığıma değmedi.
Profesyonel düzeyde yapmayı düşünüyorsanız güzel bir süreci var.
Huggingface ile başlayabilrisiniz bir çok kaynak mevcut.
Live Translate uygulması yayınladım steam'de bu süreçte realtime TTS model ihtiyaçlarım ile başlamıştım araştırmaya hepsi ayrı birer dünya.
Son olarak facefusion 3 modellerini comfyui entegre ettim bu süreçte yine çok çaba sarf ettim fakat büyük bir hedefiniz ve yatırım gücünüz veya yatırımcınız yoksa zahmete girmeyin derim.
Arkadaşınız finetuning yapmış olabilir bu localde yapılabilen bir şey zaten;
kendi deneyimlerimi yazdım hatalarım olabilir arkadaşlar.

Edit : Storyllm.com'da kendi eğittiğim modellerde mevcut proje içerisinde. 		Teşekkür ederim,o zaman şu şekilde ilerlemek daha mantıklı gibi geliyor;
Ücretsiz veya ucuz yapay zeka apileriyle birlikte gelen taleplere göre anahtar kelimeler seçip anahtar kelimeler geçerse ona göre karar algoritması oluşturmak hem cpu ile yapılır hemde kısa süre içerisinde veritabanıyla beraber çözülmesi daha ucuz ve daha hızlı olur gibi.
Teşekkür ediyorum

ArasTasarim · Answer

büyük ihtimalle yapay zeka değil kural tabanlı bir sistemdir python ile keyword veya regex kontrolü yapıp naber nasılsın nasıl gidiyor gibi cümleleri aynı kategoriye koyup aynı cevabı döndürüyordur yani basit bir pattern matchingg chatbot mantığı gibi çalışıyordur

ByTriSLaSiS · Answer

soylenmezsmt adlı üyeden alıntı:						mesajı görüntüle									Teşekkür ederim,o zaman şu şekilde ilerlemek daha mantıklı gibi geliyor;
Ücretsiz veya ucuz yapay zeka apileriyle birlikte gelen taleplere göre anahtar kelimeler seçip anahtar kelimeler geçerse ona göre karar algoritması oluşturmak hem cpu ile yapılır hemde kısa süre içerisinde veritabanıyla beraber çözülmesi daha ucuz ve daha hızlı olur gibi.
Teşekkür ediyorum 		Aslında hocam openai üzerinden  api hizmeti satın alın 5 dolar kredi yükleyin isteklerde  gpt-4o-mini  modeli ile bir çok şeyi yapabiliyorsunuz
Ayrıca gpt-4o-mini  vision desteği var yani resim üzerindeki yazıları okuyor batch işlemler yapıyor pdf okuyor ayrıca inanın bence aşırı ucuz.
5 dolar kredi yükleyin bitmiyor zaten.

cemalgnlts · Answer

Selam,

AI olmadan yapmak isterseniz kütüphanelere bakın (AI'ye sorarsanız önerir) genelde bu iş için regex harici işi kolaylaştıran kütüphaneler bulunuyor.

Maliyeti düşük bir AI API ile yapmak isterseniz her zaman mesaj atabilirsiniz.