OpenFlamingo, büyük multimodal modelleri değerlendirmek ve eğitmek için açık kaynaklı bir çerçeve, DeepMind'in Flamingo modelinin açık kaynaklı bir versiyonu ve yapay zeka dünyasında büyük modellerle ilgili büyük bir adım. Resmi bilgilere göre Flamingo'nun ilk versiyonunun katkıları şu şekilde:
1 Flamingo tarzı LMM'leri eğitmek için bir Python çerçevesi Flamingo tarzı LMM'leri eğitmek için bir Python çerçevesi
2 Araya eklenmiş görüntü ve metin dizilerine sahip büyük ölçekli çok modlu bir veri kümesi Araya eklenmiş görüntü ve metin dizilerine sahip büyük ölçekli çok modlu bir veri kümesi
3 Görsel dil görevleri için bağlam içi öğrenme değerlendirme ölçütü Görsel dil görevleri için bağlam öğrenme değerlendirme ölçütü
4 LLaMA tabanlı OpenFlamingo-9B modelimizin ilk versiyonu, çok daha iyi modeller gelecek!LLaMA tabanlı OpenFlamingo-9B modelimizin ilk versiyonu, çok daha iyi modeller gelecek! ( Blog | GitHub )