Boğaziçi Üniversitesi TABİLAB
Boğaziçi Üniversitesi Bilgisayar Mühendisliği Bölümü'nde doğal dil işleme alanında çalışan laboratuvar. Türkçe için hem anlama hem metin üretme görevlerinde kullanılabilen açık kaynak TURNA dil modelini geliştirdi.
Laboratuvarın geliştirdiği TURNA, UL2 çerçevesine dayanan ve T5 tipi kodlayıcı-kod çözücü mimariye sahip, yaklaşık 1,1 milyar parametreli bir Türkçe dil modeli. Model, OSCAR, OPUS ve Vikipedi gibi kaynaklardan bu iş için derlenen bir veri kümesiyle eğitildi.
2024 başında yayımlanan makalede TURNA üç metin üretme ve beş anlama görevinde değerlendirildi; sonuçlara göre üretme görevlerinde çok dilli modelleri geride bıraktı, anlama görevlerinde Türkçeye özgü modellerle yarıştı. Model Hugging Face üzerinden açık olarak erişilebiliyor.
Öne çıkan çalışmalar
TURNA
Özetleme, başlık üretme ve sınıflandırma gibi Türkçe görevler için ince ayar yapılabilen açık kaynak kodlayıcı-kod çözücü model.
Kaynaklar
Bilgiler kaynaklardan ve kurumun kendi sitesinden derlendi. Hatalı ya da güncelliğini yitirmiş bir bilgi görürseniz bize bildirin.