Fransa merkezli startup Mistral AI, giderek büyüyen yapay zeka pazarına yeni bir tescilli büyük dil modeli (LLM) ekledi ve yeni Mistral Large’ın birkaç büyük rakibini geride bırakabileceğini iddia etti. Paris merkezli firma 26 Şubat’ta yayınladığı bir yazıda Mistral Large’ın çoklu görev dil anlama testinde GPT-4 hariç diğer önemli LLM’lerden daha iyi performans gösterdiğini ve çeşitli matematik ve kodlama testlerinde güçlü bir performans sergilediğini belirtti.
Mistral Large’ın Performansı
Mistral Large‘ın performansı, geçtiğimiz Kasım ayında piyasaya sürülen xAI’nin Grok ve Şubat ayı başında piyasaya sürülen Google’ın Ultra’sı ile karşılaştırılmadı. Firmanın kurucusu ve baş bilim adamı Guillaume Lample, Mistral Large’ın Mistral AI’nin önceki modellerinden çok daha üstün olduğunu iddia ediyor. Mistral AI ayrıca ChatGPT’nin GPT-3.5 ve GPT-4 üzerine inşa edilmesine benzer şekilde modellerinin üzerinde bir AI sohbet arayüzü olan Le Chat’i de tanıttı.
Aralık ayında Nvidia, Salesforce ve Andreessen Horowitz gibi firmalardan 487 milyon dolar fon alan Mistral Large’ın 20.000’den fazla İngilizce kelime bildiği ve ayrıca Fransızca, İspanyolca, Almanca ve İtalyanca dillerini de akıcı bir şekilde konuştuğu belirtiliyor.
Mistral AI’ya Yönelik Dikkat Çeken Detaylar
Mistral AI’nın ilk modeli açık kaynak lisansı altında yayınlanmış olsa da Mistral Large, OpenAI tarafından yayınlanan en son LLM’lere benzer şekilde kapalı ve tescilli bir modeldir ve X’teki bazı gözlemcilerin hayal kırıklığına uğramasına neden oldu. Chatbot Arena gibi üçüncü taraf yapay zeka sohbet robotu sıralama platformları Mistral Large’ı değerlendirmemiş olsa da önceki modeli Mistral Medium, 60’tan fazla LLM’den oluşan bir listede altıncı sırada yer alıyor.
Chatbot Arena’nın binlerce ikili derecelendirmesi bir Elo derecelendirmesi üretmek için rastgele örnekleme kullanan ve hangi modelin başka bir modele karşı doğrudan rekabette kazanma olasılığının en yüksek olduğunu tahmin eden bir Bradley-Terry modeli aracılığıyla kırılabilir.
Firma ayrıca kısa bir süre önce Microsoft ile Mistral Large’ı Azure AI Studio ve Azure Machine Learning’de erişilebilir hale getirecek ortaklığını duyurarak dikkatleri üzerine çekmişti.
