Microsoft, Önde Gelen LLM’lere Rakip Yeni AI Dil Modeli Eğitiyor

Microsoft, Google ve OpenAI tarafından geliştirilen AI LLM’lerle rekabet etme potansiyeline sahip, MAI-1 kod adlı yeni bir büyük dil modeli (LLM) geliştiriyor. Microsoft, OpenAI’ye milyarlarca dolar yatırım yaparak, OpenAI’nin teknolojisini kendi verimlilik yazılımı paketine entegre etme haklarını elde ettiğinden beri bu kadar büyük bir LLM geliştirmemişti.

The Information tarafından yayınlanan habere göre, MAI-1’in geliştirilmesi, Google DeepMind ve Inflection’ın kurucu ortağı Mustafa Süleyman tarafından denetleniyor, Microsoft, Mart 2024’te Inflection’ın bazı çalışanlarını 650 milyon dolarlık bir anlaşmayla devralmıştı.

6 Mayıs’ta yayınlanan habere göre, MAI-1 yaklaşık 500 milyar parametreye sahip olacak. Yani, GPT-4‘ün sahip olduğu bir trilyon parametre ile Meta’nın Llama 3 AI modeli‘nin 70 milyar parametresi arasında bir yerde olacak. Ayrıca, Microsoft’un önceki küçük açık kaynaklı AI’larından (Phi-3 ve WizardLM-2) “çok daha büyük” ve daha pahalı olması bekleniyor, çünkü daha fazla hesaplama gücü ve eğitim verisi gerektirecek.

MAI-1, Inflection’ın tekniklerini ve eğitim verilerini kullanacak olsa da OpenAI veya Inflection tarafından üretilen herhangi bir model veya teknolojiden farklıdır. Projeyle ilgili bilgi sahibi olan Microsoft çalışanlarına göre, MAI-1, Microsoft tarafından dahili olarak geliştirilen tamamen yeni bir LLM.

Microsoft, MAI-1’in kesin amacını henüz açıklamadı ve başarısı da performansına bağlı olacak. Bu arada, şirket Nvidia GPU’lara sahip büyük bir sunucu kümesi ayırdı ve modeli geliştirmek için çeşitli kaynaklardan büyük miktarda veri kullanıyor.

İlerlemeye bağlı olarak, şirketin Build geliştirici konferansında MAI-1’i tanıtabileceği belirtilse de bu haber henüz teyit edilmedi.