Yapay Zeka

    Çinli Fable 5: Kimi K3 Ağırlıkları Yayınlandı

    Moonshot AI, yeni yapay zeka modeli Kimi K3'ün ağırlıklarını ücretsiz olarak yayınladı. Düşük maliyetli ve yüksek verimli model sektörü hareketlendirdi.
    Moonshot AI, Kimi K3, yapay zeka, açık ağırlıklı model, donanım

    Çin merkezli Moonshot AI, merakla beklenen yeni modeli Kimi K3’ün ağırlıklarını ücretsiz olarak paylaştı. Bu hamle, güncel yapay zeka GPU donanımlarına sahip olan herkesin modeli kendi sistemlerinde çalıştırabilmesine olanak tanıyor.

    Şirketin bu kararı, OpenAI ve Anthropic gibi sektörün önde gelen oyuncularına karşı atılmış önemli bir adım olarak değerlendiriliyor. Kimi K3, Moonshot AI tarafından paylaşılan test sonuçlarına göre önceki nesil modelleri geride bırakırken, güncel rakipleriyle de rekabet edebilecek bir performans sergiliyor.

    Yüksek verimlilik ve düşük maliyetli çalışma

    Kimi K3, özellikle operasyonel maliyetler konusunda rakiplerine kıyasla ciddi avantajlar sunuyor. Modelin giriş maliyeti milyon token başına 3 dolar olarak belirlenirken, bu rakam önbellekleme yapısı sayesinde belirli kullanım senaryolarında 0,30 dolara kadar düşebiliyor.

    featured image

    Modelin bu denli verimli çalışmasının temelinde, düşük hassasiyetli MXFP4 ve MXFP8 veri tiplerinin kullanımı yatıyor. Toplam 2,8 trilyon parametreye sahip olan modelde, her işlem sırasında sadece 104,2 milyar parametre aktif hale getiriliyor.

    Moonshot AI, test süreçlerinde Nvidia H20 gibi günümüz standartlarına göre daha düşük seviyeli bir donanım kullandığını belirtiyor. Bu durum, modelin daha geniş bir donanım yelpazesinde verimli bir şekilde çalışabileceğine işaret ediyor.

    Geleneksel anahtar-değer depolama yerine Kimi Delta Attention adı verilen sabit boyutlu bir durum yöneticisi tercih ediliyor. Bu mimari, hem VRAM kullanımını azaltıyor hem de işlem süresini kısaltarak genel verimliliğe katkı sağlıyor.

    Sektördeki rekabet dengeleri değişiyor

    Kimi K3’ün açık ağırlıklı bir model olarak sunulması, geliştiricilerin ve şirketlerin kendi altyapılarını kurarak büyük oyunculara doğrudan rakip olabilmesinin önünü açıyor. Bu gelişme, özellikle maliyet odaklı projeler için önemli bir alternatif oluşturuyor.

    Açık ağırlıklı modelin sunulması, eğitim sürecinin ve veri setinin hala Moonshot AI’ın özel mülkiyetinde olduğu gerçeğini değiştirmiyor. Yine de bu adım, ücretsiz yazılımın ticari rakipleriyle benzer performans gösterirken çok daha düşük maliyetlerle çalışabileceğini kanıtlıyor.

    Modelin Blackwell gibi MXFP destekli modern donanımlarda çalıştırıldığında daha da yüksek performans göstermesi bekleniyor. İlerleyen dönemde yapılacak resmi testler, bu optimizasyonların donanım tarafındaki gerçek etkisini ortaya koyacak.

    Sizce Moonshot AI’ın bu hamlesi, OpenAI ve Anthropic gibi devlerin pazar payını nasıl etkileyecek?

    Henüz yorum yok İlk Yorumu Yaz
    ×

    Yorumunuz gönderildi,
    onaylandıktan sonra yayımlanacak.

    Yorum Yaz