Birkaç ay önce Çinli laboratuvarlar, öncü YZ modellerinin performansının yaklaşık %80-90’ını maliyetin çok küçük bir kısmına sunan yeni bir YZ modeli dalgası yayımladı. OpenAI, benzer fiyatlandırma sunarken Çinli rakiplerini geride bırakan GPT-6 Sol ve GPT-6 Luna modelleriyle buna karşılık verdi. Geçtiğimiz ay Anthropic, geleneksel öncü modellerin maliyetinin çok altında bir fiyatla yüksek hacimli YZ iş yüklerini hedefleyen Haiku 5.5 modelini tanıttı.
Maliyet açısından verimli olan bu modeller, Çin menşeli YZ modellerinin ABD’de artan popülaritesini dizginlemeye yardımcı oldu. Şimdi ise Meta, OpenAI’ın GPT-6 Luna ve Anthropic’in Claude Haiku 5.5 modellerine meydan okuyan, şimdiye kadarki en küçük ve en verimli YZ modeli Muse Ember’ı duyurdu. Meta, yeni modelinin GPT-6 Luna’yı çeşitli kıyaslama testlerinde geride bırakırken Claude Haiku 5.5 ile benzer zeka düzeyini yaklaşık üçte bir maliyetle sunabildiğini öne sürüyor.
Meta’nın paylaştığı Artificial Analysis Intelligence Index v5 sonuçlarına göre Ember, 36 puan alarak Claude Haiku 5.5 ile aynı puanı paylaşıyor ve GPT-6 Luna’nın 28 puanlık skorunu rahatça geride bırakıyor. Her üç model de en yüksek akıl yürütme eforunda çalıştırıldığında Claude Haiku 5.5 için 0,41 dolar ve GPT-6 Luna için 0,15 dolar olan görev başına maliyet, Muse Ember tarafında yaklaşık 0,14 dolar seviyesinde kalıyor. Bir başka deyişle Ember, Haiku seviyesindeki zekayı çalıştırma maliyetinin neredeyse üçte birine sağlıyor.
Meta ayrıca ajan tabanlı iş akışları, kodlama ve çok modlu görevlerdeki kıyaslama karşılaştırmalarını yayımladı:
| Benchmark | Muse Ember | Haiku 5.5 | GPT-6 Luna |
|---|---|---|---|
| AutomationBench-AA | 37.8% | 13.9% | 20.2% |
| Terminal-Bench 4.0 | 40.9% | 39.2% | 16.4% |
| Coding Agent Index-AA | 46 | 37 | 31 |
| FrontierCode 2.0-AA | 27.2% | 34.9% | 25.2% |
| OSWorld 2.1 (partial credit) | 69.5% | 68.9% | 50.5% |
Yukarıdaki kıyaslamalarda görüldüğü üzere Claude Haiku 5.5, gerçek dünya yazılım mühendisliği görevlerini değerlendiren FrontierCode 2.0 testinde Ember’ın önünde kalmayı sürdürüyor. Muse Ember, metin, görsel, ses ve video girdilerini destekliyor. Model, 1 milyon tokenlik bağlam penceresiyle geliyor ve 512.000’e kadar çıktı tokeni üretmeyi destekliyor.
Muse Ember, bir milyon girdi tokeni başına 0,10 dolar, bir milyon önbelleğe alınmış girdi tokeni başına 0,004 dolar ve bir milyon çıktı tokeni başına 0,50 dolar olarak fiyatlandırılıyor. Bu tarifeler 200.000 tokene kadar olan istemler için geçerlilik taşıyor. Daha uzun istemlerde ise fiyatlandırma bir milyon girdi tokeni başına 0,30 dolara, bir milyon çıktı tokeni başına da 1,50 dolara yükseliyor.
Muse Ember şu anda Meta Model API ve Muse Code üzerinden “muse-ember-1.0” model kimliğiyle kullanıma açık durumda. Modelin OpenAI’ın Responses API standardını desteklemesi, geliştiricilerin sistemi mevcut ajan iş akışlarına entegre etmesine olanak tanıyor.
Kaynak: https://www.neowin.net/news/metas-new-muse-ember-takes-on-gpt-6-luna-and-claude-haiku-55-at-a-fraction-of-the-cost/
