NVIDIA, fiziksel yapay zeka (YZ) sistemlerinin geliştirilmesini hızlandırmayı amaçlayan geniş bir teknoloji seti tanıtarak insansı robotlar, otonom araçlar, yarı iletken üretimi ve endüstriyel otomasyon alanlarındaki hamlesini genişletti.
GTC Taipei’de duyurulan en son yenilikler arasında, fiziksel YZ için açık bir temel model olan Cosmos 3, şirketin Isaac GR00T platformu üzerinde inşa edilen yeni bir referans insansı robot, robotik ve endüstriyel YZ için açık kaynaklı ajan araçları ve TSMC ile ortaklaşa geliştirilen YZ destekli yeni yarı iletken üretimi girişimleri yer alıyor.
Bu duyurular, NVIDIA’nın sentetik veri üretiminden simülasyona ve gerçek dünyadaki uygulamalara kadar her aşamayı kapsayan, fiziksel YZ’ye yönelik uçtan uca bir ekosistem kurma stratejisini ortaya koyuyor.
NVIDIA kurucusu ve CEO’su Jensen Huang, “Çok modlu akıl yürütme dili, vizyon ve dünya modellerindeki atılımlar sayesinde fiziksel YZ’nin büyük patlaması çok yakın.” açıklamasını yaptı.
Huang sözlerine şöyle devam etti: “Açık ve öncü omnimodellerden oluşan Cosmos 3 ailesi; fiziksel dünyayı algılayan, akıl yürüten, planlayan ve buna göre hareket eden robotlar, otonom araçlar ve vizyon YZ’si geliştirmek isteyen geliştiricilere nesiller arası bir sıçrama sunuyor.”
Fiziksel Zekayı İnşa Etmek
Duyurunun merkezinde, NVIDIA’nın tek bir sistem içinde metin, görüntü, video, ortam sesi ve eylemleri anlayıp üretebilen, dünyanın ilk tamamen açık omnimodeli olarak tanımladığı Cosmos 3 yer alıyor.
Akıl yürütme ile içerik üretimini birleştiren bir “mixture-of-transformers” mimarisi üzerine kurulan model hakkında NVIDIA; Cosmos 3’ün bir vizyon-dil modeli, fiziksel ortamları simüle eden bir dünya modeli veya robot eylem modellerinin temeli olarak hizmet verebileceğini belirtiyor.
Şirket, modelin dünya üretimi, robotik eylem politikaları ve vizyon anlama konularında birçok açık model kıyaslama testinde zirvede yer aldığını söylüyor. Model; yüksek doğruluklu robotik ve otonom araç uygulamaları için Cosmos 3 Super ve daha hızlı çıkarım için Cosmos 3 Nano dahil olmak üzere birden fazla versiyonla sunuluyor.
NVIDIA ayrıca YZ ajanlarının robotik, görsel YZ, otonom sürüş, sağlık hizmetleri ve endüstriyel dijital ikizler alanlarında görev yürütmesini sağlayan açık kaynaklı fiziksel YZ becerileri ve araçlarından oluşan bir koleksiyon da başlattı. Araçlar, karmaşık geliştirme iş akışlarını; veri üretimi, simülasyon, eğitim ve yaygınlaştırma süreçlerini otomatikleştirebilen, ajanlar tarafından yürütülebilir tekrarlanabilir süreçlere dönüştürüyor.
Laboratuvarlardan Fabrikalara
NVIDIA, robotik araştırmacıları için Isaac GR00T Reference Humanoid Robot adlı açık referans tasarımını tanıttı. Tasarım; Unitree H2 Plus insansı robotu, Sharpa hassas robot ellerini, Jetson Thor yerleşik bilgi işlem sistemini ve Isaac GR00T yazılım yığınını bir araya getiriyor.
Donanım, simülasyon, eğitim ve uygulamayı tek bir sistemde entegre ederek insansı robot geliştirmeyi basitleştirmeyi amaçlayan platformu; Ai2, ETH Zurich, Stanford Robotics Center ve UC San Diego gibi araştırma kuruluşları kullanmayı planlıyor.
NVIDIA, TSMC ile yaptığı iş birliği sayesinde YZ’yi yarı iletken üretiminin daha da derinlerine taşıyor.
Çip üreticisi, hesaplamalı litografi, transistör simülasyonu, süreç kontrolü, plaka denetimi ve fabrika planlaması için NVIDIA CUDA-X kütüphanelerini ve YZ modellerini kullanıyor. NVIDIA’ya göre TSMC, hesaplama verimliliğinde artış sağlarken nanometre ölçeğindeki kusurların tespitini geliştirmek için NVIDIA Metropolis ve TAO Toolkit çözümlerinden de yararlanıyor.
Huang, “NVIDIA ve TSMC, bilgi işlemin sınırlarını zorlamak için yaklaşık otuz yıldır birlikte çalışıyor. TSMC; simülasyon, optimizasyon ve YZ ile dünyanın en karmaşık tasarım ve üretim zorluklarının üstesinden gelerek NVIDIA YZ’sini ve hızlandırılmış bilgi işlemini doğrudan fabrikanın içine taşıyor.” dedi.
NVIDIA, otonom araçlar için fiziksel YZ alanını Alpamayo 2 Super ile de araştırıyor. 32 milyar parametreli akıl yürütme modeli, robotaksilerin karmaşık yol senaryolarını anlamasına, planlama yapmasına ve uygun tepki vermesine yardımcı olmak üzere tasarlandı.
Kaynak: https://interestingengineering.com/ai-robotics/nvidia-physical-ai-cosmos3-humanoid-robots-tsmc
