NVIDIA, Cosmos 3 ailesine sürüş ve robotik simülasyonu için dört açık ağırlıklı dünya modeli ekledi

NVIDIA, dünya modeli (world model) geliştirme platformu Cosmos'a dört yeni açık ağırlıklı checkpoint ekledi. Şirket ekibinin 5 Kasım'da Hugging Face blogunda yayımladığı duyuruya göre modeller, etkileşimli dünya simülasyonu ve çok sensörlü, çok kameralı sürüş sahneleri üretmek için tasarlandı. Dördü de Cosmos 3 Nano'nun sonradan eğitilmiş (post-trained) örnekleri ve her birinde 16 milyar eğitilebilir parametre bulunuyor.

Dünya modelleri, bir ortamın bir eylemden sonra nasıl değişeceğini tahmin eden modeller. Robot ve otonom araç politikalarını gerçek dünyada denemeden önce simülasyonda eğitmek ve test etmek için kullanılıyor.

Dört model ne yapıyor?

• Cosmos3-Nano-Transfer-Auto: Farklı hava, ışık ve gün saati koşullarında çok kameralı sürüş verisi üretiyor. NVIDIA'ya göre balıkgözü lensler dahil 11 kamera görüntüsüne kadar senkron video ve birlikte RGB–LiDAR üretimi destekleniyor; geliştiriciler modeli kendi sensör düzenlerine göre yeniden eğitebiliyor.
• Cosmos3-Nano-Sim-Auto: Transfer-Auto'nun damıtılmış (distilled), akış halinde çalışan sürümü. Sürüş kontrolleri güncellendikçe senkron kamera ve LiDAR gözlemlerini küçük parçalar halinde üretiyor. Kapalı döngü kullanım için ayrıca bir simülasyon çalışma ortamı gerekiyor.
• Cosmos3-Nano-Sim-Transfer: Fizik simülatörünün derinlik, segmentasyon ve kenar gibi kontrollerini bir metin istemiyle birleştirip fotogerçekçi video üretiyor. Fizik ve gerçek durum bilgisi simülatörde kalıyor, model yalnızca görüntüyü üretiyor.
• Cosmos3-Nano-Sim-Bimanual: Çift kollu bir robotun ya da kameranın eylemlerinden sonraki görüntüleri tahmin ediyor; NVIDIA, YAM ve AgiBot gövdelerinin desteklendiğini belirtiyor.

Neden önemli?

Otonom sürüş ve robotikte en pahalı kalem, nadir ve tehlikeli durumlar için gerçek veri toplamak. Hava, ışık ya da trafik ışığı durumunu değiştirerek sentetik veri üretebilmek bu maliyeti düşürme vaadi taşıyor. Modellerin ticari ve ticari olmayan kullanıma izin veren OpenMDW 1.1 lisansıyla yayımlanması, küçük ekiplerin de bu altyapıyı deneyebilmesi anlamına geliyor. NVIDIA duyurusunda modellerin politika eğitimini nerede güvenilir şekilde desteklediğinin hâlâ ölçülmesi gerektiğini ve sorunların zor olmaya devam ettiğini de kabul ediyor.

Kimin işine yarar / ne yapabilirsiniz?

• Otonom sürüş ve robotik ekipleri: Ağırlıklar, teknik rapor ve her model için hazır notebook'lar Hugging Face üzerinden erişilebilir; NVIDIA modelleri AI ajanlarına yönlendirilebilen "skill" olarak da paylaşıyor.
• Donanım planlayanlar: NVIDIA'nın listelediği gereksinimler Linux, NVIDIA GPU, Docker ve NVIDIA Container Toolkit. Yayımlanan kurulum tek bir GB200 üzerinde test edilmiş; şirket bunun asgari bellek gereksinimi olmadığını not ediyor.
• Güvenlik ekipleri: Açık ağırlıklı modelleri iç ortama almadan önce lisans koşullarını, indirilen ağırlıkların kaynağını ve konteyner imajlarını kurumsal yazılım tedarik zinciri sürecinizden geçirin.