Etkileşimli Dünya Simülasyonu İçin Yeni NVIDIA Cosmos 3 Açık Modelleri

Özgün başlık: New NVIDIA Cosmos 3 Open Models for Interactive World Simulation
TL;DR NVIDIA Cosmos dünya modeli geliştirme platformu, etkileşimli dünya simülasyonu ve çoklu sensörlü çoklu görüntülü sürüş sahneleri oluşturmak için Cosmos 3 model ailesine dört yeni açık ağırlıklı kontrol noktası ekliyor: 🌦️ Cosmos3-Nano-Transfer-Auto: Çeşitli hava durumu, aydınlatma ve günün saati ile çoklu görüntülü sürüş verileri oluşturun. 🚗 Cosmos3-Nano-Sim-Auto: Sürüş simülasyonu için senkronize kamera ve LiDAR gözlemlerini yayınlayın. 🎨 Cosmos3-Nano-Sim-Transfer: Simülatör kontrollerini ve metin istemini fotogerçekçi videoya dönüştürün.
🤖 Cosmos3-Nano-Sim-Bimanual : Robot veya kamera hareketlerinden videoyu tahmin edin. Dört modelin tamamı Cosmos 3 Nano'nun eğitim sonrası örnekleridir ve 16B eğitilebilir parametrelere sahiptir. Modeller OpenMDW1.1'i kullanır ve bu, kendi koşulları altında ticari ve ticari olmayan kullanıma izin verir. Kontrol noktalarını indirin · Teknik raporu okuyun.
TL;DR NVIDIA Cosmos world model development platform adds four new open-weight checkpoints to its Cosmos 3 model family for generating interactive world simulation and multi-sensor multi-view driving scenes: 🌦️ Cosmos3-Nano-Transfer-Auto : Generate multi-view driving data with varied weather, lighting, and time of day. 🚗 Cosmos3-Nano-Sim-Auto : Stream synchronized camera and LiDAR observations for driving simulation.
🎨 Cosmos3-Nano-Sim-Transfer : Turn simulator controls and a text prompt into photorealistic video. 🤖 Cosmos3-Nano-Sim-Bimanual : Predict video from robot or camera actions. All four models are post-trained examples of Cosmos 3 Nano and have 16B trainable parameters. The models use OpenMDW1.1, permitting commercial and non-commercial use under its terms. Download the checkpoints · Read the technical report .
TL;DR NVIDIA La plataforma de desarrollo de modelos mundiales Cosmos agrega cuatro nuevos puntos de control de peso abierto a su familia de modelos Cosmos 3 para generar simulación mundial interactiva y escenas de conducción con múltiples sensores y múltiples vistas: 🌦️ Cosmos3-Nano-Transfer-Auto: genere datos de conducción con múltiples vistas con clima, iluminación y hora del día variados. 🚗 Cosmos3-Nano-Sim-Auto: cámara sincronizada en streaming y observaciones LiDAR para simulación de conducción.
🎨 Cosmos3-Nano-Sim-Transfer: convierte los controles del simulador y un mensaje de texto en un vídeo fotorrealista. 🤖 Cosmos3-Nano-Sim-Bimanual: Predice video de acciones de robot o cámara. Los cuatro modelos son ejemplos post-entrenados de Cosmos 3 Nano y tienen 16B parámetros entrenables. Los modelos utilizan OpenMDW1.1, lo que permite el uso comercial y no comercial según sus términos. Descargar los puntos de control · Leer el informe técnico.
TL;DR NVIDIA Платформа разработки моделей мира Cosmos добавляет четыре новые контрольные точки с открытым весом в семейство моделей Cosmos 3 для создания интерактивной симуляции мира и сцен вождения с несколькими датчиками и несколькими изображениями: 🌦️ Cosmos3-Nano-Transfer-Auto: генерирует данные о движении в нескольких представлениях с различной погодой, освещением и временем суток. 🚗 Cosmos3-Nano-Sim-Auto: потоковое синхронизированное изображение с камеры и наблюдения LiDAR для моделирования вождения.
🎨 Cosmos3-Nano-Sim-Transfer: превратите элементы управления симулятора и текстовую подсказку в фотореалистичное видео. 🤖 Cosmos3-Nano-Sim-Bimanual: прогнозируйте видео по действиям робота или камеры. Все четыре модели представляют собой примеры Cosmos 3 Nano после обучения и имеют 16B обучаемых параметров. В моделях используется OpenMDW1.1, что разрешает коммерческое и некоммерческое использование в соответствии с его условиями. Скачать КПП · Прочитать технический отчет.