Menurut bahan yang dikeluarkan oleh NVIDIA, Cosmos 3 adalah model asas AI fizikal omnimodal yang pertama di dunia yang sepenuhnya terbuka. Dibina berdasarkan seni bina Transformer hibrid proprietari NVIDIA, model ini mengintegrasikan cabang pemikiran dan penghasilan, membolehkan pemikiran visual, penghasilan dunia, dan ramalan tindakan dalam satu model. Ia dapat mereproduksi dengan tepat peraturan fizikal dunia nyata seperti graviti, perlanggaran, dan geseran. Berbeza dengan model multimodal umum yang direka terutamanya untuk penghasilan kandungan hiburan, Cosmos 3 secara asli menyokong input dan penghasilan lima modaliti: teks, imej, video, audio ambien, dan gerakan manusia dan robot. Dilatih terlebih dahulu menggunakan dataset yang dianotasi secara fizikal berskala besar, model ini dapat menghasilkan secara autonomi data adegan yang realistik dan trajektori gerakan yang mengikuti undang-undang fizikal dunia nyata.
Maklumat rasmi menunjukkan bahawa Cosmos 3 dirancang dalam pelbagai tahap model. Versi Super, dengan parameter yang lebih besar, direka untuk syarikat pembuat kereta dan syarikat robotik humanoid untuk sintesis data berskala besar dan pengembangan algoritma lanjutan. Versi Base menyasarkan pasukan R&D kecil dan sederhana di pelbagai industri, sementara versi Tiny dioptimumkan untuk penerapan lokal pada perangkat keras pinggir dan tertanam. NVIDIA telah sepenuhnya membuka berat model, kod sumber, dan dataset penilaian sokongan, dengan sumber berkaitan tersedia di platform terbuka seperti Hugging Face dan GitHub. Pemaju global dapat mengakses sumber tersebut secara percuma dan membuat penyesuaian seperti yang diperlukan. Dari segi kecekapan penerapan, NVIDIA menyatakan model ini boleh memampatkan kitaran simulasi dan pengesahan tradisional untuk projek robotik, pemanduan autonomi, dan kembar digital industri dari beberapa bulan menjadi hanya beberapa hari, membantu mengurangkan kos pengumpulan data dan pengujian untuk pengembangan AI fizikal.
Seiring dengan pengumuman produk, NVIDIA juga melancarkan strategi ekosistemnya dengan membentuk NVIDIA Cosmos Coalition, sebuah aliansi kerjasama global. Anggota pengasas termasuk makmal AI terkemuka dan syarikat robotik seperti Agile Robots, Black Forest Labs, Runway, LTX, dan Skild AI. Dalam rangka kerja kerjasama koalisi, organisasi anggota dapat berkongsi keseluruhan tumpuan teknologi Cosmos 3, mengakses sumber pengkomputeran NVIDIA DGX Cloud jika diperlukan, dan bertukar algoritma, penanda aras, dan data pengujian industri dunia nyata. Aliansi ini bertujuan untuk secara bersama mengembangkan standard umum untuk model dunia terbuka dan mempercepat迭代 serta komersialisasi teknologi AI fizikal generasi seterusnya.
Maklumat yang tersedia untuk umum menunjukkan bahawa beberapa pembuat kereta dan pengelu ar peralatan automasi telah pun memulakan ujian dalaman projek berdasarkan Cosmos 3. Senario penerapan yang berpotensi termasuk pengembangan robot humanoid, simulasi pemanduan autonomi, pemeriksaan visual industri, dan penghasilan kandungan digital yang realistik.