Teknologi lainnya mencakup kerangka kerja dan cetak biru simulasi seperti Cetak Biru NVIDIA Isaac GROOT untuk menghasilkan data sintetis, serta Newton, mesin fisika sumber terbuka yang sedang dikembangkan bersama Google DeepMind dan Disney Research yang dibuat khusus untuk pengembangan robot.
Tersedia saat ini, GROOT N1 adalah yang pertama dari keluarga model yang sepenuhnya dapat disesuaikan yang akan dilatih dan dirilis oleh NVIDIA kepada pengembang robotika di seluruh dunia – mempercepat transformasi industri yang ditantang oleh kekurangan tenaga kerja global yang diperkirakan lebih dari 50 juta orang.
"Era robotika generalis telah tiba," kata Jensen Huang, pendiri dan CEO NVIDIA. "Dengan NVIDIA Isaac GROOT N1 dan kerangka kerja generasi data dan pembelajaran robot baru, pengembang robotika di mana pun akan membuka batas berikutnya di era AI."
Model dasar GROOT N1 menampilkan arsitektur sistem ganda, terinspirasi oleh prinsip-prinsip kognisi manusia. "Sistem 1" adalah model aksi berpikir cepat, mencerminkan refleks atau intuisi manusia. "Sistem 2" adalah model berpikir lambat untuk pengambilan keputusan yang disengaja dan metodis.
Didukung oleh model bahasa visi, Sistem 2 bernalar tentang lingkungannya dan instruksi yang telah diterimanya untuk merencanakan tindakan. Sistem 1 kemudian menerjemahkan rencana ini menjadi gerakan robot yang presisi dan berkelanjutan. Sistem 1 dilatih pada data demonstrasi manusia dan sejumlah besar data sintetis yang dihasilkan oleh platform Omniverse.
GROOT N1 dapat dengan mudah melakukan generalisasi di berbagai tugas umum – seperti menggenggam, memindahkan objek dengan satu atau kedua lengan, dan mentransfer item dari satu lengan ke lengan lain atau melakukan tugas multi-langkah yang membutuhkan konteks panjang dan kombinasi keterampilan umum. Kemampuan ini dapat diterapkan di berbagai kasus penggunaan seperti penanganan material, pengemasan, dan inspeksi.
Pengembang dan peneliti dapat melatih ulang GROOT N1 dengan data nyata atau sintetis untuk robot humanoid atau tugas spesifik mereka.
Dalam keynote GTC-nya, Huang mendemonstrasikan robot humanoid 1X yang secara otonom melakukan tugas-tugas merapikan rumah tangga menggunakan kebijakan yang dilatih ulang yang dibangun di atas GROOT N1. Kemampuan otonom robot adalah hasil dari kolaborasi pelatihan AI antara 1X dan NVIDIA.
"Masa depan humanoid adalah tentang kemampuan beradaptasi dan belajar," kata Bernt Børnich, CEO 1X Technologies. "Model GROOT N1 NVIDIA memberikan terobosan besar untuk penalaran dan keterampilan robot. Dengan sedikit data pelatihan ulang, kami dapat sepenuhnya menerapkan pada NEO Gamma – memajukan misi kami untuk menciptakan robot yang bukan alat, tetapi teman yang dapat membantu manusia dengan cara yang bermakna dan tak terukur."
Di antara pengembang humanoid terkemuka lainnya di seluruh dunia dengan akses awal ke GROOT N1 adalah Agility Robotics, Boston Dynamics, Mentee Robotics, dan NEURA Robotics.
NVIDIA mengumumkan kolaborasi dengan Google DeepMind dan Disney Research untuk mengembangkan Newton, mesin fisika sumber terbuka yang memungkinkan robot belajar cara menangani tugas-tugas kompleks dengan presisi yang lebih besar.
Dibangun di atas kerangka kerja Warp, Newton akan dioptimalkan untuk pembelajaran robot dan kompatibel dengan kerangka kerja simulasi seperti MuJoCo Google DeepMind dan Isaac Lab. Selain itu, ketiga perusahaan berencana untuk mengaktifkan Newton untuk menggunakan mesin fisika Disney.
Google DeepMind dan NVIDIA berkolaborasi untuk mengembangkan MuJoCo-Warp, yang diharapkan dapat mempercepat beban kerja pembelajaran mesin robotika lebih dari 70x dan akan tersedia untuk pengembang melalui perpustakaan sumber terbuka MJX Google DeepMind, serta melalui Newton.
Disney Research akan menjadi salah satu yang pertama menggunakan Newton untuk memajukan platform karakter robotiknya yang mendukung robot hiburan generasi berikutnya, seperti droid BDX yang terinspirasi Star Wars yang ekspresif yang bergabung dengan Huang di atas panggung selama keynote GTC-nya.
Dataset besar, beragam, dan berkualitas tinggi sangat penting untuk pengembangan robot tetapi mahal untuk ditangkap. Untuk humanoid, data demonstrasi manusia di dunia nyata dibatasi oleh 24 jam sehari seseorang.
Diumumkan hari ini, Cetak Biru NVIDIA Isaac GROOT untuk generasi gerakan manipulasi sintetis membantu mengatasi tantangan ini. Dibangun di Omniverse dan model dasar dunia NVIDIA Cosmos Transfer, cetak biru ini memungkinkan pengembang menghasilkan sejumlah besar data gerakan sintetis untuk tugas manipulasi dari sejumlah kecil demonstrasi manusia.
Menggunakan komponen pertama yang tersedia untuk cetak biru, NVIDIA menghasilkan 780.000 lintasan sintetis – setara dengan 6.500 jam, atau sembilan bulan terus-menerus, data demonstrasi manusia hanya dalam 11 jam. Kemudian, menggabungkan data sintetis dengan data nyata, NVIDIA meningkatkan kinerja GROOT N1 sebesar 40%, dibandingkan dengan hanya menggunakan data nyata.
Untuk lebih melengkapi komunitas pengembang dengan data pelatihan yang berharga, NVIDIA merilis dataset GROOT N1 sebagai bagian dari dataset AI fisik sumber terbuka yang lebih besar yang juga diumumkan di GTC dan sekarang tersedia di Hugging Face.
Data pelatihan dan skenario evaluasi tugas NVIDIA GROOT N1 sekarang tersedia untuk diunduh dari Hugging Face dan GitHub. Cetak Biru Isaac GROOT untuk generasi gerakan manipulasi sintetis juga sekarang tersedia sebagai demo interaktif di build.nvidia.com atau untuk diunduh dari GitHub.
Mesin fisika Newton diharapkan tersedia akhir tahun ini.
Cek Berita dan Artikel yang lain di
Google News
