Kantor Danijar Hafner di wilayah So Ma San Francisco hampir kosong. Startup baru barunya masih dalam mode stealth dan bahkan belum memiliki nama di pintu. Pada hari kunjungan saya, hanya ada satu orang lain di sana dan sangat sedikit furnitur.

Tapi apa yang kurang dalam dekorasi, dikompensasikan oleh robot. Humanoid berbentuk dan ukuran berbagai gantung seperti marionet dari rak yang berjalan di tengah ruang terbuka yang luas. Sementara Hafner, berusia 31 tahun, belum ingin terlalu banyak bicara tentang usaha barunya, ia menggambarkannya sebagai lanjutan dari pekerjaannya yang lama untuk mengaktifkan AI agar dapat navigasi di lingkungan yang belum pernah ditemui selama pelatihan.

Humanoid ini, yang diimpor dari Cina, adalah evolusi selanjutnya dari pekerjaan ini—and merupakan wujud fisiknya. Kemampuannya bereaksi dalam skenario yang belum pernah diuji akan menjadi kunci untuk memasukkan robot ke ruang manusia. Karena jika Anda ingin mengirimkan robot ke rumah seseorang, misalnya, ia perlu mampu menangani tata letak lantai dan furnitur yang belum pernah dilihat sebelumnya.

Untuk mencapai ini, Hafner bergantung pada sesuatu yang disebut pembelajaran penguatan berbasis model. Dia mengembangkan model dunia—model AI yang dirancang untuk meniru realitas fisik—and melatih agen di dalamnya. Agen pada dasarnya memperlakukan model sebagai simulasi dunia nyata dan belajar cara bertindak di sana.

Kemudian, agen menggunakan pengalaman tersebut untuk membuat prediksi tentang hasil di masa depan. Hal ini memungkinkan agen—or robot yang mereka sisipkan—untuk navigasi dalam situasi yang tidak dikenal dalam kehidupan nyata. „Saya berkesempatan berinteraksi dengan banyak orang yang sangat cerdas dalam penelitian di Google, dan dia dengan mudah berada dalam separuh atas 1%.“ Timothy Lillicrap, Google Deep Mind.