Membantu robot memberi tumpuan dan meminjamkan tangan
Sistem ini membantu robot memberi tumpuan kepada apa yang penting, menggunakan bunyi dan imej untuk meneka matlamat manusia dan menawarkan bantuan yang tepat dengan cepat dan selamat.
Robot mencari dunia nyata sukar difahami.MIT membuat sistem yang dipanggil "Relevan" untuk membantu robot memberi tumpuan kepada apa yang penting.Ia menggunakan bunyi dan imej untuk meneka apa yang seseorang mahu dan dengan cepat menawarkan bantuan.
Pasukan itu mengujinya dengan bufet sarapan pagi.Robot, menggunakan kamera dan mikrofon, menyerahkan barang kopi orang dengan menonton dan mendengar.Ia meneka matlamat 90% betul, memilih objek yang tepat 96% masa, dan mempunyai 60% lebih sedikit kemalangan.
Mencari fokus
Pasukan itu membina robot yang berfungsi seperti RAS otak, membantu ia memberi tumpuan kepada perkara -perkara penting dan mengabaikan yang lain.Pertama, robot jam tangan dan mendengar menggunakan kamera dan mikrofon, menghantar apa yang dilihat dan didengar kepada AI yang menemui orang, objek, tindakan, dan kata kunci.Kedua, ia memeriksa jika ada yang penting berlaku, seperti orang yang memasuki bilik.Jika ia melihat seseorang, langkah ketiga bermula: Robot itu memaparkan apa yang orang mahu dan mencari objek yang tepat untuk membantu, seperti memilih cawan dan krim bukan buah -buahan dan makanan ringan.
Mod penolong
Para penyelidik menguji sistem baru mereka dengan eksperimen yang mensimulasikan bufet sarapan persidangan.Mereka memilih persediaan ini kerana dataset Tindakan Sarapan Awam yang tersedia, termasuk video dan imej yang menunjukkan aktiviti sarapan pagi seperti membuat kopi, memasak pancake, membuat bijirin, dan menggoreng telur.Setiap video dan imej dilabelkan dengan tindakan khusus dan matlamat keseluruhan, seperti "membuat kopi" atau "menggoreng telur."
Dengan menggunakan dataset ini, pasukan melatih dan menguji algoritma yang berbeza dalam toolkit AI mereka untuk mengenali tindakan manusia, mengetahui matlamat orang itu, dan mengenal pasti objek yang diperlukan untuk membantu.Dalam eksperimen mereka, mereka menubuhkan lengan robot dan penggenggam, kemudian meminta robot untuk membantu orang ketika mereka mendekati meja yang penuh dengan minuman, makanan ringan, dan peralatan makan.Apabila tiada siapa yang berada di sekitar, AI robot secara senyap -senyap bekerja di latar belakang, pelabelan dan mengklasifikasikan objek di atas meja.Tetapi apabila manusia dikesan, robot itu segera beralih ke fasa relevaninya, dengan cepat mencari objek yang paling baik membantu orang berdasarkan apa yang AI meramalkan matlamat mereka.
