Відділ робототехніки DeepMind впровадив Gemini 1.5 Pro в робота, щоб навчити його переміщатися офісом і реагувати на команди.
У серії відеороликів команда ШІ-підрозділу Google просить машину виконати різні завдання. В одному з експериментів тестувальник дав команду відвести його куди-небудь, де можна малювати. Дроїд привів людину до дошки з маркером.
Посмотреть эту публикацию в Instagram
Під час іншого тесту роботу показали карту і попросили дістатися до «Синьої зони». Він ненадовго задумався, після чого почав виконувати завдання.
«Я успішно дотримувався вказівок на дошці», — прокоментував робот.
Для тестів дроїда навчили орієнтуватися в просторі за допомогою «мультимодальної навігації за інструкціями з демонстраційними турами». Він переміщається офісом і вказує мовою на різні орієнтири. Наприклад, робот може переміститися до розетки після прохання зарядити телефон.
Команда на підставі розуміння навколишнього середовища навчила ШІ міркувати «відповідно до здорового глузду». Завдяки цьому він може реагувати на письмові та намальовані команди, а також жести.
У дроїда можна запитати, чи є в наявності улюблений напій. Gemini знає, що потрібно поїхати до холодильника, переконатися в наявності або відсутності банок кока-коли і повернутися з відповіддю.
За даними Google, машина з ШІ показала близько 90% успішних спроб взаємодії зі співробітниками в більш ніж 50 тестах.
Раніше дослідники з Токійського університету навчили робота керувати електромобілем.
У липні китайські вчені виростили штучний мозок і вживили в дроїда.
Нагадаємо, Ілон Маск заявив, що роботи-гуманоїди Optimus доведуть капіталізацію Tesla до $25 трлн.
