Почти как люди?

Команда робототехников Google DeepMind обучает роботов также, как это стажёров-людей - показывая им учебные фильмы.

Роботы Google RT-2, оснащенные генеративной моделью ИИ Gemini 1.5 Pro, могут получать информацию из видео, чтобы научиться передвигаться и даже выполнять запросы по месту назначения. Благодаря длинному контекстному окну модели Gemini 1.5 Pro возможно обучение робота, как нового стажера. Это окно позволяет ИИ обрабатывать большое количество информации одновременно. Исследователи снимали видеоэкскурсию по определенной территории, например, дому или офису, которую после этого демонстрировали роботу, который просматривал видео и изучал обстановку. В ходе практических испытаний роботы, управляемые Gemini, работали на площади 9 000 квадратных футов и успешно выполняли более 50 различных инструкций пользователя с 90-процентной вероятностью успеха. Такой высокий уровень точности открывает множество возможностей для использования роботов с искусственным интеллектом в реальном мире, помогая им дома по хозяйству или на работе с рутинными или даже более сложными задачами.
Одним из наиболее примечательных аспектов модели Gemini 1.5 Pro является ее способность выполнять многоэтапные задачи. Исследование DeepMind показало, что роботы могут отвечать на вопросы, например, о наличии определенного напитка, перемещаясь к холодильнику, визуально обрабатывая то, что в нем находится, а затем возвращаясь и отвечая на вопрос.

Однако не стоит ожидать, что в ближайшее время этот робот появится в продаже. Во-первых, на обработку каждой команды уходит до 30 секунд, что в большинстве случаев гораздо медленнее, чем просто сделать что-то самому. В хаосе реальных домов и офисов роботу будет гораздо сложнее ориентироваться, чем в контролируемой среде, независимо от того, насколько совершенна модель искусственного интеллекта. Тем не менее, интеграция моделей ИИ, подобных Gemini 1.5 Pro, в робототехнику - это часть большого прорыва в данной области. Роботы, оснащенные такими моделями, как Gemini или ее конкуренты, могут изменить здравоохранение, доставку и даже работу уборщиков. (По материалам портала techradar.com)