У разработчика есть две роботизированные руки, камеры и задача: убрать предметы со стола. Dream Labs предлагает подключить к этому оборудованию модель через API. Dream-1 должна управлять совместимыми роботами, даже если конкретная конструкция не встречалась ей при обучении. Заявление относится к системам с двумя руками и параллельными захватами. Мобильные платформы и сложные кисти требуют отдельной настройки.1
За удобным интерфейсом стоит инженерный выбор. Модель может задавать положение захватов: куда перенести руку и когда сомкнуть пальцы. Программное обеспечение робота переводит это в движения суставов. На входе — изображения с трёх камер: общей и двух на запястьях. Поэтому результат зависит и от модели, и от того, насколько хорошо конкретная машина исполняет её команды.1
Как модель учится действовать
Исследовательская основа появилась раньше. В феврале команда DreamZero показала World Action Model: модель одновременно предсказывает будущую картинку и действия робота. Она учится связывать видимый результат с движением, которое к нему приводит. В той работе перенос на нового робота YAM требовал 30 минут примеров. Заявка Dream-1 — начать работу на части незнакомых конструкций без таких примеров. Это разные ступени развития технологии: прежний результат помогает понять новый, но не подтверждает его автоматически.2
Что означают 59,3 процента
Помимо роликов есть независимая проверка. Robocurve показывает средний результат Dream-1 в 59,3% на RoboDojo-RC Tier 1. На каждую конфигурацию приходится 120 попыток. Базовая методика включает шесть задач на настоящих роботах — например, сложить миски или переложить фрукты. Человек оценивает попытку по заранее заданной шкале. Такие условия делают результат содержательнее отдельного удачного видео.3 4
Это средняя оценка прогресса, а не доля полностью выполненных поручений. Робот может перенести часть фруктов и получить часть балла. Показатель полезен для сравнения систем в одинаковом испытании, но его нельзя превращать в вероятность успеха на домашней кухне. Расчётная стоимость около 15 центов за попытку тоже относится к этому испытанию, а не к полной стоимости робота, оборудования и работы команды.3 4
Таблицы разработчиков показывают границы ещё нагляднее. В одной из групп простого перемещения предметов полный успех составил 24 из 60 попыток; в задачах с инструментами заявлено 6%. Часть видео воспроизводится с ускорением. Эти детали важны для любого продукта, где красивое действие должно повторяться снова и снова.1
В таблице релизов Robocurve Dream-1 датирована 19 октября. Попадание истории в технологические подборки 24 октября не делает её новым запуском. Мы включаем её как разбор недели: здесь появился конкретный продуктовый вопрос, который не исчезает вместе с очередным информационным циклом.3
