Эгоцентрический набор данных

Видеоданные от первого лица, полученные с помощью носимых камер. Записывают, как люди воспринимают окружающую среду и взаимодействуют с ней, предоставляя важные обучающие данные для воплощенного искусственного интеллекта, понимания активности и систем обучения роботов.

9,200+
Часы данных
16+
Подсценарии
4
Категории сцен
5,000h
Максимальное количество на категорию

Ключевые особенности

Вид от первого лица

Естественный ракурс с использованием камер, закрепленных на голове.

Реальные данные

Реалистичные сценарии повседневной деятельности в различных условиях

Взаимодействие объектов

Детальная запись захвата предметов, манипуляций и взаимодействия человека с ними.

Естественный контекст

Богатый экологический контекст для тренировки восприятия

Настройка сбора данных

Коллекция носимых устройств на основе камер

Данные собираются с помощью носимых устройств — камер GoPro и смартфонов — для фиксации действий пользователя с его естественной точки зрения в реальных условиях.

Метод сбораЗапись от первого лица с помощью носимого устройства
АппаратыКамеры GoPro / Смартфоны
СмотроваяЭгоцентрическая перспектива
Окружающая средаРеальные условия внутри и вне помещений

Покрытие набора данных

Реальная деятельность человека

Разнообразная деятельность человека в различных средах:

Главная

Кухня · Гостиная · Спальня · Ванная комната · Кладовая · Балкон / Открытая терраса

КАБИНЕТ

Рабочие места · Зоны для совещаний · Приемные · Общие офисные помещения

КОММЕРЧЕСКИЙ И ПРОМЫШЛЕННЫЙ

Розничная торговля · Обработка товаров · Сборка · Упаковка · Манипулирование объектами

Пример

Маникюр / Дизайн ногтей

Человек выполняет полный комплекс процедур маникюра и нейл-арта, снятый на носимую камеру от первого лица в виде непрерывной последовательности из 16 кадров, демонстрирующей весь процесс шаг за шагом.

Носимое устройство от первого лица 16-кадровая последовательность
Захватывает: Точное взаимодействие ручных инструментов · Формирование и полировка ногтей · Пошаговое описание процесса · Прецизионное манипулирование

Последовательность процесса

16 кадров · вид от первого лица
Рамка 11
Рамка 22
Рамка 33
Рамка 44
Рамка 55
Рамка 66
Рамка 77
Рамка 88
Рамка 99
Рамка 1010
Рамка 1111
Рамка 1212
Рамка 1313
Рамка 1414
Рамка 1515
Рамка 1616

Спецификации набора данных

Тип данныхНабор видеоданных
ПерспективаОт первого лица (эгоцентричное повествование)
УстройствоGoPro / Смартфон
Окружающая средаРеальные сценарии
ФорматMP4
Длительность Настраиваемый
аннотированиеДоступен по запросу

Области применения

Разработано для воплощенной разработки искусственного интеллекта.

Признание человеческой деятельности Действие Понимание Имитация обучения Обучение VLA Обучение роботов Обучение агентов ИИ

Заинтересованы в использовании этого набора данных для ваших исследований или разработки продуктов? Свяжитесь с нашей командой.

Наверх