Dataset Ego-Exo

Combina le visuali in prima persona della fotocamera indossabile con le prospettive di telecamere esterne per una comprensione spaziale completa. La sincronizzazione multi-camera cattura sia il punto di vista dell'utente che il contesto circostante.

Funzionalità principali

Ego + Exo Views

Prospettive in prima persona ed esterne in un unico set di dati sincronizzato.

Sincronizzazione della fotocamera

Codice QR con timestamp per l'allineamento multi-dispositivo a livello di millisecondi

Focus sull'interazione

Sia la manipolazione di oggetti che gli scenari di interazione uomo-uomo

Compiti del mondo reale

Attività quotidiane in ambienti autentici per la formazione pratica sull'intelligenza artificiale.

Impostazione della raccolta dati

Raccolta sincronizzata da più telecamere

Una fotocamera indossabile e due fotocamere esterne, sincronizzate tramite tecnologia di timestamp con codice QR per un allineamento preciso su tutti e tre i punti di vista.

Camera Setup	1 dispositivo indossabile + 2 fotocamere esterne
Visualizzazioni	Prospettiva dell'ego + prospettive esterne
Sincronizza	Codice QR con timestamp
Tipo di dati	Dataset video multivista
Ambiente	Scenari del mondo reale

Struttura dati multivista

Sistema di ripresa a tre telecamere

Visione dell'ego

Dal punto di vista dell'utente
Dettagli del movimento della mano
Processo di interazione con gli oggetti
Informazioni sull'azione in prima persona

Exo View

Da telecamere esterne
movimento di tutto il corpo
Relazioni spaziali
Contesto ambientale

Esempi di set di dati

Esempio 1: Piegare gli abiti

Una persona piega un indumento in un ambiente reale, ripresa da tre punti di vista sincronizzati.

Dispositivo indossabile in prima personaFotocamera frontale esternaFotocamera laterale esterna

Cattura: Interazione mano-oggetto · Processo di piegatura · Comportamento di manipolazione

Visione dell'ego

Exo View1

Exo View2

Esempio 2: Attività di cura della persona

Registrazioni multivista di attività di cura della persona che coprono 9 regioni del corpo.

Di ritornoSpallaPettoPolsoBraccioPosareColloHeadCalcio

Acquisizioni: Modelli di movimento umano · Processo di interazione corporea · Informazioni spaziali multivista

Visione dell'ego

Exo View1

Exo View2

Esempio 3: Pasticceria — Preparazione di torte

Una persona prepara una torta in un ambiente di cucina, ripresa da tre punti di vista sincronizzati.

Dispositivo indossabile in prima personaFotocamera frontale esternaFotocamera laterale esterna

Acquisizioni: Manipolazione degli ingredienti · Miscelazione e versamento dell'impasto · Glassatura/decorazione · Processo di manipolazione di strumenti e oggetti · Informazioni spaziali multivista

Visione dell'ego

Exo View1

Exo View2

Esempio 4: Taglio di capelli

In un salone, un parrucchiere esegue un taglio di capelli su un cliente, ripreso da tre punti di vista sincronizzati.

Dispositivo indossabile in prima personaFotocamera frontale esternaFotocamera laterale esterna

Cattura: Interazione tra strumento e capelli · Tecnica di taglio/styling · Coordinamento spaziale tra due persone

Visione dell'ego

Exo View1

Exo View2

Esempio 5: Bellezza / Cura della pelle

Un'estetista esegue una routine di cura del viso su una cliente, ripresa da tre punti di vista sincronizzati.

Dispositivo indossabile in prima personaFotocamera frontale esternaFotocamera laterale esterna

Immagini: Interazione precisa mano-viso · Tecnica di applicazione del prodotto · Dettaglio del viso da diverse angolazioni

Visione dell'ego

Exo View1

Exo View2

Specifiche del set di dati

Tipo di dati	Dataset video multivista
Configurazione della telecamera	1 Ego + 2 Exo Cameras
Sincronizza	Codice QR con timestamp
Prospettiva	Prima persona + Terza persona
Ambiente	Scenari del mondo reale
Compiti	Manipolazione e interazione
Annotazione	disponibile su richiesta

Applicazioni

Sostegno alla ricerca avanzata sull'intelligenza artificiale

Apprendimento del robot umanoide Manipolazione robotica Modelli VLA Interazione uomo-robot IA multimodale Intelligenza incarnata

Ti interessa utilizzare questo set di dati per la tua ricerca o lo sviluppo di prodotti? Contatta il nostro team.