CYBER-IICapture, reconstruction et incrustation en temps rel dun animateur dans un monde virtuelArtis-GRAVIR/IMAG, Grenoble, Jean-Marc Hasenfratz

LIRIS, Lyon, Saida BouakazMOVI-GRAVIR/IMAG, Grenoble, Edmond BoyerAPACHE/ID, Grenoble, Bruno Raffin

D. Cobzas, JS Franco, JD Gascuel, E. Guillou, JC Iehl, M. Lapierre, S. Maad, C. Menier, B. Proche, P. Sturm

Description du projetBut : Capture, reconstruction et incrustation en temps rel dun animateur dans un monde virtuel

Intrts & applicationsStudio virtuel pour chane de tlVisite virtuelle dans des mondes rels ou imaginairesVulgarisation scientifique style palais de la dcouverteJeux vido

PlanDcortiquer les problmes partir de diffrentes applications existantes

Contraintes pour arriver nos fins

Rsultats

Prsentation de la mto

Pb 1 : Fond BLEU ou VERT

Pb 2 : Ombres portes

Pb 2 : Ombres portes

Pb 2 : Ombres portes

Pb 3 : Cohrence des couleurs

Pb 3 : Cohrence des couleurs52Vido Thalassa

Pb 4 : InteractionPalais de la dcouverte Paris LlectromagntismeInteraction avec le publique

Interaction avec les objets virtuels

Raction instantane (temps rel)

Projection sur cran haute rsolution

Pb 4 : Interaction

Pb 5 : Posture de lanimateurTrouver un modle articul de lanimateur

ContraintesFond quelconqueRalisme de lincrustation OmbresInteractions lumineusesPoint de vue quelconqueInteractionAvec le public (aucun capteurs)Interaction avec le monde virtuel (reconnatre les gestes)Temps relVisualisation sur cran trs haute rsolution

Description du projet

Infrastructure matrielle

Rsultat : fond quelconque

ParalllisationReconstruction en 3 tapes ci-dessousStructure de pipeline avec un tage par tapeParalllisation interne chaque tape: dcoupage spatial de taches concurrentes

Paralllisation : grappe de PCAugmentation du dbit (30 images/secondes vs 1 image/seconde en squentiel)Rduction de la latence de 1s 100msImplmentation avec 4 cameras Firewire, sur grappe de 11 bi-Xeon 2GHz, sur rseau gigabit, visualisation sur systme multi-projecteurs

Reconstruction et mur dimages22

Interaction : H-anim

Rsultats : interactionVido

En cours et faireTexturage omnidirectionnelTerminer portage sous LinuxReconnaissance du squeletteRclairage textures

Each task must be distributed among several CPUS grouped together in a task processing units (oval)Casser loval pour gagner latenceNeede, but more complicated difficult dernier lieuPas contraint par le sys - validation.Ajouter photio grimage