Post on 22-Jan-2016
description
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Projet ETISEOProjet ETISEO
ÉvaluationÉvaluation
du du TTraitement et de l’Interprétation raitement et de l’Interprétation
de de SSéquences vidéquences vidEOEO..
David CHERDavid CHER
Coordinateur ETISEOCoordinateur ETISEO
SILOGIC S.A. , Toulouse, France SILOGIC S.A. , Toulouse, France
Journée Journée TechnoTechno--languelangue / / TechnoTechno--visionvision
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Configuration VidéoConfiguration Vidéo
LesLes configurations configurations choisies :choisies :
- Caméras fixes, focales fixes,- Caméras fixes, focales fixes,
- Caméras Couleur/ N&B et IR,- Caméras Couleur/ N&B et IR,
- Configurations Mono ou multi caméras,- Configurations Mono ou multi caméras,
- « Indoor » & « outdoor »,- « Indoor » & « outdoor »,
- Tracking de personnes et de véhicules,- Tracking de personnes et de véhicules,
- Reconnaissance d’évènements.- Reconnaissance d’évènements.
Le projet ETISEO fait partie du programme Le projet ETISEO fait partie du programme Techno-Techno-
Vision.Vision.
Objectif: l’évaluation des méthodes de traitement Objectif: l’évaluation des méthodes de traitement
d’images d’images
pour les applications de pour les applications de vidéo surveillancevidéo surveillance..
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Fournisseurs de donnéesFournisseurs de données
Différents Différents sitessites, « indoor » & , « indoor » & « outdoor »: « outdoor »:
- Couloir,- Couloir,
- métro,- métro,
- entrée de bâtiment,- entrée de bâtiment,
- parking avion,- parking avion,
- parking auto.- parking auto.
PlusieursPlusieurs fournisseurs de données fournisseurs de données offrant une large offrant une large diversitédiversité..
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
ETISEO /AéroportETISEO /Aéroport
Apron Apron
Toulouse-Blagnac Toulouse-Blagnac AéroportAéroport
FranceFrance
Caméras
vidéo
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
INRETS-LEOSTINRETS-LEOSTVilleneuve d’Ascq – Villeneuve d’Ascq – FranceFrance
ETISEO / INRETSETISEO / INRETS
Entrée Entrée bâtimentbâtiment
Parking Parking
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
ETISEO / CEAETISEO / CEA
ruerue
CouloirCouloir
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
ETISEO / RATPETISEO / RATP
métrométro
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Tâches évaluéesTâches évaluées
Les VTs & les métriques sont étudiées pour Les VTs & les métriques sont étudiées pour évaluer les diverses tâches d’une chaîne de évaluer les diverses tâches d’une chaîne de traitement d’images:traitement d’images:
11: : DétectionDétection,,
22: : LocalisationLocalisation,,
33: : ClassificationClassification,,
44: : TrackingTracking,,
55: Reconnaissance d’: Reconnaissance d’évènementsévènements..
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Critères ETISEOCritères ETISEO
- Nombre d’objets- Nombre d’objets détectés détectés dans chaque image, dans chaque image,
- Précision de localisation - Précision de localisation 2D2D (centroïde, bounding (centroïde, bounding box)box)
- - FragmentationFragmentation des objets (splitting & merging), des objets (splitting & merging),
- PersistancePersistance du Tracking avec occlusion partielle du Tracking avec occlusion partielle
(statique ou dynamique),(statique ou dynamique),
- Persistance des - Persistance des ID ID des objets,des objets,
- - ClassificationClassification et reconnaissance des objets, et reconnaissance des objets,
- Nombre d’- Nombre d’évènementsévènements reconnus (starting & reconnus (starting & ending time)ending time)
- Précision trajectoires - Précision trajectoires 3D3D..
Une variété de critères est proposée pour une Une variété de critères est proposée pour une analyse détaillée des résultats :analyse détaillée des résultats :
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Evaluation Evaluation internationaleinternationale
- - PETSPETS, , Visual Surveillance and Performance Visual Surveillance and Performance Evaluation of Tracking and Surveillance (Evaluation of Tracking and Surveillance ( University of University of Reading, UK)Reading, UK)
- - VITALVITAL, , Video Test Imagery Library Video Test Imagery Library (HOSDB, UK)(HOSDB, UK)
- - CAVIARCAVIAR, , Context Aware Vision using Image-based Context Aware Vision using Image-based Active Active RecognitionRecognition (projet e (projet européen ISTuropéen IST))
- - CREDSCREDS, , Call for Real-Time Event Detection Call for Real-Time Event Detection SolutionsSolutions
(RATP, FR)(RATP, FR)
- - VERAAEVERAAE (ARDA, US)(ARDA, US)
- - ARDAARDA--VACEVACE, , Video Analysis and Content Video Analysis and Content Extraction Extraction (NIST,US)(NIST,US)
- - TerrascopeTerrascope (Université du Kentuky, US). (Université du Kentuky, US).
ETISEO s’inscrit au sein des projets internationaux ETISEO s’inscrit au sein des projets internationaux pour l’évaluation de la vidéosurveillance: pour l’évaluation de la vidéosurveillance:
Ces projets ont contribué au 1er séminaire ETISEO.Ces projets ont contribué au 1er séminaire ETISEO.
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Le projet ETISEO a été présenté lors de la Le projet ETISEO a été présenté lors de la conférenceconférence
VS-PETS 2005VS-PETS 2005
( ( 2nd Joint IEEE International Workshop on Visual 2nd Joint IEEE International Workshop on Visual Surveillance and Performance Evaluation of Tracking Surveillance and Performance Evaluation of Tracking
and Surveillance.and Surveillance. October 15-16 2005 Beijing, China October 15-16 2005 Beijing, China))
In In Conjonction with Conjonction with
ICCVICCV 2005 2005 ((10th IEEE International Conference on Computer 10th IEEE International Conference on Computer
Vision Vision ))
ETISEO / VS-PETSETISEO / VS-PETS
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Projets d’évaluationProjets d’évaluation
- PETS : Séries de workshops sur un jeu de - PETS : Séries de workshops sur un jeu de données spécifiques ( chaque année). données spécifiques ( chaque année).
- VITAL : Collection d’images réelles de - VITAL : Collection d’images réelles de vidéosurveillance (4 types de scénarios)vidéosurveillance (4 types de scénarios)
- CREDS, compétition organisée par la RATP, sur - CREDS, compétition organisée par la RATP, sur un jeu de données, des métriques et des un jeu de données, des métriques et des évènements propres.évènements propres.- CAVIAR : Vérité Terrain, Jeu de Données & - CAVIAR : Vérité Terrain, Jeu de Données & métriques, pour les applications « indoor » métriques, pour les applications « indoor » ( shopping areas). ( shopping areas).
(Fin Septembre 2005 ).(Fin Septembre 2005 ).- Terrascope : Corpus pour vidéosurveillance - Terrascope : Corpus pour vidéosurveillance multi-caméras en intérieur.multi-caméras en intérieur.
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Particularités d’ETISEOParticularités d’ETISEO
- Large - Large panel de métriquespanel de métriques proposé, couvrant les proposé, couvrant les
diverses tâches du traitement d’images,diverses tâches du traitement d’images,
- - GranularitéGranularité des métriques, pour une analyse des métriques, pour une analyse
détaillée des algorithmes,détaillée des algorithmes,
- Évaluation Évaluation centraliséecentralisée,,
- Contenu diversifiéContenu diversifié de la base de données, de la base de données,
- Deux cycles Deux cycles d’évaluation, organisés au sein du d’évaluation, organisés au sein du
projet :projet :
- Test du cycle ETISEO,- Test du cycle ETISEO,
- Adaptabilité du processus - Adaptabilité du processus
d’évaluation,d’évaluation, des data des data
sets, des métriques.sets, des métriques.
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
L’évaluation aujourd'huiL’évaluation aujourd'hui
- Disponibilité Disponibilité des données, de VTs, des des données, de VTs, des métriques, outils et métriques, outils et web-servicesweb-services,,
- utilisation propre des données par les utilisation propre des données par les participants (publications),participants (publications),
- en cas de compétition, seul le en cas de compétition, seul le rang rang semble semble important.important.- Les Les enseignements enseignements tirés de chaque évaluation tirés de chaque évaluation et des comparaisons d’algorithmes devraient être et des comparaisons d’algorithmes devraient être au cœur du processus.au cœur du processus.
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Maturation du Maturation du processusprocessus
- les travaux actuels exploitent les ressources les travaux actuels exploitent les ressources disponibles.disponibles.
- Maturation en cours : nouveaux projets, base Maturation en cours : nouveaux projets, base de données, métriques, compétitions…de données, métriques, compétitions…
Priorités : Priorités :
- la la structuration structuration du processus d’évaluation.du processus d’évaluation.
- la la capitalisation capitalisation des savoirs et ressources.des savoirs et ressources.
- la diversité des lieux, des applications et la la diversité des lieux, des applications et la variabilité des conditions concernant la variabilité des conditions concernant la vidéosurveillance impose de continuer les vidéosurveillance impose de continuer les efforts.efforts.
ETISEO au sein du programme Techno-Vision ETISEO au sein du programme Techno-Vision s’inscrit dans cette démarche.s’inscrit dans cette démarche.
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
Prochaine étapesProchaine étapes
Puis,Puis,
- consolidation,consolidation,
- standardisation,standardisation,
- structuration de plusieurs campagnes:structuration de plusieurs campagnes:
- ciblées vers des utilisations ( ex : quai ciblées vers des utilisations ( ex : quai métro),métro),
- ciblées vers des thématiques particulières ciblées vers des thématiques particulières
( caméras PTZ, Multi-caméras, caméra ( caméras PTZ, Multi-caméras, caméra mobiles ou caméras embarquées).mobiles ou caméras embarquées).
- Réussir les cycles ETISEORéussir les cycles ETISEO
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
CoordinateurCoordinateur
Mr. David CHER Mr. David CHER
www.silogic.frwww.silogic.fr
Contact Points
david.cher@ silogic.frdavid.cher@ silogic.fr
Tel: + 33 (0)5 34 61 93 57Tel: + 33 (0)5 34 61 93 57
leader Scientifiqueleader Scientifique
Mr. François Mr. François BREMONDBREMOND
www-sop.inria.fr /orionwww-sop.inria.fr /orion
francois.bremond@ sophia.inria.frfrancois.bremond@ sophia.inria.fr
Tel : + 33 (0)Tel : + 33 (0)4 92 38 76 594 92 38 76 59
ASTI’2005, Clermont-Ferrand, 24 Octobre 2005
wwwwww .etiseo.net.etiseo.net