ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Projet ETISEOProjet ETISEO

ÉvaluationÉvaluation

du du TTraitement et de l’Interprétation raitement et de l’Interprétation

de de SSéquences vidéquences vidEOEO..

David CHERDavid CHER

Coordinateur ETISEOCoordinateur ETISEO

SILOGIC S.A. , Toulouse, France SILOGIC S.A. , Toulouse, France

Journée Journée TechnoTechno--languelangue / / TechnoTechno--visionvision

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Configuration VidéoConfiguration Vidéo

LesLes configurations configurations choisies :choisies :

- Caméras fixes, focales fixes,- Caméras fixes, focales fixes,

- Caméras Couleur/ N&B et IR,- Caméras Couleur/ N&B et IR,

- Configurations Mono ou multi caméras,- Configurations Mono ou multi caméras,

- « Indoor » & « outdoor »,- « Indoor » & « outdoor »,

- Tracking de personnes et de véhicules,- Tracking de personnes et de véhicules,

- Reconnaissance d’évènements.- Reconnaissance d’évènements.

Le projet ETISEO fait partie du programme Le projet ETISEO fait partie du programme Techno-Techno-

Vision.Vision.

Objectif: l’évaluation des méthodes de traitement Objectif: l’évaluation des méthodes de traitement

d’images d’images

pour les applications de pour les applications de vidéo surveillancevidéo surveillance..

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Fournisseurs de donnéesFournisseurs de données

Différents Différents sitessites, « indoor » & , « indoor » & « outdoor »: « outdoor »:

- Couloir,- Couloir,

- métro,- métro,

- entrée de bâtiment,- entrée de bâtiment,

- parking avion,- parking avion,

- parking auto.- parking auto.

PlusieursPlusieurs fournisseurs de données fournisseurs de données offrant une large offrant une large diversitédiversité..

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

ETISEO /AéroportETISEO /Aéroport

Apron Apron

Toulouse-Blagnac Toulouse-Blagnac AéroportAéroport

FranceFrance

Caméras

vidéo

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

INRETS-LEOSTINRETS-LEOSTVilleneuve d’Ascq – Villeneuve d’Ascq – FranceFrance

ETISEO / INRETSETISEO / INRETS

Entrée Entrée bâtimentbâtiment

Parking Parking

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

ETISEO / CEAETISEO / CEA

ruerue

CouloirCouloir

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

ETISEO / RATPETISEO / RATP

métrométro

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Tâches évaluéesTâches évaluées

Les VTs & les métriques sont étudiées pour Les VTs & les métriques sont étudiées pour évaluer les diverses tâches d’une chaîne de évaluer les diverses tâches d’une chaîne de traitement d’images:traitement d’images:

11: : DétectionDétection,,

22: : LocalisationLocalisation,,

33: : ClassificationClassification,,

44: : TrackingTracking,,

55: Reconnaissance d’: Reconnaissance d’évènementsévènements..

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Critères ETISEOCritères ETISEO

- Nombre d’objets- Nombre d’objets détectés détectés dans chaque image, dans chaque image,

- Précision de localisation - Précision de localisation 2D2D (centroïde, bounding (centroïde, bounding box)box)

- - FragmentationFragmentation des objets (splitting & merging), des objets (splitting & merging),

- PersistancePersistance du Tracking avec occlusion partielle du Tracking avec occlusion partielle

(statique ou dynamique),(statique ou dynamique),

- Persistance des - Persistance des ID ID des objets,des objets,

- - ClassificationClassification et reconnaissance des objets, et reconnaissance des objets,

- Nombre d’- Nombre d’évènementsévènements reconnus (starting & reconnus (starting & ending time)ending time)

- Précision trajectoires - Précision trajectoires 3D3D..

Une variété de critères est proposée pour une Une variété de critères est proposée pour une analyse détaillée des résultats :analyse détaillée des résultats :

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Evaluation Evaluation internationaleinternationale

- - PETSPETS, , Visual Surveillance and Performance Visual Surveillance and Performance Evaluation of Tracking and Surveillance (Evaluation of Tracking and Surveillance ( University of University of Reading, UK)Reading, UK)

- - VITALVITAL, , Video Test Imagery Library Video Test Imagery Library (HOSDB, UK)(HOSDB, UK)

- - CAVIARCAVIAR, , Context Aware Vision using Image-based Context Aware Vision using Image-based Active Active RecognitionRecognition (projet e (projet européen ISTuropéen IST))

- - CREDSCREDS, , Call for Real-Time Event Detection Call for Real-Time Event Detection SolutionsSolutions

(RATP, FR)(RATP, FR)

- - VERAAEVERAAE (ARDA, US)(ARDA, US)

- - ARDAARDA--VACEVACE, , Video Analysis and Content Video Analysis and Content Extraction Extraction (NIST,US)(NIST,US)

- - TerrascopeTerrascope (Université du Kentuky, US). (Université du Kentuky, US).

ETISEO s’inscrit au sein des projets internationaux ETISEO s’inscrit au sein des projets internationaux pour l’évaluation de la vidéosurveillance: pour l’évaluation de la vidéosurveillance:

Ces projets ont contribué au 1er séminaire ETISEO.Ces projets ont contribué au 1er séminaire ETISEO.

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Le projet ETISEO a été présenté lors de la Le projet ETISEO a été présenté lors de la conférenceconférence

VS-PETS 2005VS-PETS 2005

( ( 2nd Joint IEEE International Workshop on Visual 2nd Joint IEEE International Workshop on Visual Surveillance and Performance Evaluation of Tracking Surveillance and Performance Evaluation of Tracking

and Surveillance.and Surveillance. October 15-16 2005 Beijing, China October 15-16 2005 Beijing, China))

In In Conjonction with Conjonction with

ICCVICCV 2005 2005 ((10th IEEE International Conference on Computer 10th IEEE International Conference on Computer

Vision Vision ))

ETISEO / VS-PETSETISEO / VS-PETS

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Projets d’évaluationProjets d’évaluation

- PETS : Séries de workshops sur un jeu de - PETS : Séries de workshops sur un jeu de données spécifiques ( chaque année). données spécifiques ( chaque année).

- VITAL : Collection d’images réelles de - VITAL : Collection d’images réelles de vidéosurveillance (4 types de scénarios)vidéosurveillance (4 types de scénarios)

- CREDS, compétition organisée par la RATP, sur - CREDS, compétition organisée par la RATP, sur un jeu de données, des métriques et des un jeu de données, des métriques et des évènements propres.évènements propres.- CAVIAR : Vérité Terrain, Jeu de Données & - CAVIAR : Vérité Terrain, Jeu de Données & métriques, pour les applications « indoor » métriques, pour les applications « indoor » ( shopping areas). ( shopping areas).

(Fin Septembre 2005 ).(Fin Septembre 2005 ).- Terrascope : Corpus pour vidéosurveillance - Terrascope : Corpus pour vidéosurveillance multi-caméras en intérieur.multi-caméras en intérieur.

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Particularités d’ETISEOParticularités d’ETISEO

- Large - Large panel de métriquespanel de métriques proposé, couvrant les proposé, couvrant les

diverses tâches du traitement d’images,diverses tâches du traitement d’images,

- - GranularitéGranularité des métriques, pour une analyse des métriques, pour une analyse

détaillée des algorithmes,détaillée des algorithmes,

- Évaluation Évaluation centraliséecentralisée,,

- Contenu diversifiéContenu diversifié de la base de données, de la base de données,

- Deux cycles Deux cycles d’évaluation, organisés au sein du d’évaluation, organisés au sein du

projet :projet :

- Test du cycle ETISEO,- Test du cycle ETISEO,

- Adaptabilité du processus - Adaptabilité du processus

d’évaluation,d’évaluation, des data des data

sets, des métriques.sets, des métriques.

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

L’évaluation aujourd'huiL’évaluation aujourd'hui

- Disponibilité Disponibilité des données, de VTs, des des données, de VTs, des métriques, outils et métriques, outils et web-servicesweb-services,,

- utilisation propre des données par les utilisation propre des données par les participants (publications),participants (publications),

- en cas de compétition, seul le en cas de compétition, seul le rang rang semble semble important.important.- Les Les enseignements enseignements tirés de chaque évaluation tirés de chaque évaluation et des comparaisons d’algorithmes devraient être et des comparaisons d’algorithmes devraient être au cœur du processus.au cœur du processus.

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Maturation du Maturation du processusprocessus

- les travaux actuels exploitent les ressources les travaux actuels exploitent les ressources disponibles.disponibles.

- Maturation en cours : nouveaux projets, base Maturation en cours : nouveaux projets, base de données, métriques, compétitions…de données, métriques, compétitions…

Priorités : Priorités :

- la la structuration structuration du processus d’évaluation.du processus d’évaluation.

- la la capitalisation capitalisation des savoirs et ressources.des savoirs et ressources.

- la diversité des lieux, des applications et la la diversité des lieux, des applications et la variabilité des conditions concernant la variabilité des conditions concernant la vidéosurveillance impose de continuer les vidéosurveillance impose de continuer les efforts.efforts.

ETISEO au sein du programme Techno-Vision ETISEO au sein du programme Techno-Vision s’inscrit dans cette démarche.s’inscrit dans cette démarche.

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

Prochaine étapesProchaine étapes

Puis,Puis,

- consolidation,consolidation,

- standardisation,standardisation,

- structuration de plusieurs campagnes:structuration de plusieurs campagnes:

- ciblées vers des utilisations ( ex : quai ciblées vers des utilisations ( ex : quai métro),métro),

- ciblées vers des thématiques particulières ciblées vers des thématiques particulières

( caméras PTZ, Multi-caméras, caméra ( caméras PTZ, Multi-caméras, caméra mobiles ou caméras embarquées).mobiles ou caméras embarquées).

- Réussir les cycles ETISEORéussir les cycles ETISEO

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

CoordinateurCoordinateur

Mr. David CHER Mr. David CHER

www.silogic.frwww.silogic.fr

Contact Points

david.cher@ silogic.frdavid.cher@ silogic.fr

Tel: + 33 (0)5 34 61 93 57Tel: + 33 (0)5 34 61 93 57

leader Scientifiqueleader Scientifique

Mr. François Mr. François BREMONDBREMOND

www-sop.inria.fr /orionwww-sop.inria.fr /orion

francois.bremond@ sophia.inria.frfrancois.bremond@ sophia.inria.fr

Tel : + 33 (0)Tel : + 33 (0)4 92 38 76 594 92 38 76 59

ASTI’2005, Clermont-Ferrand, 24 Octobre 2005

wwwwww .etiseo.net.etiseo.net