Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui...

39
1 Forum des Livings Labs Catalogue des bancs d’essai Deuxième édition V1

Transcript of Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui...

Page 1: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

1

Forum des Livings Labs

Catalogue des bancs d’essai

Deuxième édition

V1

Page 2: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

2

Sommaire

Sommaire ................................................................................................................... 2

C’est quoi un banc d’essai ? ....................................................................................... 4

Positionnement du banc d’essai ................................................................................. 5

Méthodologie adoptée ................................................................................................ 5

b<>com ....................................................................................................................... 7

EVALAB .................................................................................................................... 12

Centre de Ressources et d’Innovation Mobilité Handicap : CEREMH ...................... 17

Innov’Autonomie ....................................................................................................... 22

Living Lab ActiAgeing ............................................................................................... 28

Connectathon et Projectathon .................................................................................. 34

Conclusion ................................................................................................................ 39

Page 3: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

3

Alors que le concept de « living labs » est aujourd’hui largement partagé et devenu opérationnel, le concept de « banc d’essai » reste encore peu maîtrisé par les acteurs en santé et autonomie. L’un et l’autre de ces deux concepts sont souvent confondus alors qu’ils sont complémentaires et/ou indépendants.

Les livings labs ont tous intégrés le besoin d’évaluer les dispositifs ou outils en santé autonomie d’autant plus lorsqu’ils innovent dans le domaine clinique ou le bien être. Le besoin d’une évaluation rigoureuse notamment concernant de nouveaux produits ou systèmes embarquant des composants informatiques innovants s’est fait rapidement sentir du fait d’un contexte réglementaire et éthique qui se précise.

Face à ce nouveau défi, le concept de banc d’essai a été clarifié pour aider les livings labs qui ont mis en œuvre un banc d’essai, à structurer leur démarche par un questionnement systématique et ainsi améliorer leur perception et donc augmenter les opportunités de leur développement futur en leur permettant ainsi

• D’améliorer la qualité de leurs processus ;

• De préciser leurs offres de service ;

• D’accéder à de nouvelles opportunités de services.

Ce document est un catalogue qui regroupe les bancs d’essai qui ont répondu à un questionnaire qui leur ont été transmis au cours de l’année 2020. Il s’agit d’une seconde édition et fait suite au premier catalogue qui a été publié en 2016, à l’heure où le concept des bancs d’essai était émergent.

Depuis la première édition du catalogue, nous avons noté une réelle maturation de ce concept mettant en évidence que des offres de service de qualité professionnelle sont aujourd’hui disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d’essai.

Ce catalogue a aussi l’ambition de présenter les bancs d’essai à un plus large public et d’amplifier la connaissance de ce sujet au niveau national et européen : le but est d’augmenter les opportunités de collaboration entre living labs et bancs d’essai et de favoriser l’émergence de démarches communes qui pourront à terme servir de références.

Ce document est constitué de plusieurs chapitres et qui présente

• Dans le chapitre suivant, la définition du banc d’essai suivi d’une discussion dans le chapitre du positionnement du banc d’essai ;

• La méthodologie de collecte est rappelée dans le chapitre suivant ;

• La découverte des différents bancs d’essai, est réalisé sous forme d’une fiche synthétique standard pour chacun d’eux ;

• Une conclusion.

Page 4: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

4

C’est quoi un banc d’essai ?

Le banc d’essai est une plateforme de test en un environnement contrôlé qui permet de réaliser des tests fiables et rigoureux, que l’on peut rejouer, pouvant être automatisés, permettant de vérifier la conformité des prototypes, produits ou services aux exigences préalablement définies. Dans le cadre des Living Labs, le banc de test permet donc le passage de l’idée, de l’objet de recherche, de nouveaux produits de services vers le monde réel d’exploitation de ces objets. Le banc de test doit permettre l’objectivation des tests (prendre de la distance par rapport à l’objet étudié). Il permet de tester le comportement de l’objet étudié dans un environnement contrôlé au plus près de la réalité d’utilisation finale. L’objectivation est obtenue

dès lors que l’objet étudié en subissant des tests répétitifs, fournit les mêmes résultats conformes aux exigences attendues.

Il est constitué

• D’un processus de test formalisé décrit par la stratégie de test, les méthodologies de test (échantillonnage, choix des outils de test...), les plans de test, les jeux ou paramètres de test. Notons que les plans de test sont extraits et spécifiés à partir des exigences attendues ou des spécifications de l’objet étudié ;

• Des composants ou outils de test (capteurs, monitoring, simulateurs ou validateurs, outils de traitement ou de calcul, …) permettant la mesure objective ; des questionnaires (audit) peuvent aussi être utilisés permettant des analyses statistiques pour l’analyse des comportements à caractère qualitatif ;

• Des traces ou logs et leurs conservations ;

• Des rapports de validation fournissent les résultats de test pour l’objet étudié ;

• Des utilisateurs finaux en situation d’usage de l’objet étudié.

Le banc de test se doit d’être fiable. L’ensemble des éléments doit avoir subi des tests suffisamment exhaustifs prouvant cette fiabilité. Différentes stratégies peuvent être mises en place pour valider l’ensemble des composants du banc d’essai.

Le banc d’essai c’est donc

• Des compétences et une équipe d’évaluateurs dans le domaine dédié ;

• Un processus et des procédures ;

• Une plateforme technique rassemblant des outils d’évaluation qualitative ou quantitative.

Page 5: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

5

Positionnement du banc d’essai

Le banc d’essai vérifie que les idées et leur déclinaison en spécifications et objets, produits ou services conçus par les membres du living labs vont pouvoir devenir de véritables produits et services à valeur ajoutée et ceci après avoir été testé en environnement contrôlé au sein d’un banc d’essai.

Par analogie et en se reportant à une image plus concrète et plus prosaïque, cela pourrait être mis en parallèle avec le test pratiqué sur un tiroir d’une armoire que l’on ouvre des milliers de fois en utilisant un environnement contrôlé et « protocolé » ; ce dernier étant constitué d’outils de test, les uns pour réaliser automatiquement l’ouverture du tiroir et les autres pour mesurer les forces et tension exercés sur les différents composants du tiroir et l’usure des charnières. Un test équivalent peut être l’ouverture d’une porte d’armoire. Ce test va utiliser un protocole et des outils similaires. Ainsi on imagine très bien un banc d’essai focalisé uniquement sur les ouvertures de différents types de tiroirs, portes de différents modèles d’armoire, fenêtres, etc. Par ailleurs des concepteurs vont faire le design des armoires, tiroirs, fenêtres etc et il est facile de comprendre que ceux qui font la conception et les spécifications n’ont pas les mêmes compétences que ceux qui vont réaliser les tests. Ainsi, le banc d’essai va ainsi vérifier que le tiroir conçu pour telle armoire pourra s’ouvrir correctement dans le temps et validera ainsi son usage. Le même test pourra être utilisé pour un autre type de tiroir et armoire après reconfiguration des outils utilisés. Notons que ce même test pourra être réutilisé dans les chaînes de production pour vérifier la qualité de la production.

Ici le banc d’essai s’intéresse qu’à l’objet et de ses caractéristiques physiques. Par contre, il n’évalue pas l’ergonomie dans son usage au quotidien par des personnes ayant des caractéristiques différentes : homme ou femme, grand, petit, jeune ou vieux, avec un handicap, etc ou bien de ce que va contenir le tiroir. C’est pourquoi, il est important de bien identifier le périmètre de l’évaluation que l’on désire réaliser.

C’est donc ce qui est proposé ici : le banc d’essai ne s’occupe que de l’aspect de l’évaluation des produits et des services produits proposés sous forme de prototypes, d’objets ou procédés prêts à être mis sur le marché pour un périmètre bien identifié de quelque nature que ce soit.

Il peut aussi à terme apporter d’autres services comme le parangonnage ou des tests de qualité en chaine de production.

Méthodologie adoptée

Elle est constituée de cinq étapes :

1. Elaboration du questionnaire : le questionnaire de 2016 a été actualisé en tenant compte des progrès accomplis au cours de ces dernières années ; notamment l’accent a été mis sur la clarification des concepts utilisés et sur la présentation du questionnement sous forme de chapitres différenciés ;

Page 6: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

6

2. Appel à candidat auprès des membres du forum LLSA : un appel a été lancé à l’ensemble des membres du forum par envoi d’un courriel contenant l’invitation et le questionnaire. Un support est proposé aux bancs d’essai candidats afin de les aider dans la rédaction de leur fiche ;

3. Constitution d’un groupe de travail dont l’objectif est de valider le produit du groupe (questionnaire, rapport final) ;

4. Présentation des bancs d’essai candidats et réponse aux questions du candidat et des membres du groupe de travail : des réunions téléphoniques ont été organisés en moyenne tous les mois à l’exception de la période du confinement COVID-19 de mars à mai 2020 ;

5. Rapport final : une première version du rapport sera mise à disposition en août 2020 en vue d’une présentation au groupe de travail en septembre 2020 pour validation.

Les travaux ont démarré en septembre 2019 sur une durée d’un an.

La liste des bancs d’essai qui ont participé est présenté dans le tableau suivant :

Notons que les livings labs n’ont pas toujours clairement différencié le banc d’essai en tant que tel même si au sein de l’organisation, c’est quand même le cas (avec un département dédié aux tests). Dans ce cas, c’est le même nom qui est utilisé pour les deux.

# Nom du banc d’essai ou du Living Lab

Contact Organisation Site web

1 b<>com Guillaume Jegou : [email protected] /

b<>com https://b-com.com/fr/bcom-ngagement

2 EVALAB Jessica Schiro: [email protected]

EVALAB http://cic-it-lille.com

3 CEREMH (centre de ressources & Innovation Mobilité Handicap)

Benjamin Malafosse : [email protected]

CEREMH http://www.ceremh.org

4 AIA (Association Inniv’Autonomie)

Julien Lambert : [email protected]

http://www.innovautonomie.eu

5 ActivAgeing Dimitri VOILMY ; [email protected]

ActivAgeing http://www.activageing.fr

6 Connectathon et projectathon

Karima Bourquard :

[email protected]

IHE-Europe www.IHE-Europe.net

Page 7: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

7

b<>com

PARTIE I - GENERAL

Nom du banc d’essai

b<>com *Ngagement*

Organisation

Institut de Recherche Technologique B<>com

SIRET (siège) : 751 468 943 00038

https://b-com.com/fr/bcom-ngagement

Guillaume JÉGOU / [email protected] / 06 87 32 27 39

Responsable laboratoire Technologies Facteurs Humains

TECHNOPOLE BREST IROISE

25 RUE CLAUDE CHAPPE

29280 PLOUZANE

Objet d’étude

Dispositifs matériels, logiciels, services basés sur les technologies innovantes du numérique, systèmes collaboratifs homme-machine, nouveaux concepts d’assistances ou d’agents, dispositifs médicaux (existants ou envisagés), évaluation d’environnements simulés (salles, mannequins augmentés pour la formation, etc.).

Living Labs concernés

Possibilités de sous-traitance ou partenariats au niveau local, national ou international

En 2020, il n’y en a pas

Page 8: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

8

Viabilité

Viabilité de b<>com : Fondation de Coopération Scientifique « Institut de recherche technologique » dans la cadre du Programme des Investissements d’Avenir. 135 ETP.

Modèle économique de licencing ou transfert de solutions et de prestations de recherches.

Environnement légal

ISO 13485 (dispositifs médicaux), Directive européenne 2001/20/CE (protection des personnes), CNIL.

Page 9: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

9

PARTIE II – LE BANC D’ESSAI

Processus de test (aspect organisationnel)

Démarche : analyse multifactorielle de l’expérience utilisateur. Protocoles de tests adaptés en fonction de l’objet du test, de la maturité du produit et de l’accessibilité aux utilisateurs finaux.

Processus type :

- Préparation (analyse du besoin et des entrants, audit, rédaction du protocole d‘évaluation),

- Recrutement des testeurs (cible adaptée),

- Configurations des outils de simulation et de capture,

- Pré-tests et passations,

- Analyses, rapport et recommandations,

- Restitution, archivage et capitalisation.

Test Bed (Plateforme d’essai)

Données recueillies : données comportementales (psychophysiologie, parcours oculaires, interactions), performance et efficience dans la réalisation de tâches, données subjectives (échelles normalisées, ressenti, projection d’usage).

Utilisation d’outils (Nasa-TLX, SSSQ, ISA…) et de référentiels (ISO, heuristiques) normalisés, ainsi que d’outils propriétaires b<>com validés scientifiquement.

Référentiels d’évaluation

Il s’agit des référentiels utilisés pour auditer ou tester les produits ou services

Certification ISO 9001 et. Certification ISO 13485

Autres référentiels applicables : ISO 62366, ISO 9241, ISO 13407

Validation

Critères : objectifs (détection d’états, performance, efficience, comportement) et subjectifs (jugement d’état, satisfaction, projection dans l’usage…).

Livrables : protocoles, cahiers des charges de recrutements des testeurs, rapports d’évaluations, recommandations opérationnelles.

Capitalisations : abaques et amélioration continue.

Page 10: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

10

Maintenance de la méthode

Transferts méthodologiques et technologiques des projets de recherche du laboratoire Technologies Facteurs Humains. Investissements réguliers sur les matériels les plus récents (capteurs, dispositifs d’immersions…). Formation du personnel.

Propriétés Intellectuelles

Neuf licences logicielles développées :

BeAware (comportements d’agents virtuels pour simulations)

b-emotion (recueil de données physiologiques synchronisées avec les données subjectives d’un utilisateur)

GLUE (enregistrement et base de données de traces comportementales)

ISTR (hub de synchronisation et gestion multi-capteurs)

PresenceVR (interactions collaboratives en réalité virtuelle)

PµLSE (estimation physiologique à partir d’un accélérateur)

VAE (environnement multi-utilisateur en réalité virtuelle)

VirtualTouch (représentation d’un objet tangible dans un environnement collaboratif virtuel)

VUXIA (plateforme immersive de conception et évaluation utilisateurs)

Evolutivité

Participation à la communauté du Forum LLSA.

Contribution à plusieurs forums professionnels internationaux (VR Industry Forum, ETSI, DVB-VR…).

Participation aux communautés AFRV, ErgoIHM, SELF, WACAI.

Publications scientifiques régulières (conférences internationales, revues à comité de lecture : Mesuring Behaviour, Human Computer Interaction, SRLF, Neuroergonomics Conference, Applied Ergonomics and Human Factors, etc.).

Page 11: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

11

PARTIE III – OFFRE DE SERVICE

b<>com *Ngagement*

Une nouvelle génération de design d'interaction pour optimiser la conception de vos systèmes.

Pour réduire coûts et délais, explorer de nouveaux concepts d’interaction et limiter le risque lié à l’utilisation des innovations, les fabricants recherchent de nouvelles solutions centrées sur l’utilisateur.

b<>com *Ngagement* révolutionne la conception des interactions dans les systèmes complexes en combinant et en intégrant des outils de conception agile, des technologies immersives naturelles et une analyse comportementale par l’IA.

b<>com *Ngagement* aide les experts en facteurs humains, les concepteurs de systèmes complexes et les innovateurs à évaluer leurs concepts d’interaction, à simuler une collaboration homme-machine, à modifier des scénarios de tests à la volée et à analyser les comportements et les états cognitifs des utilisateurs (tels que la charge de travail ou le stress), dès les premières étapes de la conception.

Fonctionnalités clés :

• Analyse d'états cognitifs en temps réel

• Visualisation des données avec biocapteur intégré à un casque HMD (visiocasque)

• Obtention de données synchronisées cognitives, comportementales et subjectives des utilisateurs servant à l'apprentissage pour les prédictions par machine learning

• Interaction en réalité tangible et naturelle

• Modification à la volée de scénarios, IHM ou interactions

• Reconnaissance automatique d'actions basée sur les interactions utilisateurs

• Conception centrée utilisateur agile : créer, simuler et tester dans le même processus

Bénéfices

• Tests en avance de phase

• Optimisation de la conception du système

• Réduction des risques/délais de mise sur le marché

• Obtention d’une évaluation objective et pertinente

• Collecte de données comportementales pour l’IA interactive

https://b-com.com/fr/bcom-ngagement

Page 12: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

12

EVALAB

PARTIE I - GENERAL

Nom du banc d’essai

EVALAB

Organisation

Centre d’Investigation Clinique – Innovations Technologiques 1403 CHU de Lille, Institut Cœur Poumon, Bd du Professeur jules Leclercq, 59037 Lille N° SIRET : 26590671900017 Contact: Jessica SCHIRO ; [email protected] ; +33 320 444 702 http://cic-it-lille.com

Objet d’étude

Tous les dispositifs médicaux, quel que soit leur contexte d’usage, dans le cadre d’une évaluation sommative d’aptitude à l’utilisation (ISO 2366-1).

Living Labs concernés

EVALAB

Viabilité

Banc d’essai adossé au LL EVALAB, i.e. les demandes spécifiques d’évaluation sommatives d’aptitude à l’utilisation adressées à EVALAB sont assurées dans le cadre du banc d’essai. La gouvernance est la gouvernance d’EVALAB. Jessica Schiro, coordinatrice projets du LL EVALAB est responsable du banc d’essai. Trois autres ergonomes l’assistent dans la prise en charge des évaluations. Le banc d’essai se trouve dans l’espace investigation du CIC (Centre d’Investigation Clinique) et dispose ainsi d’une autorisation de lieu. Par ailleurs une collaboration avec la plateforme PRESAGE permet également d’accéder à des environnements de simulation haute et basse fidélité dans le domaine médical. Les locaux sont entretenus et pris en charge par le CHU de Lille. Les équipements et les RH financées par le LL EVALAB et les évaluations assurées dans le cadre du banc d’essai.

Environnement légal

Page 13: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

13

Le banc d’essai est sous la responsabilité juridique du CHU de Lille.

PARTIE II – LE BANC D’ESSAI

Processus de test (aspect organisationnel)

Le LL EVALAB est certifié ISO 9001, l’ensemble des procédures décrit est donc en conformité avec ce référentiel. La méthodologie utilisée dans le cadre du banc d’essai est conforme aux normes d’aptitude à l’utilisation IEC 62366-1, IEC 62366-2, 60601-1-6, ANSI/AAMI/HE74 et HE75 ainsi qu’aux normes classiques relatives à l’utilisabilité des systèmes interactifs de la série ISO 9241 (ISO 9241-210 notamment). Par ailleurs, les évaluations se font dans le respect des normes et réglementations en vigueur (RIPH/Loi Jardé, RGPD, Loi données personnelles). Etape 1 Identifier le processus d’ingénierie d’aptitude à l’utilisation applicable au dispositif médical (DM) concerné. Vérifier, avec le fabricant, que les prérequis pour l’évaluation sommative d’aptitude à l’utilisation sont respectés et correctement documentés : profils des utilisateurs prévus, utilisation prévue et contexte d’usage, liste des erreurs d’utilisation possibles. Etape 2 (En lien avec le plan d’EVALUATION d’aptitude à l’utilisation) Caractériser le processus d’évaluation sommative de l’interface utilisateur (e.g. scenarios, choix de l’environnement de simulation, critères d’évaluation). Etape 3 Vérifier la compliance de l’approche choisie pour l’évaluation sommative d’utilisabilité avec les obligations légales, réglementaires, médicales / cliniques et administratives applicables au DM à évaluer, tant au niveau national (e.g. RGPD, RIPH, Données personnelles) qu’Européen (e.g. EU MDD, MDR) ou extra Européen (e.g. US FDA) Etape 4 Réaliser les essais (tests) sommatifs d’aptitude à l’utilisation incluant : échantillonnage et recrutement des participants (éventuellement en collaboration avec le fabricant), déroulement des sessions de tests, collecte des données qualitatives (ex. Vidéos et observations) et quantitatives (ex. nombre d’erreurs / succès), analyse des données. Il s’agit avant tout de données comportementales et de données subjectives (verbalisations des participants). Etape 5 Rédiger le rapport d’aptitude à l’utilisation à intégrer dans le dossier d’ingénierie d’aptitude à l’utilisation. Si applicable, identifier les risques résiduels d’erreurs d’utilisation qui devront être intégrés dans le dossier de management des risques. Présenter et discuter le rapport avec le fabricant pour éclairer les choix concernant la validation du produit.

Les équipements et locaux utilisés sont maintenus par le CHU de Lille et le LL EVALAB. Il n’y a pas de matériel critique nécessitant un calibrage particulier. Les ressources humaines assurant les évaluations du banc d’essai sont formées aux bonnes pratiques cliniques, aux réglementations en vigueur et maintiennent à jour ces compétences par des formations régulières.

Page 14: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

14

Test Bed (Plateforme d’essai)

Les participants sont recrutés sur base de critères d’inclusion définis par les profils utilisateurs en amont, futurs utilisateurs du dispositif médical sous-évaluation. Les procédures d’évaluation sont conformes à la réglementation (européenne et américaine) relative à l’aptitude à l’utilisation des dispositifs médicaux et aux bonnes pratiques du domaine de l’ergonomie. Par ailleurs, une des thématiques de recherche du LL EVALAB porte justement sur les méthodologies d’évaluation de l’utilisabilité des dispositifs médicaux, avec par exemple un projet ANR en cours sur la question et le dépôt d’un projet européen.

Exigences évaluées par le banc d’essai : standards, normes, bonnes pratiques

La méthodologie utilisée dans le cadre du banc d’essai est conforme aux normes d’aptitude à l’utilisation IEC 62366-1, IEC 62366-2, 60601-1-6, ANSI/AAMI/HE74 et HE75 ainsi qu’aux normes classiques relatives à l’utilisabilité des systèmes interactifs de la série ISO 9241 (ISO 9241-210 notamment).

Par ailleurs, les évaluations se font dans le respect des normes et réglementations en vigueur (RIPH/Loi Jardé, RGPD, Loi données personnelles).

Validation

En interne, et en conformité avec notre démarche qualité, tous les protocoles de tests sont relus et validés par un second ergonome.

Par ailleurs, une des thématiques de recherche du LL EVALAB porte justement sur les méthodologies d’évaluation de l’utilisabilité des dispositifs médicaux, avec par exemple un projet ANR en cours sur la question et le dépôt d’un projet européen. Certaines publications de l’équipe portent sur la question.

Maintenance de la méthode

Cf paragraphes précédents : certification ISO 9001, thématique de recherche de l’équipe qui questionne régulièrement les méthodes mises en œuvre.

Propriétés Intellectuelles

N/A

Evolutivité

Le banc d’essai est capable de s’adapter à la demande (différents contextes d’usage, profils utilisateurs, ….). Il coordonne des études multicentriques nationales, et de plus en plus internationales.

Page 15: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

15

PARTIE III – OFFRE DE SERVICE

Certifié en Janvier 2008 par l'INSERM et le Ministère de la Santé (DGOS), le Centre d'Investigation Clinique pour l'Innovation Technologique 1403 - CIC-IT- est une unité fonctionnelle du CHU de Lille et de l'Université Droit et Santé Lille. Au sein du réseau national des CIC-IT, il a une expertise particulière sur les domaines e-santé et biocapteurs et sur les questions d'usage des technologies innovantes en santé quelque soit leur domaine. Le CIC-IT 1403 vient en support des chercheurs, des industriels et fabricants, des usagers, des responsables de systèmes et organisations de santé, lorsqu'ils sont confrontés aux enjeux de conception, développement, implémentation et suivi des technologies innovantes, dans leurs dimensions techniques, ergonomique et clinique. Fondé en 2001, Evalab est le Living Lab du CIC-IT de Lille. Ce LL est spécialisé dans l'Ergonomie (ou Facteurs Humains) et l'Ingénierie d'Utilisabilité des technologies de santé et dispositifs médicaux. Evalab fut le premier laboratoire Européen d'utilisabilité dédié aux technologies de l'information en santé. Il a pour but l'amélioration de la qualité des services et produits générés par les nouvelles technologies, qu'ils soient utilisés par les professionnels de santé, les patients ou leur entourage (famille, aidants). Depuis plus de 19 ans, Evalab a participé à de nombreux projets dans le domaine des nouvelles technologies et solutions informatiques ou télématiques en santé : outils de Télémédecine, Prescription Connectée, Dossier Médical Informatisé, Système d'Information Clinique pour l'anesthésie, l'urgence ou la radiologie, etc. Il est aussi impliqué dans des initiatives de recherche nationale visant à concevoir des outils ou applications mobiles pour soutenir la prise en charge des séniors et les aider à rester autonomes à domicile aussi longtemps que possible au sein de leur réseau social (famille, proches, voisins, aidants professionnels). Il collabore avec des industriels développant des dispositifs médicaux innovants tels que des applications pour patients diabétiques, des systèmes d'auto-injection, des T-shirts connectés, etc. Les activités de recherche du CIC-IT / Evalab portent essentiellement sur : (1) les questions méthodologiques soulevées par l'application de l'ingénierie d'utilisabilité aux dispositifs médicaux ; (2) l'établissement de principes d'utilisabilité scientifiquement établis pour des catégories spécifiques de technologies médicales; (3) la modélisation des activités cognitives individuelles et collectives des usagers de technologies de santé. Le CIC-IT / Evalab héberge un Banc d'Essai dédié à l’évaluation sommative d'Aptitude à l'Utilisation de Dispositifs Médicaux (DM) innovants ou remaniés qui demandent le marquage CE. Le banc d'essai couvre l'évaluation sommative d'aptitude à l'utilisation de la version finale du DM, qui doit être marquée CE puis commercialisée. L'objectif est l'obtention de données objectives manifestant que le DM peut être utilisé en toute sécurité car il ne comporte pas de risque inacceptable et raisonnablement prévisible d'erreurs d'utilisation liées à des défauts d'utilisabilité de l'interface utilisateur. Cette évaluation quantitative et qualitative valide la qualité ergonomique de la version finale du système / produit / service avant sa mise en service dans l'environnement réel (clinique) et son utilisation par tous les usagers prévus.

Codesign of health technologies - Context of use analysis & needs identification - Participative design / User driven design - Functional specifications, mock-ups - Rapid prototyping

Multidimensional evaluation of health technologies (in compliance with regulations) - Usablility formative evaluation

Page 16: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

16

- Usability sommative evaluation - Usability regulatory support - Integration with technical & clinical evaluations

Analysis of health technologies appropriation/adoption in real life environments

Page 17: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

17

Centre de Ressources et d’Innovation Mobilité Handicap : CEREMH

PARTIE I - GENERAL

Organisation

CEREMH & UVSQ

Le banc de test est en co-gestion entre le Centre de ressource et d’innovation Mobilité Handicap et l’Université de Versailles Saint Quentin en Yvelines (UVSQ).

Centre de Ressource et d’innovation Mobilité Handicap – CEREMH 10 12 Avenue de l’Europe, 78140 Vélizy – France Siret : 503685604 Mail : [email protected] Tel : 01 39 25 49 87 Contact : Benjamin Malafosse Tel : 01 39 25 49 87 Mail : [email protected]

Université de Versailles Saint Quentin en Yvelines – UVSQ 55 Avenue de Paris, 78000 Versailles Tel : 01 39 25 78 00 Contact : Eric Monacelli Mail : [email protected] Site web : http://ceremh.org

Objet d’étude

Le banc d’essai a pour objet d’évaluer des aides techniques de mobilité. L’évaluation peut se faire dans un cadre clinique avec inclusion de patients.

Suivant l’objet de l’étude et les attentes du client, différents outils sont disponibles ;

- Wheelchair Skills test (parcours utilisateurs pour fauteuil roulant et scooter), - Échelles multiples (Effort, satisfaction, qualité de vie, …) - Plateforme de force, - Système de capture de mouvement 3D, - Système de réalité virtuelle,

Living Labs concernés

Le banc d’essai est à disposition du Living Lab CEREMH. Il peut être mis à disposition d’un autre Living Lab sous conditions contractuelles et assurances prises.

Page 18: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

18

Viabilité

Le banc d’essai est mis à disposition sous forme de contractualisation avec le CEREMH et/ou le LISV suivant l’objet et le domaine d’application des essais qui y sont réalisés.

Il est à ce jour principalement utilisé dans le cadre d’essais cliniques ou de recherche mené par l’UVSQ et le CEREMH.

Le CEREMH est une association loi 1901.

Environnement légal

Le banc est à disposition dans une zone pouvant accueillir du public. L’espace est labélisé lieu de recherche lui permettant de réaliser des études cliniques.

Page 19: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

19

PARTIE II – LE BANC D’ESSAI

Processus de test (aspect organisationnel)

Un protocole de test est établi suivant le type de dispositif et les critères d’évaluation souhaités. Nous respectons la méthodologie définie par les concepteurs des outils de mesure utilisé.

Dans le cas où la recherche porte sur des données médicales impliquant des patients, nous accompagnons pour les démarches auprès des comité d’éthique (CPP) et mettons en place la recherche en respectant les bonnes pratiques cliniques définies par l’ANSM et en respectant la loi Jardé.

Détail de la démarche :

- Constitution de l’équipe projet (centre évaluateur, médecin coordonnateur, promoteur, …) - Élaboration du protocole de test (Hypothèses, Critères et outil d’évaluation, critères d’inclusion et de non-inclusion, Statistiques, règlementaire, …) - Edition des documents support (Cahier d’observation, lettre d’information, consentement). Le type de document à produire est variable d’un type d’étude un autre. - Dépôt auprès du comité éthique (plateforme CNRIPH) et ANSM suivant la catégorie d’aide technique - Inclusion des patients avec signature des consentements - Passation des tests - Traitement des résultats - Rédaction du rapport et clôture de l’étude

Test Bed (Plateforme d’essai)

La TestBed comprend un espace d’évolution d’environ 150m2, dans lequel il est possible de récréer des espaces de vie, ou encore les modules définis pour le WST (Wheelchair Skill Test).

Nous travaillons en équipe projet pour définir au mieux les critères d’évaluation à évaluer en accord avec les objectifs à court et long terme du porteur.

Ce travail est initié par une veille bibliographique en amont, un travail collaboratif avec le porteur du projet auquel nous soumettons notre schéma d’étude. Une fois le schéma d’étude approuvé par le porteur nous établissons le protocole final (méthode + statistiques) et le soumettons pour validation à un comité scientifique indépendant. C’est à ce même comité que sera soumis le rapport final de l’étude pour validation.

Le CEREMH a voulu se doter d’un comité scientifique pour donner encore plus de poids et aux études que nous menons. Ce comité a d’autant plus d’importance quand l’étude menée n’a pas vocation à être publié mais juste être utilisé à des fins de R&D ou de défendre le produit auprès d’organismes tiers.

Page 20: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

20

Référentiels d’évaluation

Protocoles propriétaires

Validation

Dans le cadre de nos protocoles nous utilisons majoritairement de outils validés sur le critère principal. Si l’outil doit être adapté au produit ce sera alors en tant que critère secondaire d’évaluation.

Nous avons souhaité mettre en place un comité scientifique indépendant pour offrir un niveau supplémentaire dans la validation de nos études.

Maintenance de la méthode

La méthode de travail et les outils utilisés sont maintenus au travers des veilles bibliographiques réalisées avant chaque mise en place d’une évaluation. Elles nous permettent d’ajuster nos méthodes, d’affiner les seuils d’évaluation en fonction des populations et critères.

En fonction des évaluations nous mettons en place des phases de formations de notre équipe à ces ajustements.

Propriétés Intellectuelles

N/A

Evolutivité

L’évolutivité se fait à l’opportunité des demandes. Le test Bed a une capacité d’adaptation pour répondre aux demandes spécifiques des porteurs de projets et du système à évaluer dans le contexte souhaité.

Page 21: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

21

PARTIE III – OFFRE DE SERVICE

Proposition de valeur

- Bénéficier des avantages d’un living-Lab (réseau d’expert) pour répondre à une problématique globale ; faire une étude clinique demande des compétences variées (Administrative, Méthodologique, médicale, Statistiques, …)

- Une offre clé en main : nous pouvons gérer toute la démarche de l’idée du test jusqu’à la livraison des résultats. Le Living lab peut également accompagner l’industriel sur des démarches administratives notamment auprès des organismes de santé.

http://www.ceremh.org : Services/Offres

Page 22: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

22

Innov’Autonomie

PARTIE I - GENERAL

Nom du banc d’essai

Innov' Autonomie

Organisation

Association Innov' Autonomie

92 rue du sergent Blandan, 54000 Nancy

SIRET : 84241048200017

Contact : [email protected]

Site web : http://www.innovautonomie.eu

Objet d’étude

Dispositifs et/ou services innovants d'aide ou de maintien à l'autonomie des personnes fragiles (âgées, handicapées ou en perte ponctuelle d'autonomie).

Living Labs concernés

Innov' Autonomie

Viabilité

Innov' Autonomie est une association pérenne financée en partie par les cotisations de ses membres et par de la prestation pour compte de tiers.

Les membres de l'association sont :

ARS Grand Est, CARSAT Nord Est, OHS, CAPS, HADAN, ACORIS MUTUELLES, MUTUALITE FRANCAISE GRAND EST, METROPOLE, CHRU, ADMR et DEPARTEMENT 54.

Les équipes de Innov’ Autonomie se composent d’un personnel permanent à orientation technique, gestion de projets, senior « business developer et marketing » qui interagissent avec l’écosystème et les membres de l’association.

Page 23: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

23

Innov’ Autonomie est également en mesure de mobiliser des compétences en Sciences Humaines et Sociales (sociologues et psychologues), ou encore des chercheurs de différents domaines (réseau, smart BAN, capteurs, … ).

La diversité des membres de Innov’ Autonomie lui permet de pouvoir mettre en œuvre et mobiliser des ressources conséquentes adaptées aux besoins :

• Des professionnels spécialisés (médecins, gériatres, infirmières, ergothérapeutes, kinésithérapeutes, …), des aidants bénévoles et professionnels et d'associations de patients de tout profil concerné implantées en milieu rural ou urbain.

• Des établissements de santé et des structures sanitaires et sociales publics et privés de la région Grand Est.

• Des personnes âgées et/ou handicapées, à leur domicile ou en établissement pouvant intégrer un panel de testeurs pour la validation de dispositifs techniques ou services ou systèmes.

Innov' Autonomie participe également à de nombreux projets collaboratifs nationales ou européens. (Participation également au projet « Les bobos à la ferme » porté par le forum et faisant intervenir plusieurs LLSA).

Environnement légal

Innov' Autonomie est une Association loi 1901.

Page 24: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

24

PARTIE II – LE BANC D’ESSAI

Processus de test (aspect organisationnel)

Innov' Autonomie fait appel pour la collecte et le traitement des données a des professionnels (Master 2 Psycho, Master 2 Biologie intégrative) qui déploient les standards.

Méthode utilisée pour traitement des données :

Trognon et al., 2020. Viability of machine-learning to solve psychometric problems. Psychological Method (in review).

- Types de données recueillies : Données comportementales, données subjectives et données psychométriques.

Concernant les aspects éthiques dans la mise en œuvre : Création de consentements, dossier au comité de protection des personnes avec notification à l'ANSM et CNIL avec prise d'une assurance (Biomedic insure).

Conditions de maintien opérationnel :

Mise à jour annuelles des techniques (analyses discursives et analyses statistiques) de part un temps d'enseignement à la fac de psychologie de Nancy par le prestataire (96hTD).

Participation régulière à des colloques pour mettre à jour les techniques.

Test Bed (Plateforme d’essai)

On décrira ici l’environnement d’exécution mis en œuvre :

- Comment le recrutement des objets d’étude est réalisé (s’agit il d’un échantillonnage au hasard, sur la base de critère de sélection, objet unique identifié, …) ;

Page 25: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

25

Pré screening ou l'on cherche tous les individus qui peuvent être intéressés (critère de sélection très large avec un échantillonnage au hasard), puis focus groups et échantillonnage en grappe pour estimer des utilisateurs idéaux et des conditions d'utilisations idéales (cas d'usages, scénarios, etc). On cherche ensuite un plus grand échantillon puis réalisation du test et analyses des interactions entre hommes et dispositifs.

La dernière étape comprend la réalisation d'entretiens individuels, la transformation des données quantitatives en données qualitatives puis le traitements des données.

Outils et méthodes d’évaluation :

Outils qualitatifs : focus group et entretiens

Outils quantitatifs : méthodologies bio statistique analyse factorielle (ANOVA) et tests post-hoc, procédures régressives et techniques prédictives de machine learning.

Pendant les tests : focus groups réguliers ou à mi-parcours.

Finalisation des tests : questionnaires auto reportés analysés par la méthode des KPI et Bio statistiques. Le questionnaire auto reporté permettra les ajustements finaux pour l’établissement de recommandations et la création du livrable final.

Exigences évaluées par le banc d’essai : standards, normes, bonnes pratiques

Standard scientifique appliqué de sorte à ce que les résultats soient publiables.

Innov' Autonomie favorise la mise en place des tests d'usages directement dans les lieux de vie des personnes pour ne pas bousculer leurs habitudes.

Validation

Publications scientifiques et ouvrages scientifiques publié par des éditeurs de revus.

Maintenance de la méthode

Veille de la littérature scientifique et des ouvrages. Développements de méthodes originales (non utilisées et déployées avant publication scientifiques).

Propriétés Intellectuelles

N/A

Page 26: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

26

Evolutivité

Les membres de Innov’ Autonomie se situent dans le Grand Est, le souhait de l'association et de fédérer un maximum d'acteurs de l'écosystème de l'autonomie dans la région. Ces nouveaux acteurs et membres apportent leur environnement ainsi que de nouveaux usagers professionnels et patients.

Page 27: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

27

PARTIE III – OFFRE DE SERVICE

Page 28: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

28

Living Lab ActiAgeing

PARTIE I - GENERAL

Nom du banc d’essai

Living Lab ActiAgeing

Organisation

Université de technologie de Troyes

12 rue Marie CURIE 10000 TROYES

N° SIRET : 19101060200032

Dimitri VOILMY ; [email protected] ; +33 351 591 145

Site web : http://www.activageing.fr

Objet d’étude

Les innovations techniques et sociales au service de la perte d’autonomie des seniors ;

Étude de la fragilité physique et sociale :

-Co-conception des objets connectés en e-santé ;

-Etude du développement de la maison connectée ;

-Expertise européenne en robotique mobile sociale.

Living Labs concernés

Living Lab ActivAgeing à Troyes et à la Résidence Clamart du CCAS de Châlons-en-Champagne

Viabilité

Le banc d’essai, en tant que plateforme scientifique et technologique, est intégrée au Living Lab ActivAgeing. La gestion et l’organisation de la plateforme recherche sont attachées à l’Université de technologie de Troyes. Le banc d’essai bénéficie des services de l’UTT dans son quotidien avec les prestations privées avec la Direction des Relations Entreprises et de Direction de la Recherche pour le montage des appels à projet.

Page 29: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

29

La gouvernance du LL repose sur un comité de pilotage commun avec la Chaire SilverTech. Dimitri Voilmy est responsable du living Lab ActivAgeing, une sociologue, une ingénieure, deux stagiaires collaborent pour les évaluations. - Une articulation pluridisciplinaire : SHS – ergonomes, psychologues, sociologues STIC – informaticiens, biomécanicien, électroniciens : permet de concevoir des prototypes pilotes de solutions d'accompagnement pour l'autonomie des personnes âgées.

Modèle économique avec une diversité/pérennité des sources de financement : Contrats de recherches publiques, contrats de recherches privées, fondation UTT. La plateforme recherche a un modèle économique basé sur le partenariat public-privé avec les partenaires institutionnels (Conseil Départemental, Ministère de l'enseignement supérieur et de la recherche, ARS, etc.) et les entreprises (Crédit Agricole, Plurial Novilia, Berger Levrault, etc).

Des conventions de partenariat avec les établissements de santé (CHU, Hôpital, CRRF COS) permettent l’accès à des environnements de travail réel pour les tests de prototypes et de solutions technologiques. La convention avec le CCAS de Châlons-en-Champagne permet de disposer d’un second site d’évaluation en contexte réel d’habitation à la Résidence Autonomie Clamart avec un sol communicant haute définition.

Environnement légal

Le banc d’essai est sous responsabilité juridique de l’Université de technologie de Troyes.

Page 30: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

30

PARTIE II – LE BANC D’ESSAI

Processus de test (aspect organisationnel)

Déploiement d’une méthodologie de conception participative pour impliquer l'usager à chaque étape de conception et évaluer la solution dans toutes ses dimensions. Sa plateforme d’expérimentation permettant d'assurer toutes les étapes d'un cycle de conception participative présente la spécificité d'intégrer un dispositif d'analyse vidéo temps réel avec un système d’oculométrie ambulatoire couplé avec un système d’analyse tridimensionnelle du mouvement.

- Une Recherche académique en co-conception de capteurs d’automesure innovants pour le repérage de la fragilité physique.

- Capacité à gérer et exploiter des data (cohortes, observation, évaluation) avec la captation, l’analyse et la coordination de données de recherche et d’expérimentation pour projets de partenariat public-privé.

Une organisation des échanges et des rencontres dans le laboratoire d’idées qui permettent de comprendre i) la façon dont les situations d'autonomie des personnes âgées sont vécues et ii) la manière de s'approprier une technologie de l'information et de la communication dans son quotidien : comprendre et identifier les freins aux usages d’une solution technologique ou d’un service innovant.

Les ateliers de créativité du Laboratoire d’Idées : méthodes et des actions pour la création d'idées, avec les tests des meilleures idées. Les méthodes utilisées sont des questionnaires, des entretiens individuels, des groupes de consommateurs, des ateliers, des observations au domicile et des tests d’évaluation.

Préciser le positionnement du banc d’essai dans le LL et les processus de test mis en œuvre

Bien différencier ce qui est de l’ordre du LL du banc d’essai.

Test Bed (Plateforme d’essai)

Types de données recueillies : données comportementales, données psychophysiologiques, données subjectives, données des capteurs optoélectronique, radio, radar, laser, etc ; et autres données non précisées

Vérifier qu’il s’agit bien de ces données qui sont collectées

Le LL2A dispose d’une plateforme technologique avec :

- une salle d’analyse du mouvement (150m2, acquisition cinématique, pistes de marche électroniques modulables, électromyographie) ;

- un laboratoire d’idées avec mur de télécommunication et écran, tables connectées ;

- une salle d’attente ;

- une salle de d’explication des tests, signatures des consentement et débriefing ;

- une régie technique sécurisée ;

Page 31: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

31

- 2 appartements d’expérimentation connectés (UTT et intégré en résidence autonomie) comprenant : salon, cuisine, salle de bain, chambre à couche ;

- ainsi qu’un dispositif d'analyse vidéo et d’oculométrie ambulatoire.

Quels sont les méthodes de test : plan de test/protocoles d’évaluation, échantillonnage, autres dispositifs d’évaluation, critères d’évaluation ;

Les méthodes de tests reposent sur le critère d’accessibilité lié au concept « universal design » (Iwarsson et Stahl, 2003)

Le plan de test :

Exigences évaluées par le banc d’essai : standards, normes, bonnes pratiques

Mise en place des évaluations avec les CHU en tant qu’investigateurs clinique avec co-rédaction des protocoles de recherche soumis à l’avis rendu par le Comité de Protection des Personnes (CPP)

Préciser comment

Les évaluations se font dans le respect des normes et réglementations en vigueur (RIPH/Loi Jardé, RGPD, CNIL).

Autres référentiels, standards ?

Validation

Page 32: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

32

Comment sont validés les outils, protocoles et méthodes de test (pilote, membre d’un comité, etc) ?

Chercheurs publiants dans les revues internationales et nationales à comité de lecture ; Porteur ou partenaire de projet de recherche à financement public Par exemple à partir de jeux de test de référence, revue d’experts et publications scientifiques

Maintenance de la méthode

Mise en place d’un suivi de satisfaction des usagers

Veille permanente sur les dispositifs de télésurveillance et de télémédecine

Maintien des compétences par des formations continues CNRS et écoles d’été scientifiques

Participations et organisations de conférences nationales et internationales ; Relecteurs de publications scientifiques et expertise projets ANR

Direction scientifique de thèse de doctorat dans le champ du vieillissement et de la perte d’autonomie

Maintien des compétences ?

Propriétés Intellectuelles

Dépôts de brevet de conception d’objets connectés en eSanté avec la cellule DVPI de l’UTT : balance connectée avec mesure de la qualité de l’équilibre, balle de mesure de force de préhension palmaire

Evolutivité

Le banc d’essai basé l’évaluation de solution dans le champ de l’ambulatoire et du domicile évolue vers la partie santé hospitalière.

Page 33: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

33

PARTIE III – OFFRE DE SERVICE

Plateforme de conception participative pour les solutions Esanté d’accompagnement à l’autonomie des séniors

Espace d’innovation faisant partie des plateformes scientifiques et technologiques de l’Institut Charles Delaunay de l’UTT pour le support à la recherche et aux activités de valorisation

Proposition de valeur, en lien avec les politiques publiques nationales, régionales, locales : Diffusion en Région Grand Est sur deux sites pour des actions innovantes en santé-autonomie-bien-vieillir de la personne âgée à domicile

o Mesure par capteurs de données physiologiques,

o Dispositif de suivi oculaire ambulatoire et suivi de l'activité,

o Mesure et analyse 3D du mouvement,

o Acquisition multi-protocoles domotique et objets connectés,

o Appartement laboratoire avec capteurs

o Sol communicant haut définition en résidence autonomie

Site internet : https://recherche.utt.fr/platforms/living-lab-activageing

Grâce à ce banc d’essai et à son approche multidisciplinaire, le Living Lab ActivAgeing (LL2A) offre les outils technologiques et méthodologiques nécessaires pour parvenir à la "conception adéquate" de solutions visant à soutenir l'autonomie, la santé et le bien-vieillir des personnes âgées. L'approche de la conception est centrée sur l'humain et participative, visant non seulement à soutenir l'autonomie, mais aussi à renforcer la dignité et l'empowerment des personnes âgées. Depuis sa création en 2013, le LL2A a renforcé sa visibilité internationale dans le domaine de la santé et de l'autonomie des personnes âgées, grâce à la collaboration à divers projets européens et à des partenariats entre l'industrie et le monde universitaire.

Page 34: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

34

Connectathon et Projectathon

Nom

Connectathon et Projectathon

Organisation

IHE-Europe 80, bd A. Ryers 1030 – Belgium

Contact : Karima Bourquard, IHE-Europe

[email protected]

Site web: www.IHE-Europe.net

Objet d’étude

Evaluation de l’interopérabilité et la conformité des systèmes d’information, applications mobiles ou dispositifs dans le domaine de la eSanté et AHA (Handicap et Autonomie) par rapport à des spécifications d’intégration basés sur les standards internationaux. Ces spécifications sont appelées profils IHE.

Living Labs concernés

Toutes organisations de déploiement IHE en Europe et dans le monde

Projets européens, nationaux, régionaux et locaux

Viabilité

Porté par des associations en Européen et à l’international et une équipe de 10 personnes basées en France et aux US.

20 ans d’existence.

Basé sur le volontariat de ses membres de tout ordre : institut de recherche, absences nationales ou régionales, association d’utilisateurs dans toutes spécialités… (plus de 500 organisations participent à IHE).

Développement de la plateforme Gazelle qui est utilisée dans les Connectathons. En Europe : Plus de 80 sociétés pour 120 systèmes pour le Connectathon 2016.

Modèle économique : prestations et offres de services pour le Connectathon, les éditeurs, les projets, et tout type d’organisation ayant des besoins d’évaluation de l’interopérabilité ou de la conformité des systèmes en santé par rapport à des standards internationaux.

Page 35: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

35

Environnement légal

Prise en compte des contextes locaux ou nationaux, européens ou internationaux

Page 36: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

36

PARTIE II - LE BANC D’ESSAI

Processus de test (aspect organisationnel)

Démarche : une approche basée sur les besoins utilisateurs (cas d’utilisation) et leur déclinaison en profils d’interopérabilité testés sur les plateformes de test utilisant Gazelle TM. (Voir processus IHE)

Processus type : 1/ analyse du besoin, 2/ définition des plans de test et développement des outils de test, 3/ recrutement des testeurs et experts neutres dans la communauté e-Santé, 4/ configurations des outils, pré-tests, passations des tests, 5/ rapport de validation, restitution et 6/ publication des résultats, 7/ historisation et retour vers les organes de spécifications pour amélioration des exigences.

Test Bed

Types de données recueillies : données de santé en test, données techniques

Le Test Bed s ‘appuie sur la plateforme Gazelle Tool Management ™ permettant de gérer

- Les plans de test et scripts de tests - Les enregistrements des systèmes candidats - Les utilisateurs et leurs accès - Les configurations de test - Les tests proprement dits - Les validations - Le rapport de test - Les indicateurs qualité Les tests sont ensuite réalisés soit en mode session de test physique c’est à dire les personnes sont présentes dans un même lieu pour réaliser les tests, soit en mode virtuel. La plateforme peut être utilisés dans la phase de prototypage comme en phase de déploiement.

Banc d’essai reconnu par le GITB (Global eBusiness Interoperability Test Beds (GITB)) du CEN

Références

Accréditation ISO/IEC 17025 : 2017 (General requirements for the competence of testing and calibration laboratories) par le laboratoires de test Kereval (www.kereval.com ) qui réalise des rapports sous accréditation pour des produits en santé.

Certification ISTQB (international software testing qualifications board) pour les moniteurs

Profils IHE, et standards (HL7, DICOM, IEEEC, OASIS...) de rang ISO (ISO28380 part 1, 2 et 3).

Validation

Les outils et méthodes de test sont validés unitairement, intégrés sur la plateforme et validés puis mis en production dans les Connectathons. Les éditeurs remontent les bogs. Les outils acquièrent leur robustesse au bout de deux CAucune entrée d'index n'a été trouvée.onnectathons en général mis en œuvre en Europe et US.

Page 37: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

37

Maintenance de la méthode

La maintenance de la méthode suit la norme ISO/IEC 17025 et le cycle qualité ISO 9001 et ITIL.

La qualification des testeurs est maintenue par le cycle ISTQB

Suivi des évolutions des standards, développement des outils en mode agile, Validation des outils et notamment plan interne de test des outils suivant ISO/IEC 17025 en vue d’utilisation pour des schémas d’accréditation, plan qualité…

Propriétés intellectuelles

Plateforme développée sous licences open Source ou Creator commons

Evolutivité

Participation à la communauté du Forum LLSA.

Publications scientifiques (conférences internationales, revues à comité de lecture)

Participation aux projets européens ou internationaux dans le domaine du test

Participation au niveau international au comité IHE CASc (Conformity Assessment Scheme Comittee), à IHE-Europe

Page 38: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

38

PARTIE III – OFFRE DE SERVICE

IHE-Europe au travers de son comité IHE Services propose les services suivants :

-Mise à disposition de la plateforme de test Gazelle et personnalisation des outils et méthodes pour les besoins des projets ;

-Organisation de projectathons et connectathons permettant d’évaluer les produits dans le cadre d’évènements dédiés ou en virtuel ;

-Rapport d’évaluation des produits pour un ensemble de profils et standards ;

-Formation ;

- support et aide au développement de spécifications d’interopérabilité, des plans de test ou outils.

Par son expérience déployée depuis une dizaine d’année, de nombreux pays ont fait appel à IHE pour organiser des bancs d’essai pour leurs propres besoins.

Page 39: Catalogue des bancs d’essai · 2021. 1. 12. · disponibles sur le marché français et qui répondent aux exigences attendues définies pour le banc d‘essai. Ce catalogue a aussi

39

Conclusion

Les bancs d’essai présentés dans ce catalogue regroupent un savoir-faire et des connaissances qui répondent fortement aux besoins identifiés dans les programmes en Santé et Autonomie comme Masanté@2022 dans le cadre de l’accélération du virage numérique ou de la facilitation de l’innovation en santé numérique. Ils apportent aussi leurs compétences dans le cadre des démarches d’essai cliniques, de la mobilité des personnes âgées ou des solutions d’accompagnement de personnes âgées ou handicapées.

Ils peuvent par la mise en place de protocoles rigoureux de tests, apporter des réponses aux questions de faisabilité et de fiabilité des produits et services innovants offrant ainsi un tremplin pour leur futur déploiement.

Les bénéfices sont triples :

1. Vis à vis des concepteurs qui ne maîtrisent pas toute la complexité de leur environnement légal et éthique en leur apportant un support robuste ;

2. Vis à vis des futurs utilisateurs, une plateforme d’évaluation permettant de les rassurer quant à l’adéquation des produits et services aux besoins ;

3. Vis à vis des pouvoirs publics, une meilleure connaissance des produits et services en cours d’élaboration qui répondent aux exigences attendues.

Las bancs d’essai présentés ici quant à eux se professionnalisent et sont aptes à fournir des résultats de plus en plus fiables et maitrisés. C’est le retour que nous avons avec l’édition de ce deuxième catalogue.