Pré-test et post-test d'évaluation des compétences informationnelles

12
Vicky Gagnon, MSI Bibliothécaire Responsable des services École de technologie supérieure Un test d’évaluation des CI

description

Il s'agit ici non pas d'une recherche et d'une analyse exhaustive, mais bien d'un premier rapport d'analyse sur la première passation (6 autres depuis) d'un test visant à évaluation les connaissances et compétences informationnelles d'étudiants à la maîtrise de type recherche en ingénierie.

Transcript of Pré-test et post-test d'évaluation des compétences informationnelles

Page 1: Pré-test et post-test d'évaluation des compétences informationnelles

Vicky Gagnon, MSIBibliothécaire

Responsable des servicesÉcole de technologie supérieure

Un test d’évaluation des CI

Page 2: Pré-test et post-test d'évaluation des compétences informationnelles

But : s’assurer que les étudiants aient les CI nécessaires à leurs études à la maîtrise;

Objectif : Développer un pré-test permettant d’évaluer le niveau de compétences informationnelles des étudiants avant le début du cours MTR801 et un post-test permettant d’évaluer leur niveau d’apprentissage après le cours. Le test s’appuie sur les normes reconnues (ACRL);

Permettre notamment de connaître le niveau des étudiants et d’évaluer la pertinence de notre propre offre de cours.

Page 3: Pré-test et post-test d'évaluation des compétences informationnelles

Les écarts entre les étudiants en termes de compétences informationnelles sont assez prononcés;

Les groupes sont hétérogènes dans la mesure où les gens proviennent de différentes disciplines et, dans plusieurs cas, de divers pays; Homogènes dans la mesure où les gens sont tous inscrit à MTR801

La langue et la compréhension du milieu peuvent représenter des défis supplémentaires;

Selon la provenance des étudiants, les outils et ressources diffèrent parfois de ce qu’ils ont connu auparavant.

Page 4: Pré-test et post-test d'évaluation des compétences informationnelles

• Pré-test et post-test• Environ une heure chaque• Divisé en 3 parties :

– Profil– Connaissance– Compétences (tâches)

• Questions: – Banque de plus de 60 questions;– La partie Profil contient 11 questions, la partie Connaissances, 45

questions et la partie Tâches, 8 questions.• 5% de la note

Page 5: Pré-test et post-test d'évaluation des compétences informationnelles

• Rencontres préparatoires avec les professeurs• Évaluation à l’interne• Évaluation à l’externe (PDCI + spécialiste en question)• Essais pilotes auprès d’étudiants, suivi d’une discussion (payés)

– Groupe de quatre étudiants à la maîtrise ayant suivi le cours MTR801 – Un deuxième groupe de trois étudiants à la maîtrise, n’ayant pas suivi

le cours MTR801• Pointage de 5% attribué aux étudiants

– 2.5 pour le pré-test et 2.5 pour le post-test• Plateforme Moodle

Page 6: Pré-test et post-test d'évaluation des compétences informationnelles

Compétences

1. Naviguer dans le site Web, les ressources et les services importants de la bibliothèque

2. Reconnaître les types de documents (liste de références, documents sur Internet, etc.)

3. Cibler les besoins d’information

4. Chercher dans les outils de recherche pertinents

5. Évaluer la qualité des sources d’information

6. Utiliser l’information de façon éthique afin d’éviter le plagiat et respecter l’accès aux ressources électroniques

Page 7: Pré-test et post-test d'évaluation des compétences informationnelles

1ère évaluation 2e évaluation

45 étudiantsMoyenne : 4.9/1024 personnes ont eu 50% et plus21 personnes ont eu moins de 50%9/45 ont réussit le testNotes des évaluations réussies: 6.1/10 à 7.6/10Compétence réussie : 1

43 étudiantsMoyenne : 6.62/1038 personnes ont eu 50% et plus5 personnes ont eu moins de 50%32/45 ont réussit le testNotes des évaluations réussies: 6.4/10 à 9.1/10Compétences réussies : 1 – 3 – 4 et 5

Écart entre les deux moyennes: 17.2%

Page 8: Pré-test et post-test d'évaluation des compétences informationnelles

Compétences 1ère évaluation 2e évaluation

1. Naviguer dans le site Web, les ressources et les services importants de la bibliothèque

70 79

2. Reconnaître les types de documents (liste de références, documents sur Internet, etc. 57 90

3. Cibler les besoins d’information 29 67

4 Chercher dans les outils de recherche pertinents 50 62

5. Utiliser l’information de façon éthique afin d’éviter le plagiat et respecter l’accès aux ressources électroniques 47 76

6. Évaluer la qualité des sources d’information58 58

Page 9: Pré-test et post-test d'évaluation des compétences informationnelles

Compétence 1 1ère évaluation 2e évaluation

Identifier des services sur le site Web 75% 83%

Trouver la cote d’un livre 60%26/44 personnes ont trouvé la cote

71%31/43 personnes ont identifié la cote en tant

qu’élément nécessaire pour retrouver un livre

Compétence 2-3 1ère évaluation 2e évaluation

Identifier des références bibliographiques 64 90

Identifier les types de documents 54 67

Identifier les ressources de la bibliothèque 29 ----

Page 10: Pré-test et post-test d'évaluation des compétences informationnelles

Compétence 4 1ère évaluation 2e évaluation

Connaître les outils de recherche 48 62

Élaborer des stratégies 52 74

Modifier une stratégie 65 58

Effectuer des recherches 19 38

Tâche 1 4 personnes ont 100% 4 personnes ont 100%

Tâche 2 1 personne a 100% 5 personnes ont 100%

Compétence 5 1ère évaluation 2e évaluation

Citer et respecter le droit d’auteur 47% 79%Tâhce : Rendre éthique la citation.

Moyenne: 44% 8/43 ont réussit à 100%

Compétence 6 1ère évaluation 2e évaluation

Reconnaître l’intention de l’auteur 72 40

S’assurer de la fiabilité d’une source 47 66

S’assurer de la crédibilité de l’auteur 68 76

Évaluer un article (tâche) 418 personnes ont réussit à 100%

5013 personnes ont réussit à 100%

Page 11: Pré-test et post-test d'évaluation des compétences informationnelles

• Personnellement je n'etais tellement un habitue de la bibliotheque, donc ce test m'a fait comprendre le gap 'a savoir les nombreux outils disponibles' que je me dois de combler, l'importance,la richesse et l'interet d'utiliser les ressources de la bibliotheque

• intéressant mais j'espère que l'on pourra valider chaque chose

• un peu long pour tout répondre, mais très très interessant

• It is the most interesting test that I have ever seen. Thanks a lot. Unfortunately, I can't read and understand french rapidly, so I took this test terrible. I wish I could try it again. I was so nervous during the this test.

• Le test devrait prendre en consideration l`ancienneté des étudiants à l`école, en effet, un nouvel étudiant ne peut pas être familiarisé avec les outils de recherches spécifique à l`école.

• le test a été bien outil, si bien je ne connaît pas tous les outils je viens de apprendre de la existence des quelqu'uns alors je pense que la formation qui va suivre ce pre-test va être bien utile

• c'est test me permitte savoir qu'il faut faire des course à la bibliotheque parce que me manque plusier des information pour connaitre.

• Ce test est trop long.

• C'est a bone idee de faire un pre test. Maintenant je sais que Il y a des choses a apprendre et je aussi sais ou est-ce que je dois pret plus d'attention dals le cours. Merci.

• Le test est très bien structuré mais je pense que certaines questions, parmi celles qui sont à choix multiples se ressemblent et pourraient avoir la même réponse. La structure du test est correcte et très abordable par tout public.

Page 12: Pré-test et post-test d'évaluation des compétences informationnelles

Vicky Gagnon, MSIBibliothécaire

Responsable des servicesÉTS