CERTITUDE : VERS UNE CERTIFICATION DES COMPÉTENCES TECHNOLOGIQUES ET ... · •Définir les référentiels de compétences TIC et informationnelles •Définir les critères de performance

CERTITUDE : VERS UNECERTIFICATION DES COMPÉTENCESTECHNOLOGIQUES ETINFORMATIONNELLES DES ÉTUDIANTSACCÉDANT AUX UNIVERSITÉSQUÉBÉCOISESPrésentation à

Rencontre REPTIC de juin 2011parJean Allard, Michel Pronovost, Collège Brébeufet Robert Gérin-Lajoie, Université de Montréal

MEMBRES DE L’ÉQUIPEMERCI!

Équipe du projetJean Allard et Michel PronovostProfesseurs, Collège BrébeufYves Munn, Cegep@DistanceAnnie Mahais, chargé de projet, et Robert Gérin-Lajoie, Université de Montréal

Équipe de directionRichard Guay, Collège BrébeufFrançoise Marceau, CEGEP@DistanceJacques Raynauld, MATI et HEC-MontréalRobert Gérin-Lajoie, Université de Montréal

• Hébergement et soutien technique– Jonathan-Marc Lapointe, profweb– Cedric Joyal et Gilles-Philippe Leblanc, Université de Montréal

CONTEXTE

Valoriser les compétences technologiques et informationnellesS’appuyer sur les acquis du profil REPTIC du réseau des CÉGEPS et du programme Magellan du collège BrébeufÉvaluer les habiletés dans un environnement de correction automatisée

LES OBJECTIFS INITIAUX DU PROJETo Accroître la synergie

entre les ordres d’enseignement collégial et universitaire pour développer conjointement une norme nationale en compétences informationnelles

o Développer une série de tests en ligne pour l’évaluation des compétences des étudiants du réseau collégial québécois se destinant à l’enseignement supérieur

o Viser une certificationpour les diplômés du réseau collégial québécois, des compétences technologiques et informationnelles, considérées comme nécessaires à la poursuite d’études universitaires

o Permettre aux universités d’utiliser des outils en ligne de formation de mise à niveau technologique et informationnelle à l’intention des étudiants qui n’auraient pas acquis les compétences associées à la certification

o Reconnaîtreofficiellement la valeur de la certification par le biais de crédits ou d’exemptions de cours ou de modules de mise à niveau ou d’une mention explicite dans le relevé de notes

UN PROJET INTERORDRE FINANCÉ PAR LEMELS

Comité direction

projet

CEGEP à distance

Collège Brébeuf

Université de Montréal

Autres partenaires:

MATI-MontréalHEC-Montréal

CONTEXTE HISTORIQUE UDEM1999 : La CREPUQ reconnait l’enjeu de la maitrise des technologies pour la poursuite d’études universitaires

Janvier 2002 : La Commission des études de l’Université de Montréal adopte une politique de formation à l’utilisation de l’information

Mise en place au sein des bibliothèques des facultés respectives de formation, d’ateliers à la recherche informationnelle axée sur les disciplines

Test d’auto évaluation en sciences de l’éducationCours PLU6058Capsules d’autoformation, générale (Infosphère) et disciplinairesAteliers disciplinaires intégrés dans les cours

CONTEXTE HISTORIQUE COLLÉGIAL2003 : Le Collège Jean-de-Brébeuf débute l’élaboration d’une formation en TIC à l’intention de tous ses étudiants, formation adaptée au champ d’études de l’étudiant : projet Magellan

Hiver 2004 : Le Collège Jean-de-Brébeuf et l’Université de Montréal signe un partenariat à propos de Magellan

Automne 2004 : Programme Magellan Déploiement de la formation aux TIC par champ d’études et certification du Collège Jean-de-Brébeuf attestée par l’Université de Montréal

2004 : Élaboration des profils TIC pour le collégial par le réseau REPTIC

CONTEXTE HISTORIQUE (SUITE)2008 : Le Sous-comité des bibliothèques de la CREPUQ recommande des niveaux de compétence à atteindre

Septembre 2009 : Le Ministère de l’Éducation donne son accord ainsi qu’un financement au projet Certitude

HÉTÉROGÉNÉITÉ DES PARCOURSÉTUDIANTS INTÉGRANT L’UNIVERSITÉ DEMONTRÉAL

Université de

Montréal

Étudiants provenant des

différents collèges

Étudiants issus d’autres

universités

Étudiants issus du

marché du travail Étudiants

issus d’autres provinces

Étudiants provenant du

reste du monde

Hétérogénéité dans la maîtrise des compétences technologiques et informationnelles des étudiants entrant à l’université

Un effort notable mais inégal de mise à niveau fait au sein des enseignements disciplinaires à l’UdeM

Des usages accrus des TIC dans les outils d’apprentissages au secondaire et postsecondaire ainsi que des exigences accrues dans la sphère professionnelle Des questions éthiques quant à l’utilisation de l’information

ENJEUX DU PROJET CERTITUDE POURL’UNIVERSITÉ

Garantir des niveaux de

compétences à l’entrée de l’université

Améliorer la synergie entre CÉGEP et Universités

Contribuer à la qualité de l’enseignement universitaire

Accroitre sa compétitivitéFidéliser ses étudiants

Homogénéiser les profils étudiants

Permettre un recentrage vers les enseignements par

discipline

ENJEU UDEM: INSERTION DE CERTITUDEAU SEIN DES FACULTÉS

Évaluation des compétences technologiques et informationnelles

Cours de mise à niveau

Droit Médecine FAS

Approfondir et certifier les compétences de niveau universitairepar disciplines

Second cycle

Premier cycle

FSE Autres …

Cours de mise à niveau

Certitude

S’APPUYER SUR DES ACQUIS ET DESPRATIQUES

Au plan internationalC2I, niveau 1 et niveau 2 en FranceSAILS , Certiport aux États-UnisAutres

Au niveau provincialProfil TIC produit par les répondants TIC des collèges (REPTIC) formation implantée progressivement dans les CÉGEPSCertification Magellan du collège Jean-de-Brébeuf (certification TIC et RI attestée par l’Université de Montréal)

À l’Université de MontréalAcquis de la Faculté des sciences de l’éducation (évaluation en RI)Acquis du service des bibliothèques dans la formation des étudiants universitaires à l’usage des TICAcquis de l’École de Bibliothéconomie et des Sciences de l’Information de la FAS

LA MÉTHODOLOGIE DU PROJETCERTITUDE

•S’appuyer sur les acquis•Définir les référentiels de compétences TIC et informationnelles •Définir les critères de performance attendus

• Déterminer les méthodes d’évaluation en ligne pertinentes• Sélectionner les outils d’évaluation en ligne compatible avec les

pratiques institutionnelles

• Concevoir les instruments d’évaluation• Expérimenter et piloter les instruments d’évaluation• Concevoir les formations de mises à niveau en ligne

PLAN DE TRAVAIL DE CERTITUDE

o Recension des pratiques internationales et des offres de certificationo Choix d’un outil auteur pour l’évaluation des habilitéso Précision sur le référentiel détaillé et conception de questionso Conception des questions d’évaluation par les partenaires (Brébeuf et CEGEP@Distance)o Installation d’un environnement de passation

mai 2011 mai 2012 septembre 2012

Pilote: Passation sur un échantillon d’étudiantsAnalyse de la passation

Processus d’évaluation complet

Synthèse et recommandations

RÉALISATIONS (1)o Sélection de sous-ensemble de compétences communes et

enlignement des référentiels REPTIC et Magellan

RÉALISATIONS (2)o Concevoir des questionnaires d’évaluation avec l’outil

auteur Captivate de Adobeo avec correction automatique intégrale et rétroaction rapide à

l’issue du testo Intégrer les questionnaires dans un environnement de

passation rudimentaire fourni par Adobe Captivateo Monter une enquête de perception à faire passer aux

étudiants après la passation de l’évaluation Certitude

EXPÉRIMENTATIONS ET TESTS

o En mai 2011, quatre examens automatisés sur des échantillons d’étudiants préalablement formés aux TIC et à la recherche documentaireo 26 étudiants finissants en Sciences humaines au CEGEP de

Victoriavilleo 13 étudiants finissants en Sciences humaines au CEGEP

Marie-Victorino 32 étudiants finissants en Sciences de la nature du Collège

Brébeufo 9 étudiants finissants en Sciences humaines du Collège

Brébeuf

o Suite cet été: Analyser les résultats de passation et de l’enquête

COMMENT FAIRE L’ÉVALUATIONDES HABILITÉS

Plusieurs approches retenuesAvec des questions à choix multiples (QCM) augmentées par du multimédiaAvec des simulations génériques Avec des réalisations in situAvec des chasses au trésor

Choix de l’outil Captivate de Adobe

CERTITUDE :: LES TYPES DEQUESTIONS

QCM+ Simulation In situ Chasse au trésor

Environnement x x

Tableur x x

Traitement de texte x x x

Recherche informationnelle x x x

COMPOSITION DU QUESTIONNAIRE DE SCIENCESHUMAINES

Tableur : 1 Traitement texte : 2 Recherche information : 3 Environnement : 4

EXEMPLE D’UNE QUESTION ASSOCIATIVE AVEC IMAGES

EXEMPLE D’UNE QUESTION DE « CHASSE AU TRÉSOR »

EXEMPLE D’UNE QUESTION DE SIMULATION

EXEMPLE DE LA SIMULATION

LE TABLEUR :: EXEMPLE D’UNE MISE EN SITUATION

LE TABLEUR :: EXEMPLES DE QUESTIONS

Formater des cellulesFaire la conversion 0C en 0F Ajouter des lignesAjouter des colonnesFaire un triFaire des calculs simples : sommes, moyennesUtiliser des fonctions plus évoluées : dénombrements (simples et complexes) ou des dénombrements conditionnels Calculer des fréquencesProduire un graphique, vérifier des hypothèses, etc.

Plusieurs compétences peuvent être vérifiées à partir d’une mise en situation simple

LE TABLEUR :: VALIDATION DESRÉPONSES

Jetons dans le tableur Jetons dans l’examen

Les jetons générés indiquent le succès ou l’échec pour chacune des compétences évaluées

Les jetons sont validés pour déterminer le succès ou l’échec pour chacune des compétences évaluéesLes compétences peuvent avoir des pondérations différentes

COMMENT LA COMPRÉHENSION DES ÉNONCÉS A ÉTÉPERÇUE PAR LES ÉTUDIANTS

CE QUE LES ÉTUDIANTS ONT APPRÉCIÉ DANSLE QUESTIONNAIRE

LEURS REMARQUES

LES AMÉLIORATIONS SUGGÉRÉES PAR LESÉTUDIANTS

LA SUITE

Analyser les premiers résultatsAdapter notre démarche à l’environnement MoodleÉlargir le contenu de l’évaluation

Faire des banques de questionsCouvrir l’orientation Arts et lettresAugmenter le nombre d’évaluation en tests

Monter une nouvelle demande de financement interordre afin de monter un cours en ligne, en association avec REPTIC

QUESTIONS?