1 / 61

Formation à la gestion qualité des évaluations standardisées des acquis des étudiants 21/11/2002

Formation à la gestion qualité des évaluations standardisées des acquis des étudiants 21/11/2002. PROGRAMME DE LA FORMATION. Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02. [1] Cycle de gestion qualité des tests standardisés – 21/11/02

meris
Download Presentation

Formation à la gestion qualité des évaluations standardisées des acquis des étudiants 21/11/2002

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. Formation à la gestion qualité des évaluations standardisées des acquis des étudiants 21/11/2002

  2. PROGRAMME DE LA FORMATION Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1] Cycle de gestion qualité des tests standardisés – 21/11/02 Objectif : vous initier aux étapes de réalisation d'un test standardisé d'évaluation des acquis des étudiants ainsi qu'aux principales procédures de gestion qualité associées à chacune de ces étapes. [2] Contrôle qualité a priori des questions fermées – 28/11/02 Objectif : vous initier aux règles de rédaction des questions à choix multiple (QCM) et vous amener à critiquer et améliorer des QCM en utilisant ces règles. [3] Dispositifs d'entraînement des étudiants aux proc. d'évaluation – 05/12/02 Objectif : vous initier à trois dispositifs d'ingénierie docimologique mis gratuitement à votre disposition par le SMART-ULg pour vous permettre d'entraîner vos étudiants avant un test certificatif : [1] la Lecture Optique de Marques (LOM), [2] les Boîtiers de Vote Electronique (BVE) et [3] le Testing Interactif Multimédia via Internet (TIMI). [4] Contrôle qualité a posteriori des questions fermées – 12/12/02 Objectif : vous initier aux méthodes et indices qui permettent d'analyser les résultats des épreuves en vue d'en évaluer la qualité des questions puis d'effectuer d'éventuelles rectifications. [5] Ressources offertes par le SMARTpour la réal. de tests pédagogiques de qualité – 19/12/02 Objectif : vous initier à la mise en oeuvre concrète des différentes procédures proposées par le SMART-ULg de manière à vous permettre de mettre en oeuvre et d'analyser vos tests standardisés d'évaluation des acquis des étudiants.

  3. SOMMAIRE de la séance du 21/11/02 Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1] Cycle de gestion qualité des tests standardisés [1.1] Introduction [1.2] Les fondements de notre système méthodologique [1.3] Le cycle de gestion qualité des évaluations standardisées [1.4] Une application dans le cadre du cours d’Obstétrique et de pathologie de la reproduction des ruminants, équidés et porcins

  4. [1.1]Introduction Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.1.1] Le SMART, ses missions http://www.smart.ulg.ac.be

  5. [1.1]Introduction Educational Assessment of Students, A. Nitko (2001) http://cwx.prenhall.com/bookbind/pubbooks/nitko/ Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.1.2] Ouvrages de référence Edumétrie et docimologie, D. Leclercq (1999)

  6. [1.1]Introduction Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 http://cwx.prenhall.com/bookbind/pubbooks/nitko/ [1.1.2] Ouvrages de référence

  7. [1.2]Les fondements de notre système méthodologique Ressources en personnel et en matériel Modèles & procédures SMART Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.2.1] Une approche « qualité » Objectifs de qualité Besoins des ensei- gnants & des étudiants (Gilles, 2002)

  8. [1.2]Les fondements de notre système méthodologique Ressources en personnel et en matériel Modèles & procédures SMART Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.2.2] Des objectifs-critères à prendre en compte pour améliorer les tests validité  fidélité  sensibilité  diagnosticité  praticabilité  équité  communi- cabilité Objectifs de qualité Besoins des ensei- gnants & des étudiants (Gilles, 2002)

  9. [1.2]Les fondements de notre système méthodologique Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.2.2] Des objectifs-critères à prendre en compte pour améliorer les tests • La validité : les scores des étudiants doivent représenter ce que l’enseignant veut mesurer, permettre des inférences solides (validité de construct ou théorique), et couvrir les aspects importants de l’enseignement (validité de contenu) ; • La fidélité : la note (d’une épreuve corrigée) classée dans une catégorie donnée doit l’être de la même façon si elle est traitée par d’autres correcteurs (concordance interjuges) ou/et à un autre moment (consistance intrajuge) ; • La sensibilité : la mesure doit être précise, refléter des phénomènes subtils ; • La « diagnosticité » : les résultats doivent permettre le diagnostic précis des difficultés d’apprentissage (et idéalement de leurs causes), des processus maîtrisés, de ceux qui ne le sont pas ;

  10. [1.2]Les fondements de notre système méthodologique Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.2.2] Des objectifs-critères à prendre en compte pour améliorer les tests • L’équité : tous les étudiants doivent être traités de façon juste, en principe de la même façon (standardisation) ; • La « praticabilité » : la réalisation des évaluations doit être faisable endéans des délais raisonnables et à l’aide des ressources en personnel et en matériel disponibles et proportionnées à l’importance relative des enjeux ; • La « communicabilité » : les informations non confidentielles relatives au déroulement du processus doivent être communiquées et comprises par les partenaires (enseignants, étudiants, équipe SMART) engagés dans la réalisation des épreuves.

  11. [1.3]Le cycle de gestion qualité des évaluations standardisées 8 étapes Plus d'une trentaine de procédures "qualité" Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.1] Vue d’ensemble du modèle et des procédures EEEVI BVE TVI Une série de dispositifs technologiques Cycle de gestion qualité des tests standardisés (Gilles, J.-L. & Leclercq, D., 1996)

  12. [1.3]Le cycle de gestion qualité des évaluations standardisées 1. Analyse des 2. Mise en forme 3. Construction objectifs de de l’épreuve de l’épreuve l’enseignement - Rédaction des - Définition des questions Modalités de - Points Ense ignés - Barèmes et tarifs Questionnement - Catégories de - Contrôle qualité - Équilibrage de Performances a priori l’épreuve - Priorités 8. Macro régu- 4. Entraîn e ment lation (recueil des avis des étudiants) 6. Correction et 7. Feed-back 5. Epreuve discussion aux exam i nés - préparation du - FB « matières », - performances matériel, des « processus - analyse des l o caux, consignes me n taux » et pr o positions, - vérification du « métacognitifs » contrôle qualité a timing - infos sur posteriori : r pbis, - procédures anti- l’analyse des rectific a tions questions fraude Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.1] Vue d’ensemble du modèle et des procédures Cycle de gestion de la qualité des tests standardisés (Gilles & Leclercq, 1996)

  13. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.2] Analyse des objectifs de l’enseignement Taxonomie des objectifs d’enseignement de Bloom 6. Évaluation 5. Synthèse 4. Analyse 3. Application 2. Compréhension 1. Connaissance

  14. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.2] Analyse des objectifs de l’enseignement Exemple : les examens provinciaux (K12) en Colombie Britannique http://www.bced.gov.bc.ca/exams/specs.htm

  15. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.2] Analyse des objectifs de l’enseignement Niveau 1  Connaissance La définition de la connaissance englobe les comportements et les situations de contrôle qui mettentl’accent sur la mémorisation, par reconnaissance ou par rappel, d’idées, de données ou de phénomènes. Font partie de ce niveau la connaissance de la terminologie, de faits spécifiques (dates, événements,personnes, etc.) de conventions et de catégories, de critères, de méthodes de recherche, de principes et degénéralisations, de théories et de structures. 1. Connaissance Student Assessment and Program Evaluation Branch, Ministère de l’éducation, Colombie Britannique, 2002

  16. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.2] Analyse des objectifs de l’enseignement Niveau 2  Compréhension et application La compréhension fait référence aux réponses qui témoignent de l’entendement du message littéralcontenu dans une communication. Cela signifie que l’élève est en mesure d’interpréter ou d’extrapoler lesens d’un message. L’interprétation met en jeu la remise en ordre d’idées (inférences, généralisations ourésumés). L’extrapolation fait appel à des estimations ou des prédictions basées sur la compréhension destendances. L’application exige que l’élève applique une abstraction appropriée (théorie, principe, idée, méthode) à une nouvelle situation. 3. Application 2. Compréhension 1. Connaissance Student Assessment and Program Evaluation Branch, Ministère de l’éducation, Colombie Britannique, 2002

  17. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.2] Analyse des objectifs de l’enseignement Niveau 3  Processus mentaux supérieurs L’analyse se traduit par la capacité de reconnaître les sous-entendus, de distinguer les faits deshypothèses, de discriminer les conclusions des arguments qui les étayent, de reconnaître les hypothèses etles faits qui sont essentiels à la thèse ou à l’argument et de faire la différence entre les relations de cause àeffet et d’autres relations séquentielles. La synthèse met en jeu la production d’une communication unique, la capacité de proposer des modalitésde contrôle des hypothèses, de concevoir une expérience, de formuler et de modifier des hypothèses et defaire des généralisations. L’évaluation se définit comme l’expression de jugements de valeur sur des idées, des solutions et desméthodes. Elle fait appel à des critères et à des normes pour mesurer le degré d’exactitude, d’efficacité,d’économie ou de pertinence des détails. L’évaluation met en jeu la capacité d’appliquer des critèresdonnés à des jugements sur le travail accompli, de reconnaître les erreurs de logique et de comparer lesprincipales théories et généralisations.Les questions qui font appel aux processus mentaux supérieurs subsument le niveau Connaissance ainsique le niveau Compréhension et application. 6. Évaluation 5. Synthèse 4. Analyse 3. Application 2. Compréhension 1. Connaissance Student Assessment and Program Evaluation Branch, Ministère de l’éducation, Colombie Britannique, 2002

  18. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.3] Mise en forme de l’épreuve PHYSIQUE 12 PHYSIQUE 12 DESCRIPTION DE L’EXAMEN PROVINCIAL (…) L’examen provincial comporte deux parties : PARTIE A : Questions à choix multiple comptant pour 50 % de l’examen (60 points).La plupart de ces questions sont des problèmes exigeant une compréhension des définitions et desconcepts de base ainsi que l’application d’équations simples alors que quelques questions peuvent êtreplus complexes. PARTIE B : Questions à développement comptant pour 50 % de l’examen (60 points).La plupart de ces questions sont des problèmes exigeant une compréhension des définitions et desconcepts de base alors que certaines questions peuvent nécessiter une explication des concepts de base. Le nombre de questions à développement peut varier d’un examen à l’autre, selon la valeur attribuée àchaque question. Cependant, le nombre total de points attribués à la section des questions àdéveloppement demeure inchangé. Student Assessment and Program Evaluation Branch, Ministère de l’éducation, Colombie Britannique, 2002

  19. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.3] Mise en forme de l’épreuve PHYSIQUE 12 Student Assessment and Program Evaluation Branch, Ministère de l’éducation, Colombie Britannique, 2002

  20. [1.3]Le cycle de gestion qualité des évaluations standardisées x Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 BIOLOGIE 12 [1.3.4] Construction de l’épreuve Student Assessment and Program Evaluation Branch, Ministère de l’éducation, Colombie Britannique, 2002

  21. [1.3]Le cycle de gestion qualité des évaluations standardisées x Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 BIOLOGIE 12 [1.3.4] Construction de l’épreuve Student Assessment and Program Eval. Branch, Ministère de l’éducation, Colombie Britannique, 2002

  22. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 BIOLOGIE 12 [1.3.4] Construction de l’épreuve Student Assessment and Program Eval. Branch, Ministère de l’éducation, Colombie Britannique, 2002

  23. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 BIOLOGIE 12 [1.3.4] Construction de l’épreuve x Student Assessment and Program Eval. Branch, Ministère de l’éducation, Colombie Britannique, 2002

  24. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.4] Construction de l’épreuve FRANÇAIS LANGUE PREMIÈRE 12 BARÈME DE NOTATION ÉPREUVE ORALE FRANCAIS LANGUE PREMIERE 12 CONTENU communiquer informations opinions sentiments préparation connaissance Student Assessment and Program Eval. Branch, Ministère de l’éducation, Colombie Britannique, 2002

  25. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.4] Construction de l’épreuve FRANÇAIS LANGUE PREMIÈRE 12 BARÈME DE NOTATION ÉPREUVE ORALE FRANCAIS LANGUE PREMIERE 12 FORME maîtrise de la syntaxe, vocabulaire prononciation débit verbal Student Assessment and Program Eval. Branch, Ministère de l’éducation, Colombie Britannique, 2002

  26. [1.3]Le cycle de gestion qualité des évaluations standardisées 1. Analyse des 2. Mise en forme 3. Construction objectifs de de l’épreuve de l’épreuve l’enseignement - Rédaction des - Définition des questions Modalités de - Points Ense ignés - Barèmes et tarifs Questionnement - Catégories de - Contrôle qualité - Équilibrage de Performances a priori l’épreuve - Priorités Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.4] Construction de l’épreuve Y. Lion, 2000

  27. [1.3]Le cycle de gestion qualité des évaluations standardisées Exemple de QCM : (Castaigne & Hanzen, 2000) Cette échographie de l’ovaire gauche d’une vache pie noire de 6 ans, a été réalisée une semaine après l’oestrus.Votre diagnostic : 1. Un follicule de de Graaf 2. Un kyste folliculaire 3. Un Corps Jaune 4. Un Corps Jaune Cavitaire 5. Un artefact 6. Aucune 7. Toutes Exemple d’échelle de pourcentages de certitude (Leclercq, 1986) 3,9 cm 2,8 cm Exemple de recueil des données pour une lecture automatisée des réponses et certitudes : (SMART-ULg, 1996) 1,5 cm 0,6 cm Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02

  28. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02

  29. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02

  30. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 Le Kaléidoscope des techniques de questionnement - Edumétrie et docimologie, 1999  D. Leclercq & J.-L. Gilles, 1999

  31. [1.3]Le cycle de gestion qualité des évaluations standardisées Testing Interactif Multimédia via Internet (T.I.M.I.) 4. Entraîn e ment 5. Epreuve - préparation du matériel, des l o caux, consignes - vérification du timing - procédures anti- fraude Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.5] Entraînement à l’épreuve

  32. [1.3]Le cycle de gestion qualité des évaluations standardisées Formulaire de réservation en ligne des BVE http://www.smart.ulg.ac.be/evaletu/bve/ 4. Entraîn e ment 5. Epreuve - préparation du matériel, des l o caux, consignes - vérification du timing - procédures anti- fraude Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.5] Entraînement à l’épreuve Boîtiers de Votes Electroniques (B.V.E.)

  33. [1.3]Le cycle de gestion qualité des évaluations standardisées • Boucles courtes (en 5 jours ouvrables maximum) 4. Entraîn e ment 5. Epreuve - préparation du matériel, des l o caux, consignes - vérification du timing - procédures anti- fraude Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.5] Entraînement à l’épreuve Dispositif de Lecture Optique de Marques (L.O.M.)

  34. [1.3]Le cycle de gestion qualité des évaluations standardisées 4. Entraîn e ment 5. Epreuve - préparation du matériel, des l o caux, consignes - vérification du timing - procédures anti- fraude Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.6]Epreuve

  35. [1.3]Le cycle de gestion qualité des évaluations standardisées Forme A 4. Entraîn e ment 5. Epreuve - préparation du matériel, des l o caux, consignes - vérification du Quatre formes différentes sont possibles : les étudiants ont alors les mêmes questions, mais dans des ordres différents. timing - procédures anti- fraude Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 Dispositif anti-fraude [1.3.6]Epreuve

  36. [1.3]Le cycle de gestion qualité des évaluations standardisées 4. Entraîn e ment 5. Epreuve - préparation du matériel, des l o caux, consignes - vérification du timing - procédures anti- fraude Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 Dispositif anti-fraude [1.3.6]Epreuve

  37. [1.3]Le cycle de gestion qualité des évaluations standardisées (Gilles, 2002) 6. Correction et 7. Feed-back discussion aux exam i nés - FB « matières », - performances « processus - analyse des me n taux » et pr o positions, « métacognitifs » contrôle qualité a - infos sur posteriori : r pbis, l’analyse des rectific a tions questions Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.7]Correction & discussion

  38. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.7]Correction & discussion Fichiers envoyés par e-mail aux enseignants

  39. [1.3]Le cycle de gestion qualité des évaluations standardisées 6. Correction et 7. Feed-back discussion aux exam i nés - FB « matières », - performances « processus - analyse des me n taux » et pr o positions, « métacognitifs » contrôle qualité a - infos sur posteriori : r pbis, l’analyse des rectific a tions questions Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.8]Feedback aux examinés

  40. [1.3]Le cycle de gestion qualité des évaluations standardisées 8. Macro régu- lation (recueil des avis des étudiants) Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.9]Macro régulation

  41. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.9]Macro régulation

  42. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.9]Macro régulation Comparaison des moyennes des avis des étudiants à propos des examens dans le 1er cycle de la FAPSE-ULg (de 1997 à 2000) 1ère candidature 1997-1998 (n=227) 2ème candidature 1997-1998 (n=163) 1ère candidature 1998-1999 (n=150) 6 1ère candidature 1999-2000 (n=250) 2ème candidature 1999-2000 (n=134) 5 4 Moyennes des avis 3 2 1

  43. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 [1.3.9]Macro régulation Comparaison des moyennes des avis des étudiants à propos des examens dans le 1er cycle de la FAPSE-ULg (de 1997 à 2000) 6 1ère candidature 1997-1998 (n=227) 2ème candidature 1997-1998 (n=163) 1ère candidature 1998-1999 (n=150) 5 1ère candidature 1999-2000 (n=250) 2ème candidature 1999-2000 (n=134) 4 Moyennes des avis 3 2 1 [3.3] Après l'examen, l'étudiant peut obtenir des explications sur la qualité de ses réponses au... [1.3] Les questions étaient claires [1.5] Le mode d'évaluation permet au prof. d'avoir une bonne représentation des... [3.1] Les réponses correctes sont communiquées aux étudiants après l'examen [1.1] Le mode d'évaluation était adéquat [1.4] Questions bien adaptées à la matière [3.2] L'analyse statistique de la qualité des questions (r.bis) est communiquée [2.4] L'horaire fixé pour l'examen est respecté [1.6] L'évaluation est équitable et impartiale [2.3] L'enseignant met l'étudiant à l'aise à l'examen oral [1.2] L'entraînement avant l'examen était suffisant [2.2] Les exigences de l'enseignant sont présentées en temps utiles [2.1] Les exigences de l'enseignant sont clairement présentées

  44. [1.3]Le cycle de gestion qualité des évaluations standardisées Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02 EEEVI BVE TVI Cycle de gestion qualité des tests standardisés (Gilles, J.-L. & Leclercq, D., 1996)

  45. [1.4]Une application Formation à la gestion qualité des évaluations standardisées des acquis des étudiants - 21/11/02

  46. Cycle gestion qualité S.M.A.R.T. des tests pédagogiques 2.Mise en forme de l ’épreuve 1. Analyse de l ’enseignement Modalités de Questionnement, assemblageet équilibrage (binômes & trinômes) Points Enseignés, Catégories de Performances 3.Construction des Questions Indices de Qualité 8. Régulation du processus 4. Entraînement des étudiants Recueil et analyse des avis des étudiants, propositions d ’améliorations 7. Feedback aux étudiants on line : TIMIen amphi : BVE ou Formuloms On-line ou en amphi 5. Mise en œuvre de l ’épreuve 6. Correction de l ’épreuve Matériel, Timing, procédures anti-fraude On-line : DC, sévérité, réalisme, r.bis, ...

  47. Cycle gestion qualité S.M.A.R.T. des tests pédagogiques 1. Analyse de l ’enseignement Points Enseignés, Catégories de Performances 2.Mise en forme de l ’épreuve Modalités de Questionnement, assemblageet équilibrage (binômes & trinômes) 3.Construction des Questions Indices de Qualité 8. Régulation du processus 4. Entraînement des étudiants Recueil et analyse des avis des étudiants, propositions d ’améliorations 7. Feedback aux étudiants on line : TIMIen amphi : BVE ou Formuloms On-line ou en amphi 5. Mise en œuvre de l ’épreuve 6. Correction de l ’épreuve Matériel, Timing, procédures anti-fraude On-line : DC, sévérité, réalisme, r.bis, ... Gilles & Leclercq, 1996 Castaigne & Gilles, S.M.A.R.T. - O.G.A., ULG FORM@SUP, mai 2000

  48. 1. Analyse de l ’enseignement • 1.1 Définir les Points Enseignés [PE] • Isoler chaque module assez important pour justifier d ’une évaluation et en quantifier l ’importance • 1.2 Définir les Catégories de Performance [CP] • Quelles sont les mesures que l ’enseignant va prendre lors de l ’évaluation de l ’apprenant ? • 1.3 Relier les Points Enseignés et les Catégories de Performance [PE x CP] • Pour chaque PE défini, quelle CP permettra d ’en apprécier la bonne transmission vers l ’apprenant Castaigne & Gilles, S.M.A.R.T. - O.G.A., ULG FORM@SUP, mai 2000

  49. 1.1 Définir les Points Enseignés[PE] 1. Analyse de l ’enseignement Isoler chaque module assez important pour justifierd ’une évaluation et en quantifier l ’importance Castaigne & Gilles, S.M.A.R.T. - O.G.A., ULG FORM@SUP, mai 2000

More Related