MPhil en évaluation de programme

Cours d'évaluation du programme BUS5037W
Thèse BUS5036S (évaluation du programme)
Thèse BUS5050F (évaluation du programme)

Le diplôme se compose de deux parties : une composante de cours de 120 crédits et un projet de recherche de 60 crédits.

Le programme dans son ensemble vise à apprendre aux étudiants à :

• Cadrez et adaptez les questions d’évaluation spécifiques à un contexte programmatique donné.
• Développer une conception d’évaluation ou une méthodologie d’évaluation adaptée à un ensemble particulier de questions.
• Adapter les principes de conception et d’analyse de la recherche à l’évaluation spécifique de la mise en œuvre, des résultats et de l’impact d’un programme social.
• Analyser, présenter et interpréter les données et les résultats de l'évaluation pour éclairer la gestion et l'amélioration du programme.

Nous fournissons également aux étudiants une compréhension du suivi (suivi de l'avancement du programme) et de la théorie du programme (la manière dont les programmes changent un problème ou des personnes).

BUS5037W et BUS5056W (Cours année 1 et année 2)

Les cours sont dispensés à temps partiel sur deux ans via sept semaines de blocs (3 ou 4 semaines par an). Au cours des sept semaines de formation en bloc, les étudiants suivront divers modules de cours, comprenant un total de 180 heures de temps de contact.

Il est obligatoire que les étudiants réussissent tous les modules de cours pour réussir la composante des cours. Les détails des modules de cours sont fournis ci-dessous.

Principes d'évaluation des programmes

Ce module fournit un aperçu systématique et une introduction à l'évaluation de programme basée sur la théorie et à ses méthodes. Dans ce module, nous travaillons en classe sous la direction d'un instructeur expérimenté en évaluation pour développer une approche d'évaluation pour un partenaire communautaire (généralement une organisation non gouvernementale locale). Nous nous concentrons sur le travail avec un « vrai » client pour comprendre la logique des programmes et comment l'évaluation suit cette logique. En classe, nous explorons différentes questions d’évaluation et examinons les questions d’intégrité et de solidité du programme. Les étudiants apprennent également les principes des relations avec les parties prenantes, les rapports clients conviviaux et l'éthique de l'évaluation des programmes.

Statistiques pour l'évaluation

Dans ce cours fondamental de statistique, les étudiants apprennent à identifier et à appliquer des procédures statistiques correctes à l'exploration quantitative de questions souvent importantes dans un contexte d'évaluation. Par exemple, un groupe de bénéficiaires du programme a-t-il amélioré de manière significative un résultat après l’introduction d’une intervention ? Si oui, y a-t-il eu un taux de changement différent dans une intervention par rapport à un groupe témoin ? Existe-t-il des preuves statistiquement significatives d’un effet causal du programme sur les résultats d’intérêt ? Le cours est structuré pour enseigner aux étudiants les approches d'analyse descriptive les plus élémentaires et les principes fondamentaux des statistiques inférentielles (corrélation, tests t, ANOVA et régression simple et multivariée avec modération). Le cours comprend à la fois un contenu théorique et des séances pratiques en laboratoire utilisant le progiciel statistique SPSS.

Conception et analyse d’évaluations quantitatives avancées

Ce module s'appuie sur les compétences statistiques fondamentales enseignées dans Statistiques pour l'évaluation et étend encore plus les connaissances des étudiants pour couvrir des analyses statistiques plus nuancées et des éléments de conception adaptés à des conceptions d'évaluation quantitative plus complexes. Les éléments de conception comprennent les calculs de la taille de l'échantillon et la façon de gérer les éléments d'adoption sélective, de regroupement ou d'attrition dans une conception d'évaluation. Les approches d'analyse comprennent des approches statistiques adaptées à l'analyse des conceptions de séries chronologiques interrompues, des différences dans les différences, de l'appariement des scores de propension et des conceptions de discontinuité de régression. Le cours comprend à la fois un contenu théorique et des séances pratiques en laboratoire utilisant le progiciel statistique SPSS.

Méthodes qualitatives d'évaluation

Dans ce module, les étudiants sont initiés aux approches qualitatives et à leur utilisation en évaluation. Les étudiants apprennent à appliquer des approches d'évaluation populaires qui s'appuient fortement sur des données qualitatives. Les sessions couvriront les différents cadres qualitatifs et les types de questions que la recherche en évaluation qualitative peut aborder avec succès, les principaux types de collecte de données qualitatives, la manière d'élaborer des questions appropriées et la manière correcte de mener l'entretien. Les séminaires couvrent également les principes fondamentaux de l'analyse des données qualitatives et de la communication des résultats qualitatifs.

Approches alternatives pour les évaluations complexes

Dans ce module, nous nous appuyons sur des praticiens experts expérimentés pour présenter aux étudiants un plus large éventail de théories, d'approches, de méthodologies et de points de vue différents en matière d'évaluation. En tant que tel, le module vise à familiariser les étudiants avec un large éventail de méthodes et d'approches alternatives qui pourraient être utiles pour faire face à la complexité réelle de l'évaluation. Les approches couvertes comprennent l'évaluation des coûts économiques, l'évaluation du développement, la cartographie des résultats, l'évaluation centrée sur l'Afrique, l'évaluation participative, l'évaluation réaliste et l'évaluation axée sur l'utilisation.

Surveillance à l'aide de la théorie des programmes

Le suivi fait référence au suivi de l’avancement d’un programme. Pour ce faire, nous devons comprendre la terminologie du suivi et être capables de suivre la mise en œuvre et les résultats du programme au fil du temps. Dans des cas spécifiques, nous avons également besoin de connaître les indicateurs de suivi locaux et mondiaux ou les exigences de suivi des bailleurs de fonds ainsi qu'une conception d'évaluation (complémentaire) appropriée. Dans ce module, les étudiants apprennent à développer et à appliquer une théorie plausible du programme (ou une explication de ce qui fonctionne et de ce qui ne fonctionne pas dans un domaine spécifique) à la conception et à l'opérationnalisation des cadres de suivi et d'évaluation. Les étudiants apprendront à produire des indicateurs‚ des mesures et des normes appropriés pour des résultats spécifiques du programme et à suivre les progrès du programme par rapport à ceux-ci. De plus, les étudiants seront capables de concevoir un cadre de suivi pour la mise en œuvre du programme en formulant des questions de collecte de données appropriées pour la couverture‚ la prestation de services et l'organisation du programme.

Conception de recherche pour l’évaluation d’impact

Dans ce module, nous nous concentrons sur ce qui est nécessaire pour construire un argument causal (ou impact du programme) au moyen de conceptions de recherche, en d'autres termes : quel type de conceptions de recherche établit si le programme, et rien d'autre, a provoqué des changements observables chez les bénéficiaires. Les étudiants apprennent les différents modèles d'évaluation d'impact expérimentaux et quasi-expérimentaux et comment évaluer leurs forces, leurs limites et leurs applications dans différents contextes d'évaluation. L'engagement critique avec les évaluations publiées en combinaison avec le contenu enseigné fournit aux étudiants une base approfondie sur les principes fondamentaux d'une bonne conception de recherche et d'évaluation.

À la discrétion du chef de section, des modules peuvent être ajoutés ou supprimés.

Calendrier de livraison des cours

Le calendrier de dispense des cours est révisé chaque année pour permettre 3 à 4 semaines d'enseignement en bloc par an. Tous les enseignements en bloc se feront en personne à l'UCT.

BUS5050H et BUS5150H (Thèses de recherche 1 et 2)

Le rapport de recherche vise à évaluer si les étudiants maîtrisent ou non les principes de l'évaluation de programme et sont capables de les appliquer à un programme réel et de construire un rapport de recherche écrit sous la forme d'un mémoire de 60 crédits basé sur cette application.

Les étudiants travaillent en étroite collaboration avec un programme externe (ou client) choisi par l'organisateur du cours. En consultation avec leur superviseur et le client, les étudiants formulent des questions et des niveaux d'évaluation appropriés, effectuent une revue critique de la littérature, élaborent une théorie du programme et révisent la théorie du programme à la suite d'une série de consultations avec les clients, utilisent la littérature d'évaluation pour vérifier la plausibilité du programme. , sélectionner la méthodologie appropriée pour la collecte et l'analyse des données primaires et secondaires, puis présenter la conception finale dans une proposition cohérente d'évaluation de classe, collecter des données primaires pour l'évaluation (entretiens, enquêtes, groupes de discussion, etc.), analyser les données primaires et rédiger les résultats de manière cohérente sous la forme d’un rapport d’évaluation client utile ou d’un mini-mémoire.