Programme pour les leaders de demain du ministère de la Justice, Évaluation formative de la version pilote
3. MÉTHODOLOGIE
- 3.1. Entrevues auprès des principaux répondants
- 3.2. Sondage auprès de la population cible
- 3.3. Recensement de la documentation
- 3.4. Limites
3. MÉTHODOLOGIE
La présente évaluation est conçue au moyen de trois grandes méthodes de recherche : les entrevues auprès des principaux répondants; un sondage auprès de la population cible; un recensement de la documentation. Tant les entrevues que le sondage ont comporté quelques questions d’évaluation.
3.1. Entrevues auprès des principaux répondants
L’évaluation a comporté des entrevues auprès de membres de tous les groupes d’intervenants principaux :
- Les participants à la version pilote du Programme
- Les cadres et les superviseurs immédiats des participants
- Les cadres supérieurs
- Les cadres en ressources humaines (y compris un représentant de l’équité en matière d’emploi)
- Les membres du comité de sélection du Programme
- L’équipe du Programme, y compris les spécialistes et un expert-conseil du Projet d’apprentissage par l’action axé sur les activités (avril-octobre 2007).
En tout, il y a eu 32 répondants aux entrevues en novembre et en décembre 2007.
3.2. Sondage auprès de la population cible
Dans le cadre de la présente évaluation, un sondage Web a eu lieu. Des 2 288 employés du Ministère admissibles au Programme pendant la période de recrutement, c.-à-d. de juin à septembre 2006, 935 ont reçu un questionnaire en novembre 2007. Cet échantillon de 935 employés se composait de :
- 101 personnes ayant présenté une demande de participation au Programme (tant les personnes reçues au Programme que celles rejetées de celui-ci);
- 174 personnes jugées admissibles de par leur appartenance aux trois groupes désignés et ciblés, d’après les dossiers du Ministère, mais qui n’ont pas présenté de demande au Programme;
- 660 sondés choisis aléatoirement parmi 2 013 personnes admissibles au Programme mais n’ayant pas présenté de demande.
À ce sondage en ligne que la Division de la recherche et de la statistique a fait passer, 202 personnes (soit 22 % de l’échantillon) ont répondu. Ce taux de réponse correspond à peu près à la moyenne de celui des sondages en ligne. Le tableau 1 montre les caractéristiques de la population cible, composé de l’échantillon et des répondants au sondage. Compte tenu des données du tableau, les répondants au sondage sont représentatifs de la population cible en ce qui touche la répartition par groupe professionnel; les pourcentages d’employés provenant de bureaux régionaux et de groupes désignés dans l’équité en matière d’emploi parmi les répondants au sondage sont cependant supérieurs à ceux de la population cible.
Tableau 1 : Caractéristiques de l’échantillon du sondage et des répondants
| Population | Échantillon[1] | Répondants | ||||
|---|---|---|---|---|---|---|
| Groupe professionnel | Nombre | Pourcentage | Nombre | Pourcentage | Nombre | Pourcentage |
| LA | 2 058 | 90 | 850 | 91 | 182 | 90 |
| Autre groupe professionel | 230 | 10 | 85 | 9 | 20 | 10 |
| Total | 2 288 | 100 | 935 | 100 | 202 | 100 |
| Population | Échantillon[1] | Répondants | ||||
|---|---|---|---|---|---|---|
| Membre de groupe désigné (déclaration volontaire) | Nombre | Pourcentage | Nombre | Pourcentage | Nombre | Pourcentage |
| Oui | 174 | 8 | 174 | 19 | 46 | 29 |
| Non | 2 114 | 92 | 761 | 81 | 114 | 71 |
| Total | 2 288 | 100 | 935 | 100 | 160 | 100 |
| Population | Échantillon[1] | Répondants | ||||
|---|---|---|---|---|---|---|
| Endroit | Nombre | Pourcentage | Nombre | Pourcentage | Nombre | Pourcentage |
| RCN | 1 336 | 58 | 554 | 59 | 88 | 48 |
| Bureau régional | 952 | 42 | 381 | 41 | 95 | 52 |
| Total | 2 288 | 100 | 935 | 100 | 183 | 100 |
3.3 Recensement de la documentation
Le recensement de la documentation est de portée limitée, car le Programme est nouveau et de portée relativement restreinte. Néanmoins, la documentation fondamentale suivante a permis d’obtenir dans une certaine mesure un contexte et des éclaircissements utiles par rapport au Programme.
Ministère de la Justice du Canada, « Accroître sa représentation de membres de groupes désignés d’équité en matière d’emploi au niveau des cadres supérieurs – options pour action », exposé à l’équipe du sous-ministre, le 25 mai 2004.
« Programme pour les leaders de demain du ministère de la Justice : un aperçu », exposé au Comité de gestion des ressources humaines, le 2 mars 2006.
« Plan d’équité en matière d’emploi (1er avril 2006 au 31 mars 2009) », dossier de présentation du document de planification, avril 2006.
« Programme pour les leaders de demain du ministère de la Justice : Mise à jour de COMRH », exposé au Comité de gestion des ressources humaines, le 8 mai 2006.
« Repérer nos futurs dirigeants du ministère de la Justice », note provenant de l’équipe du sous-ministre, no 458, le 27 juin 2006.
« Programme pilote pour les leaders de demain du ministère de la Justice (PLDMJ) », exposé au Comité de gestion des ressources humaines, le 14 décembre 2006.
Articles de fond parus dans JustInfo : vol. VIII, no 13, juin 2006; vol. IX, no 8, mai 2007; vol. IX, no 33, décembre 2007.
« Évaluation des candidats du PLDMJ et Statistiques des membres de groupes désignés du PLDMJ », document de travail, 2006.
Dowell, Maggie, ministère de la Justice Canada, « Programme pour les leaders de demain du ministère de la Justice : « Il n’y a pas de leaders formés, seulement des leaders en formation », exposé d’orientation aux participants au Programme, février 2007.
Ginsberg Gluzman Fage Levitz, École de la fonction publique du Canada – Fonds de stimulation de l’innovation par l’apprentissage, Rapport de vérification, le 8 février 2005.
HayGroup, Programme de perfectionnement accéléré des cadres supérieurs (PPACS) – Évaluation du programme, Rapport final, le 13 août 2002.
3.4. Limites
Il convient de souligner que la présente évaluation est de nature formative et qu’elle porte, à ce titre, sur la mise en place du Programme (sa rationale, ses activités et ses extrants) plutôt que sur ses résultats ou son incidence. Cette réalité est imputable en grande partie au fait que la version pilote du Programme en soit encore à l’étape de la mise en place, processus qui s’étend sur plus de deux ans. En outre, il est possible que les résultats à long terme du Programme nécessitent encore quelques années avant de se concrétiser pleinement.
Il convient également de souligner que dans le cadre du sondage, l’obtention d’un taux de réponse élevé et de renseignements étoffés, provenant plus particulièrement de certains segments de la population cible, a été davantage privilégiée que la représentativité de l’échantillon. À titre d’exemple, il y a eu suréchantillonnage des membres de groupes désignés dans l’équité en matière d’emploi et des personnes participant actuellement au Programme, de façon à pouvoir recueillir suffisamment de renseignements importants aux fins de l’évaluation. C’est ainsi que le sondage a apporté des éclaircissements importants sur de nombreux volets fondamentaux à la mise en place du Programme.
[1] Pour des raisons de confidentialité, l’identité et les caractéristiques des membres de groupes désignés sont demeurées secrètes. Les données de cette colonne constituent des estimations résultant de l’hypothèse selon laquelle un pourcentage de gens appartenant au groupe LA ou travaillant dans la RCN sont les mêmes pour les membres de groupes désignés et de personnes n’étant pas membres de groupes désignés.
- Date de modification :