Jolicoeur et Associés • Évaluation de programmes

Évaluation de programmes

Études d'évaluation de satisfaction de clientèles

Autres études de consultation ou d'opinion

Évaluation de programmes

Évaluation de la mise en œuvre et de l’impact du Programme Appui aux familles, Centre Dollard Cormier

Le Centre Dollard Cormier est un établissement public de réadaptation pour les personnes souffrant d’alcoolisme, de toxicomanie ou de jeu pathologique. Le Centre veut développer et implanter le Programme Appui aux familles qui est un programme d’intervention directe pour les enfants de 6 à 11 ans présentant des problèmes de comportement externalisés et dont les parents présentent ou ont présenté une consommation de substances psychoactives. Il s’agit donc de conduire une évaluation du processus d’implantation et de l’impact du programme durant 6 ans (2011 à 2016). Cette évaluation implique le suivi du comité de gestion du programme et le suivi des clientèles cibles : les parents et les enfants participant au programme. À cet effet, Madame Nada Saghie et Monsieur Nicolas Toutant ont élaboré un plan de suivi et d’évaluation en mars 2011. De plus, à chaque année, un rapport d’évaluation sera déposé au comité de gestion du programme.

Évaluation du programme "Agir autrement" (SIAA), Ministère de l’Éducation, du Loisir et du Sport

Depuis l’automne 2002, 189 écoles secondaires où se trouve une concentration d’élèves issus d’un milieu défavorisé participent à la stratégie d’intervention "Agir autrement" (SIAA) afin de lutter contre le décrochage scolaire. Après plus de sept ans, le besoin de faire le point sur le sens et le rôle que devrait avoir le processus de planification des écoles SIAA dans la suite des interventions en milieu défavorisé est devenu prioritaire. Dans le cadre de cette évaluation, une consultation a été réalisée sous la forme de neuf (9) groupes de discussion auprès des directions d’écoles, du personnel scolaire, des responsables de commissions scolaires ou des responsables régionaux de la SIAA.

Évaluation de l'implantation du programme "Ma santé, je m'en occupe", Agence de la santé et des services sociaux de Montréal

L’Agence de la santé et des services sociaux de Montréal a offert à ses 12 centres de santé et des services sociaux ce programme d’éducation à la santé afin de les soutenir dans l’implantation de stratégies visant le développement de milieux de travail sains. Le programme Ma santé, je m’en occupe a été élaboré par l’organisme Acti-Menu, une société attachée à la Direction de la prévention de l’Institut de Cardiologie de Montréal (ICM), qui a pour mission d’offrir de l’information, des outils et un accompagnement qui favorisent la prise en charge par les individus de leur santé physique et psychologique ainsi que la mise en place d’environnements sociaux et physiques favorables. L’évaluation consistait à réaliser une analyse documentaire, des entrevues semi structurées auprès des gestionnaires et des groupes de discussion auprès des participants et de non participants.

Évaluation des effets du programme de Soutien aux entreprises à risque de ralentissement économique (SERRÉ), Ministère de l'Emploi et de la Solidarité sociale

Le contexte de ralentissement économique a amené la Commission des partenaires du marché du travail (CPMT) à créer le programme SERRÉ qui soutient les entreprises en leur offrant l’opportunité d’utiliser la réduction des heures de travail pour développer les compétences de leur personnel afin d’atténuer, lorsque possible, les incidences de la baisse des activités dans les entreprises. Les entreprises SERRÉ sont les entreprises privées à but lucratif, les organismes à but non lucratif, les coopératives, les entreprises ou organismes financés à plus de 50 % par des fonds publics et qui font partie du secteur desservi par le comité sectoriel de main-d’œuvre de l’économie sociale et de l’action communautaire et les associations représentant leur personnel. L’objectif du sondage était d’évaluer les processus et les effets du programme SERRÉ, tant du point de vue des entreprises participantes que du point de vue des employés qui étaient à risque d’être mis à pied ou de subir une réduction de leur temps de travail et à qui on a offert des activités de formation.

Évaluation du projet COMPAS (Communauté mobilisée pour la prévention de l’abandon scolaire), Fondation Lucie et André Chagnon

Afin de lutter contre le décrochage scolaire et de favoriser la réussite et l’émancipation des jeunes à l’école, la Fondation Lucie et André Chagnon s’est associée aux partenaires locaux de la MRC de Montcalm afin de mettre sur pied le projet COMPAS (Communauté mobilisée pour la prévention de l’abandon scolaire). Ce projet vise en effet à prévenir l’abandon scolaire auprès de la population des élèves de l’école secondaire de l’Achigan et des écoles primaires situées dans Lanaudière (St-Roch-de-l’Achigan, St-Lin-de-Saint-Esprit) et plus particulièrement auprès d’élèves à risque vivant dans un contexte socio-économique difficile. L’évaluation consistait donc à établir d’une part, dans quelle mesure l’implantation du plan d’action répond aux objectifs initiaux et à mesurer, d’autre part, le degré d’implantation des différentes mesures visant à contrer l’abandon scolaire et soutenir les enfants issus de milieux défavorisés plus à risque.

Évaluation du programme Accèslogis Québec (ALQ), Secrétariat du Conseil du Trésor (SCT)

L’évaluation du programme Accèslogis s’inscrit dans le cadre de l’audit de modernisation du programme AccèsLogis Québec (ALQ) de la Société d’habitation du Québec (SHQ). Créé en 1997, Accèslogis Québec encourage le regroupement des ressources publiques, communautaires et privées, afin de favoriser la réalisation de logements sociaux et communautaires pour des ménages à revenu faible ou modeste, ou pour des clientèles en difficulté ayant des besoins particuliers en habitation. L’évaluation a été réalisée à partir des données disponibles provenant des différents organismes et secteurs impliqués dans les activités d’ALQ et a été construite sur une grille d’analyse d’une trentaine de questions réparties en neuf blocs.

Projet d'expérimentation des équipes tactiques dans les centres locaux d'emploi, ministère de l'Emploi et de la Solidarité sociale

Les équipes tactiques sont des agents d’aide à l’emploi dans les CLE qui interviennent auprès de jeunes prestataires de l’assistance-emploi afin d’expérimenter de nouvelles façons de faire en matière d’intervention auprès des jeunes, de développer leur employabilité ainsi que leur intégration sur le marché du travail. Afin d’évaluer si le projet d’expérimentation répondait aux objectifs visés, nous devions réaliser cinq (5) groupes de discussion auprès de jeunes ayant accepté de participer à leur mise en mouvement et cinq (5) groupes auprès de jeunes ayant refusé, dans les villes de Montréal, Trois-Rivières, Sherbrooke et Chicoutimi. Le second volet consistait à effectuer un sondage téléphonique auprès de 1 000 bénéficiaires de l’intervention de l’équipe tactique.

Évaluation des impacts du Fonds de développement économique de la région de la Capitale-Nationale, Bureau de la Capitale-Nationale

Étant donné que le renouvellement du Fonds est conditionnel à l’évaluation du bien-fondé de ce programme et de sa pertinence, le BCN désirait établir un cadre d’évaluation avec des objectifs clairs et mesurables ainsi que des modalités d’évaluation du programme d’aide financière afin d’en apprécier le rendement et, le cas échéant, d’apporter les changements ou ajustements nécessaires à l’atteinte des objectifs visés. Cette évaluation impliquait donc différents volets tels que l’établissement du modèle logique du Fonds, une recension ainsi qu’une analyse des écrits, des rencontres et entrevues téléphoniques et de groupes auprès des acteurs internes et externes impliqués dans l’administration du Fonds ainsi qu’une consultation auprès des promoteurs, afin d’obtenir leurs points de vue permettant notamment de qualifier les effets du Fonds et ses perspectives d’avenir.

Bilan de la Politique relative aux lieux d'accueil et de renseignements touristiques, ministère du Tourisme du Québec

Ce bilan avait pour objectif de fournir au ministre du Tourisme des orientations afin d’actualiser la Politique, s’il y a lieu, aux besoins exprimés et aux nouvelles tendances en accueil touristique afin de poursuivre l’objectif de doter le Québec d’un réseau d’accueil de qualité. Pour ce faire, nous avons réalisé un sondage par Internet auprès des gestionnaires de près de 250 lieux d’accueil et des 20 Associations touristiques régionales (ATR). En outre, des rencontres sous forme d’entrevues individuelles et de groupe ont été effectuées auprès des administrateurs de la Politique et de leurs partenaires.

Étude sur l’expérimentation du programme « Éthique et culture religieuse », ministère de l’Éducation, du Loisir et du Sport

Huit (8) écoles ont participé à une démarche d’expérimentation d’un programme d’éthique et de culture religieuse, suite à l’adoption, en juin 2005, de la Loi modifiant diverses dispositions législatives de nature confessionnelle dans le domaine de l’éducation. Les huit écoles étaient situées à Québec, Montréal, Sherbrooke, Paspébiac (Gaspésie) et à Gatineau. Ainsi, le présent mandat consistait à tenir des consultations sous forme d’entrevues téléphoniques individuelles auprès d’enseignants du secondaire (3), de directions d’écoles (3) et de conseillers pédagogiques (3), de même que des groupes de discussion auprès d’enseignants (3) et de parents du primaire (3) et d’élèves du secondaire (4). Les entrevues ont été réalisées en français et en anglais.

Évaluation de l'Observatoire du système régional de l'innovation de la Mauricie (OSRIM) auprès de sa clientèle, ministère du Développement économique, de l'Innovation et de l'Exportation

Dans le cadre de l'évaluation de l'Observatoire du système régional de l'innovation de la Mauricie (OSRIM), le Ministère souhaitait réaliser un sondage web et téléphonique afin d'évaluer la pertinence et la satisfaction de la clientèle de l'OSRIM à l’égard des biens livrés. Le Ministère a fourni les coordonnées des clients à rejoindre ainsi que le questionnaire. Les entrevues ont été réalisées en français seulement.

Évaluation de l'Entente de partenariat MAPAQ-UPA sur les services-conseils aux entreprises agricoles, Réseaux Agriconseils

Le rôle des réseaux Agriconseils est de faciliter l’accès aux services-conseils aux entreprises agricoles dans la gestion d’élevage, la gestion des cultures, la gestion financière, la gestion organisationnelle, le transfert de ferme, etc. L’étude visait à savoir si les réseaux Agriconseils répondaient aux besoins des clientèles visées et remplissaient les objectifs ayant mené à leur mise sur pied. L’évaluation comprenait cinq étapes : une modélisation administrative et causale de l’entente MAPAQ-UPA, une étude documentaire des processus, des rencontres avec les gestionnaires du MAPAQ, de l’UPA et des coordinateurs d’Agriconseils, un sondage web auprès des administrateurs des réseaux régionaux et des dispensateurs de services-conseils ainsi qu’un sondage téléphonique auprès des entreprises agricoles utilisatrices et non-utilisatrices.

Évaluation du programme « Placements Culture », Conseil des Arts et des Lettres du Québec

Le programme Placements Culture incite les organismes à but non lucratif des domaines de la culture et des communications à se faire financer par les particuliers, les sociétés privées et les fondations du Québec. En contrepartie, le Conseil accorde aux organismes de la culture et des communications des subventions pour constituer des fonds de dotation et des fonds de réserve. Ainsi, cette évaluation avait pour but d’établir la pertinence du programme en plus d’évaluer si son fonctionnement était adéquat et répondait aux besoins des clientèles visées. L’étude comprenait une analyse documentaire, une rencontre avec les gestionnaires du programme, une analyse de la base de données du Conseil (fiches de demandes des organismes).

Évaluation des programmes complémentaires de protection du revenu (huit évaluations de programme), Financière agricole du Québec, 2006-2008

Afin de savoir si les programmes complémentaires de protection du revenu répondent aux besoins des clientèles visées et remplissent leurs objectifs, La Financière désirait conduire une évaluation des programmes d’assurance stabilisation destinés aux producteurs agricoles du Québec. L’évaluation comprenait une analyse des données disponibles (provenant de la Régie des marchés agricoles et du ministère de l’Agriculture, des Pêcheries et de l’Alimentation), des entrevues individuelles et des groupes de discussion auprès des conseillers et des gestionnaires de La Financière ainsi qu’un sondage téléphonique auprès d’entreprises agricoles ayant bénéficié de ces programmes.

Évaluation des projets pour les travailleurs âgés (PTA) : Projets 2005-2006, du ministère de l’Emploi et de la Solidarité sociale

Les seize Projets pour Travailleurs Âgés (PTA) sont des projets de réinsertion en emploi, visant les travailleurs âgés qui ont récemment été licenciés dans différents secteurs d’activité économique, notamment l’industrie forestière, minière, de fabrication, culturelle, le commerce de gros et de détail. Il s’agissait d’évaluer la pertinence et l’efficacité de ces projets. Nous avons sondé un échantillon de 675 travailleurs, en français (371) et en anglais (4) et avons effectué du dépistage de numéros.

Évaluation du programme Alternativejeunesse, ministère de l’Emploi et de la Solidarité sociale

Créé en mai 2006, le programme Alternative jeunesse est un projet pilote appliqué dans 9 CLE qui sert d’alternative aux jeunes de moins de 25 ans bénéficiant ou admissibles à l’aide sociale. Il comprend diverses activités visant la réinsertion sociale et professionnelle. Avant son implantation dans l’ensemble du Québec en avril 2007, il s’agissait d’évaluer les procédures, les améliorations nécessaires, l’utilité et l’effet du programme ainsi que les attentes et la perception des jeunes. Trois sondages téléphoniques ont été réalisés : auprès des participants actuels (volet 1), des jeunes qui n’ont pas souhaité y participer (volet 2) et des jeunes admissibles, à qui on n’a pas offert le programme (volet 3).

Évaluation de la mesure de financement pour les activités de halte-garderie communautaire, ministère de la Famille, des Ainés et de la Condition féminine

Le Ministère alloue un programme de financement aux 220 organismes communautaires qui offrent des services de halte-garderie. Dans le cadre du projet d’une nouvelle mesure de financement, le Ministère souhaitait dresser un portrait des attentes et besoins de ces organismes quant à leur financement et à leur rôle complémentaire avec le réseau de CPE et garderies. Six groupes de discussion ont été animés par Nicolas Toutant et Jean Jolicoeur, à Montréal (2), Québec (1), Sherbrooke (1), Laval (1) et Longueuil (1), en français. Un questionnaire papier a été remis à chaque participant avant les groupes de discussion pour obtenir des données plus quantitatives, propres à chaque organisme. Dix entrevues individuelles en profondeur ont été réalisées auprès des représentants des organismes.

Évaluation du « Fonds de développement de la Métropole (FDM)» pour le ministère des Affaires municipales et des Régions

Le FDM finance des projets visant le développement social, économique et culturel. L’objectif était d’évaluer les processus, les caractéristiques et les effets du FDM mais aussi de rendre compte de la perception des organismes bénéficiaires quant à la valeur ajoutée apportée à leur projet par le FDM par rapport à d’autres stratégies d’intervention. Le sondage comprenait trois volets : une étude documentaire, deux entrevues en face-à-face auprès des gestionnaires et deux groupes de discussion et enfin, 150 entrevues téléphoniques auprès des promoteurs. Un rapport d’analyse a été produit ainsi qu’une présentation PowerPoint.

Compréhension de l’impact des nouvelles procédures douanières en matière de sécurité et leurs incidences sur l’intérêt porté au « Programme volontaire de lutte contre le terrorisme auprès des entreprises exportatrices du Québec », pour le ministère du Développement économique, de l’Innovation et de l’Exportation et le ministère de l’Agriculture, des Pêcheries et de l’Alimentation

Depuis le 11 septembre 2001, le Programme volontaire de lutte contre le terrorisme (Custom-Trade Partnership Against Terrorism (C-TPAT)) a été mis en place pour augmenter le niveau de sécurité frontalier tout en permettant une circulation fluide des échanges commerciaux entre le Canada et les États-Unis. Comme il s’agit d’un plan de sécurisation de tous les maillons de la chaîne d’approvisionnement des produits exportés, l’étude visait donc à dresser un état des conséquences des nouvelles mesures en vigueur à la frontière sur les entreprises, tout en validant les intentions des exportateurs de se conformer au C-TPAT. Le sondage comportait trois phases : un sondage Internet (via le logiciel Interviewer Web) auprès de 3 500 entreprises exportatrices (incluant des appels téléphoniques préalables pour vérifier les coordonnées), un sondage téléphonique sous forme d’entrevues semi-dirigées en profondeur auprès de 38 grandes entreprises exportatrices et enfin, quatre groupes de discussion auprès de PME exportatrices dont un groupe auprès d’entreprises du secteur agroalimentaire.

Évaluation de quatre programmes d’aide à l’arrêt tabagique pour l’Institut national de santé publique du Québec (Groupe de recherche et de surveillance sur le tabagisme)

Le projet visait à évaluer quatre programmes : le Plan québécois d’abandon du tabagisme (PQAT), le Programme de couverture des aides pharmacologiques (PCAP), les pratiques de counselling en arrêt tabagique des professionnels de la santé et le monitoring des habitudes tabagiques selon les lieux de consommation. Le sondage s’adressait aux fumeurs et anciens fumeurs récents (deux ans et moins) du Québec, en français et en anglais. L’échantillon a été produit aléatoirement parmi la population québécoise, selon trois strates géographiques : RMR de Montréal, autres RMR (Gatineau, Sherbrooke, Trois-Rivières, Québec et Saguenay) et autres régions du Québec.

Évaluation du volet « Développement des compétences » du Programme de consolidation des arts et du patrimoine canadien (PCAPC), pour le ministère du Patrimoine canadien

Le projet consistait à analyser les retombées économiques des investissements accordés par le ministère du Patrimoine Canadien, dans le cadre du volet « Développement des compétences » du PCAPC, aux organismes canadiens voués aux arts et au patrimoine, et à rendre compte des effets mesurables sur les organismes au niveau administratif, financier et organisationnel. Les entrevues ont été réalisées sur le Web (via le logiciel Interviewer Web), en français et en anglais. Un rapport d’analyse ainsi qu’une présentation des données ont été livrés aux représentants du Ministère.

Évaluation du « Programme de réparations d'urgence » (PRU) pour la Société d’Habitation du Québec

Le PRU aide financièrement les propriétaires à très faible revenu lorsque leur propriété présente des défectuosités pouvant mettre en danger la santé et la sécurité des occupants. Il s’agissait donc d’évaluer le programme (objectifs, effets, impacts, pertinence, analyse des processus) auprès des mandataires administratifs (sondage web) et des propriétaires (sondage téléphonique) qui ont bénéficié du PRU. Les listes de noms ont été fournies par le client. Les entrevues ont été réalisées en français et en anglais.

Évaluation du projet personnel d'orientation, recherche sur l'expérimentation 2005-2006 pour la Direction générale de la formation des jeunes du ministère de l'Éducation, du Loisir et du Sport

Le " Projet personnel d'orientation " (PPO) est une démarche d'apprentissage individuelle dans le cadre du programme de formation de l'école québécoise au secondaire. Cette étude consistait à évaluer l'expérimentation du PPO menée en 2005-2006 afin d'effectuer des ajustements d'amélioration au programme. Cette évaluation a été réalisée en diverses phases : groupes de discussion, entrevues en face-à-face, journal de bord et questionnaires papier distribués et ce, auprès de plusieurs types de répondants : 640 élèves, parents de ces élèves, membres du personnel (enseignants, professionnels et agents administratifs). L'étude a été menée auprès d'écoles des régions suivantes : Montréal, la Beauce, la Montérégie et la Gaspésie.