comprendre les évaluations et la production des...
TRANSCRIPT
Comprendre les évaluations et la production des rapports de CIC Atelier de mesure du rendement Partenariat voies vers la prospérité 29 novembre 2015
Objet
• Aperçudel’évalua2onetdelamesuredurendementàCitoyennetéetImmigra2onCanada(CIC)
• Discuterlemesuredurendementetévalua2ondescomposantssuivants:
– Programmed’établissement
– Partenariatslocauxenma2èred’immigra2on(PLI)
– RéseauxenImmigra2onfrancophone(RIF)
2
ÉVALUATION• «Lacollecteetl’analysesystéma2quesde
donnéesprobantesportantsurlesrésultatsdesprogrammesoudespoli2quesafind’enévaluerlaper2nenceetlerendementetdetrouverd’autresmodesdepresta2on»–Poli%quesurl’évalua%onduSCT(2009).
• Lafonc2ond’évalua2onapourrôledeproduireentempsopportundesanalysesetdesconclusionsobjec2ves,crédiblesetfondéessurdesfaitsàl’inten2ondelahautedirec2onetdesges2onnairesdeprogrammes,afind’étayerleprocessusdeprisededécisionsduMinistèreenma2èredepoli2quesetdeprogrammes.
• Lesrésultatsd’évalua2onainsiquelaréponseetlesplansd’ac2ondeladirec2onproposéspourrépondreauxrecommanda2onssontaffichéssurlesiteWebduMinistère.hZp://www.cic.gc.ca/francais/ressources/Éval.ua2on/index.asp
Évalua2onetmesuredurendement(MR)
3
MESUREDURENDEMENT
• LamesuredurendementsertàsurveilleretàévaluerlesprogrèsréalisésversunrésultataZendubiendéfini.
• Unprocessusetunsystèmederecoursauxdonnées/renseignementssurlerendementpourguiderlaprisededécision.
• LaMRn’estpasuneac2vitéisolée,maisfaitpar2ed’uncon2nuumd’ac2vitésdesurveillanceetdeproduc2onderapportsquiontlieutoutaulongducycledevied’unprojet,d’unprogrammeoud’uneini2a2ve.
• LaMRenglobeplusieursdomainesfonc2onnelsdeCIC,commel’évalua2on,larecherche,lesfinancesetlages2onopéra2onnelle.
Lecycledesurveillanceetlaproduc2ondesrapports
4
Concep2ondepoli2quesetdeprogrammes
Élabora2ondelastratégiedemesure
durendement
Miseenoeuvredesstratégies/ou2lsde
données
Surveillanceencon2nuetproduc2on
derapports
Évalua2onduprogramme
Stratégiesdemesuredurendement(SMR)
• Lesstratégiesdemesuredurendementsontdesdocumentsfondamentauxpourlesuiviencon2nuetpériodiquedesrésultatsdesprogrammesetdesini2a2vesetpourlaproduc2onderapportsàleurégard.
• SMRduProgrammed’établissement(2013)
– Renfermeunmodèlelogique,unestratégiedemesuredurendementetunestratégied’évalua2on.
– Lastratégied’évalua2ondécritl’approchegénérale(calendrier,ques2onsgénériques,considéra2onsgénérales).
• ThéorieduchangementdesPartenariatslocauxenma2èred’immigra2on(PLI)[2013]
• ModèlelogiquedesRéseauxenimmigra2onfrancophone(2013)
SMR
5
Miseenœuvredesstratégies/ou2lsdedonnées
• iEDEC– Permetlacollected’informa2onsurlesclientsetservicesdes
programmesd’établissementetderéinstalla2onoffertspardesfournisseursdeservices
• RapportannuelsurlerendementduProjet(RARP)–Servicesdirects
• Rapportannuelsurlerendementdespartenariats
communautaires(RARPC)–Servicesindirects
Données
6
• LeRARPestunrapportnarra6fnormaliséconçupourrecueillirdel’informa2onauprèsdesfournisseursdeservices(FS)surlesrésultatsdesprojetsrela2fsàdesservicesd’établissementdirectsenregarddesrésultatsduProgrammed’établissement
• Ils’agitd’unesourceessen2ellepourlaSMRdu
Programmed’établissement,etpourleRésultatstratégique3del’architectured’alignementdesprogrammes(AAP)duMinistère:Par%cipa%ondesnouveauxarrivantsetdescitoyensàl’appuid’unesociétéintégrée
• LesRARPontétéouserontu2liséspour:– Fournirdesrenseignementsimportantssurlesac2vités
desFS,leurspra2quesexemplairesetlespartenariatsquileurpermeZentd’améliorerlesrésultatsduprojet
– Éclairerlesdécisionsstratégiquesrela2vesauProgrammed’établissement
– Fournirdesdonnéesprobantespourl’évalua2onduProgrammed’établissement
LeRARP:Unesourced’informa2onimportantepourleProgrammed’établissement
7
Élabora'onduRARP
En2010-2011,laDirec%ondel’intégra%onaconsultédesreprésentantsdusecteurdel’établissementetdupersonneldeCICdanslesbureauxrégionauxsurlacréa%ond’unrapportnarra%fnormalisépermeEantauxFSderecueilliretdecommuniquerdesrenseignementsuniformes,queCICpourraitu%liserpourévalueretexprimerlerendementetl’impactgénéralduProgrammed’établissement.Àcompterde2015-2016,lesfournisseursdeservicesontcommencéàentrerleursinforma%onsduRAPRdirectementdansiEDEC.CechangementnormaliselacollectedesdonnéesauprèsdetouslesFSetfacilitel’analysedesdonnéesparCIC.
Données
7
• En2012-2013,CICamisenœuvreleRapportannuelsurlerendementdespartenariatscommunautaires(RARPC)pourfaciliterlaproduc2onderapportsparlesFSquioffrentdesservicesindirectssouslaformedepartenariatscommunautaires.– ComprendlesPartenariatslocauxenma2èred’immigra2on
(PLI)etlesRéseauxenimmigra%onfrancophone(RIF)
• SemblableauRARP,leRARPCestunesourceessen2elled’informa2onssurlesac2vitésdespartenariatscommunautaires,etdonneunaperçuu2lesurlesbesoinsdesnouveauxarrivants,lesenjeuxetlesréussitesdespartenariatsetleslacunesdanslesservices
• LesRARPContcontribuéàéclairerl’analysedespoli2quesetdesprogrammes:– AnalyseconjointeCIC-FCFAdesRARPCantérieurs
(2013-2014).L’analysedesRARPCde2014-2015viendraplustard
– RapportdeCIC:RésultatsdesPartenariatslocauxenma%èred’immigra%on2008-2013
• Cependant,dupointdevuedelaproduc2onderapports,ilexistedesenjeuxquantàlaliaisondesac2vitésdepartenariatàleursimpactsdanslacommunauté
Rapportannuelsurlerendementdespartenariatscommunautaires(RARPC)
8
Informa'onsimportantesrecueillies
LeRARPCseconcentresurlesrésultatsdesac%vitésréaliséesdanslecadredepartenariats,ycompris:– Intrantsetdéveloppementdela
capacitédupartenariat– Élabora%ondelastratégie– Miseenœuvreetincidencesurla
collec%vité– RésultatsduProgramme
d’établissement– Succèsetdéfis– Rétroac%ondespartenaires– Conclusionsetappren%ssage
con%nu
Données
8
Défis• Lastructureouvertedesques2onspeutsusciterlarépé22on.• Certainesorganisa2onsrapportentdesdifficultésàmesurerlesimpactsdansla
communautéetàlierlesac2vitésdesRIF/PLIaveclesrésultatsduProgrammed’établissementdeCIC.
• PourlesRIFenpar2culier,leRARPCn’estpascomplètementalignésurlemodèlelogiquedesRIFpuisquecertainsrésultatssontplutôtalignéssurdesobjec2fsdelaFeuillederoutepourleslanguesofficielles(àsavoirl’aZrac2onetlemain2endenouveauxarrivantsfrancophones).
Forces
• Reflètelestendanceslocalesenétablissementetenintégra2on,selondesrecherchesetdesconsulta2onscommunautaires.
• Donnel’occasiondesoulignerlescontribu2onsdesmembres,ainsiquelesaspectsnovateursoucréa2fsquiontcontribuéàfaciliterlepartenariat.
• Offreuneoccasionimportantepourles2tulairesd’ententesdecontribu2ondefournirleurscommentaires,ainsiquedescommentairesdeleurspartenaires.
Rapportannuelsurlerendementdespartenariatscommunautaires(RARPC)
9
Surveillanceencon2nuetproduc2onderapports
• Rapportspanministérielsàl’inten2ondupublic– Rapportannuelsurlesplansetlespriorités(RPP)hZp://www.cic.gc.ca/francais/ressources/publica2ons/rpp/2015-2016/
index.asp– Rapportsministérielssurlerendement(RMR)hZp://www.cic.gc.ca/francais/ressources/publica2ons/rmr/2014/index.asp
• Surveillanceinterneetproduc2onderapports– Rapports/tableauxdebordtrimestrielsàl’inten2ondelahautedirec2on– Rapportsfinancierstrimestriels/annuels– Rapportspériodiques/adhocàl’inten2ondelahautedirec2on
• Rapportssurlesprogrammesàl’inten2ondupublic
– Vérifica2onsinternes– Évalua2onsdesprogrammes
SetPR
10
Évalua2ondesprogrammes
• Orientéeparunepoli2queduConseilduTrésorauniveaudugouvernementfédéral– Évaluertouteslesdépensesministériellesauxcinqans(100%de
couverture),ycompristouslesprogrammesdesubven2onsetdecontribu2ons.
– Fournirdel’informa2onopportuneetper2nentepourrépondreauxbesoinsdelahautedirec2onetdesintervenants.
• Doitseconcentrersurlesenjeuxfondamentauxdeper2nenceetderendementdesprogrammes– Per2nence:besoinduprogramme,conformitéauxprioritésetaurôledu
gouvernementfédéral.– Rendement:aZeinteenma2èrederésultatsescomptésetd’u2lisa2on
desressources.
• Lesrapportsd’évalua2onsontaffichéssurlesiteWebduMinistère,conformémentauxexigencesdelapoli2que
• (hZp://www.cic.gc.ca/francais/ressources/evalua2on/index.asp)
Éval.
11
• L’évalua2onduProgrammed’établissementestprévuepour2016-2017
– Ellereposerasurplusieurssourcesdedonnées,ycomprislesystèmeiEDEC,lesondagesurlesrésultatsdesclientsenétablissement,l’enquêteauprèsdesFS,l’exercicedeschéma2sa2on,desentrevues,desanalysesdedocuments/d’écrits,l’examendesRARPetdesétudesdecas.
• LesPLIreprésententundomaineprioritaireetserontvisésparl’unedesétudesdecas.
• LesRIFserontexaminésdanslecadredel’évalua2onsimultanéedel’ini2a2ved’immigra2ondanslescommunautésdelangueofficielleensitua2onminoritaire(CLOSM).– L’évalua2onsou2endraégalementl’évalua2onparlegouvernementdela
FeuillederoutepourleslanguesofficiellesduCanada2013-2018.
Évalua2onduProgrammed’établissement
12
Éval.
ÉtudedecasdesPLI
• Accentsur:– GouvernancedesPLI–structures,mécanismes,diversitédepartenaires,
efficacité– Concep2onetexécu2on–Élabora2onetu2lisa2ondeplansstratégiques/
plansd’ac2on,recoursàdiversessourcesdefinancement– Portée–accessibilitédesservices,meilleurepar2cipa2on– Résultats–sensibilisa2on,engagement,coordina2on,innova2on– Facteursderéussiteetdéfis
• Sourcesdedonnées– SondageauprèsdesPLI– Étudedecas/visitessurplace– Examendedocuments/d’écrits(p.ex.plansstratégiques,schéma2sa2ondes
ac2fs,plansd’ac2on,etc.)– ExamendesRARPC– Exercicedeschéma2sa2on(iEDEC)– Profils(iEDEC)– Entrevuesavecdesinformateursclés
Éval.
13
ÉtudedecassurlesRIF
Accentsur:
– Mobilisa2ondespartenairespourétablirdespriorités,planifieretmeZreenœuvredesmesures;
– Coordina2onentrelesfournisseursdeservicesetlesorganisa2onsvisantlapopula2onengénéralpourservirlesimmigrantsfrancophones;
– Sensibilisa2onauxenjeuxconcernantlesfrancophones/CFMpourlesprincipauxintervenantsetsou2enconnexe;
– Recoursàdiversessourcesdefinancement;– Facteursderéussiteetdéfis.
Sourcesdedonnées– SondageauprèsdesRIF– ExamenduRARPC– Examendesdocuments– Entrevues– Exercicedeschéma2sa2on– Profils
Éval.
14
Possibilitésdepar2cipa2on
• ÉtudedecassurlesPLI– 9emplacementssélec2onnéspourdesvisitessurplace
• Ouest:Vancouver,Victoria,norddel’îledeVancouver• Prairies:Calgary• ON:Toronto(danstoutelaville),Peel,Peterborough,SmithsFalls• Atlan2que:St.John’s
– SondageauprèsdetouslescoordonnateursdesPLI• ÉtudedecassurlesRIF
– SondageauprèsdescoordonnateursdesRIF– Entre2ensapprofondisaveccertainscoordonnateursdesRIF
• Évalua2onduProgrammed’établissement– Nombreusespossibilitésdepar2cipa2onpourlesFS
15
• ÉtudedecassurlesPLI– Communiquédelancementenvoyéennovembre– Lacollectededonnéesdevraitseterminerenmars2016
• ÉtudedecassurlesRIF– Lecommuniquédelancementdevraitêtreenvoyéendécembre/janvier– Lacollectededonnéesdevraitseterminerenavril
• Évalua2onduProgrammed’établissement– Lacollectededonnéesdevraitsetermineràl’automne2016
Pourensavoirplus,communiquezavecnous:
– DavidKurfurst,directeurdel’Évalua2on–[email protected]– KimBachmann,directriceadjointe–[email protected]
Échéancesetprochainesétapes
16
ModèlelogiqueduProgrammed’établissement–1eravril2013
Résultatsfinaux
Évalua2onlinguis2que/
Bénéficiairesdefinancement
§ Évalua2onslinguis2ques§ Placementsauxfinsde
forma2onlinguis2que§ Coursformelsde
forma2onlinguis2que§ Séancesinformellesde
forma2onlinguis2que
§ Coursd’alphabé2sa2on
Collec2vitéset
groupes[Employeurs]
Servicesindirects
Résultatsimmédiats
Résultatstratégiqueministériel(RS3)
Résultatsintermédiaires
Presta6ondeservices
Évalua6ondesbesoinsetaiguillage Informa6onetorienta6on Forma6onlinguis6que Servicesliésàl’emploi
§ Évalua2onformelledesbesoins(ycomprislesuivioulesnouvellesévalua2ons)
§ Aiguillageverslesservicesappropriésd’aideàl’établissement
§ Plansd’établissementfondéssurlesbesoinsévaluésetlesobjec2fs
§ Produitsd’informa2on§ Séancesd’orienta2onetateliers(auCanadaetàl’étranger)
§ Counsellingouconsulta2onindividuel(le)oufamilial(e)
§ Forma2onetacquisi2ondescompétencesdebase
§ Forma2onet
perfec2onnementdescompétences
§ Placementsprofessionnels
§ Réseautageliéàl’emploi§ Jumelageclient-mentor§ Orienta2on
professionnelle
§ Par2cipa2ondesnouveauxarrivantsetdescitoyensàl’appuid’unesociétéintégrée(AAP)
§ LesnouveauxarrivantscontribuentàrépondreauxbesoinsduCanadaenma2èrededéveloppement
économique,socialetculturel(AAP)§ Lasociétécanadiennefavorisel’établissementetl’intégra2ondesnouveauxarrivants
§ Lesclientsreçoiventuneinforma2onetdesservicesappropriéspourrépondreàleursbesoinsenma2èred’établissement§ Lesclientssontaucourantdesressourcesdelacommunautéetdesautresressourcespourfairefaceauxproblèmesd’établissement§ LesclientsacquièrentdesconnaissancesdelavieauCanada,ycomprisleslois,lesdroitsetresponsabilités
§ Lesclientsapprennentunelangueofficielleetacquièrentd’autrescompétencespours’adapteràlasociétécanadienne§ Lesclientsacquièrentlesconnaissances,lescompétencesetlescapacitésenlienaveclemilieudetravailcanadien
§ Lesclientsontétablidesliensaveclacollec2vitéetlesins2tu2onspubliques
Liensdanslacommunauté
§ ServicespermeZantd’établirdesliensentrelesnouveauxarrivantsetlesins2tu2onspubliquesetlescollec2vités
§ Interac2onsmul2culturellesetac2vitésconnexes
§ Ac2vitéscommunautaires
Nouveauxarrivants(clientsadmissibles)
Groupescibles
Servicesdirects
Servicesdesou2enoffertspourdonneraccèsauxservicesdirectsdanstoutleProgramme:garded’enfants,transport,traduc2on,interpréta2on,counsellingensitua2ondecriseetdisposi2onspourlespersonneshandicapées
§ LesclientsprennentdesdécisionséclairéesausujetdelavieauCanada,jouissentdeleursdroitsetprennentleurs
responsabilitésauseindelasociétécanadienne
§ LesclientsmeZentàprofitleurconnaissanced’unelangueofficiellepourfonc2onneretpar2ciperauseindelasociétécanadienne
§ Lesclientspar2cipentauxréseauxsociaux,aumarchédutravaillocaletàlacollec2vitédanssonensemble
Élabora6onetges6onde
programmes
§ Lespartenairesetlesintervenantspar2cipentàlaréalisa2ondestratégiesd’établissementetdemiseenœuvrepourrépondreauxbesoinsdesnouveauxarrivants§ Lapresta2ondesservicesd’établissementestuniforme,novatriceetcoordonnée§ Lesservicesd’établissementetlesautresservicesrépondentauxbesoinsdesnouveauxarrivantsetdescollec2vités
Composantesduprogramme
§ Gouvernance
§ Recherchesurlespoli2ques
§ Plansna2onauxetrégionaux
§ Concep2ondeprogramme,stratégiesdemiseenœuvreetou2lsconnexes
§ Surveillancedeprogrammeetcadresdemesuredurendement
§ Orienta2onfonc2onnelle,sou2enetforma2on
§ L’élabora2on,lages2onetlagouvernanceduProgrammeappuientefficacementl’exécu2onuniformeetadaptéeduprogramme.
§ Partenariatscommunautairespourlaplanifica2onetlacoordina2onlocales
§ Ini2a2vesàl’inten2ondesprofessionnelsetdespartenairesexternesausecteurdel’établissement
§ Ini2a2vespourl’accèsaumarchédutravailàl’inten2ondespersonnesforméesàl’étranger
§ Ac2vitésdeplanifica2onetrenforcementdescapacitéspourassurerunepresta2onuniformeàl’échellena2onale
§ Ac2vitésdeforma2onetdeperfec2onnementdescompétences
§ Ac2vitésliéesauxpra2quesexemplairesetprojetspilotesenvued’améliorerlapresta2ondesservices
Extrants
PLI
18
AlimenterlesrésultatsduProgram
me
d’établissementdeCIC
(depuislemodèlelogiqueduProgram
me
d’établissement)
Résultatsintermédiaires
LesconseilsdepartenariatpermeZentunepar2cipa2onimportantedelapartdediversmembres
Lepartenariatpermetunecollabora2onintersectorielle
Lesbesoinsdesnouveauxarrivantsontétédéfinis
Lesatoutsetleslacunesdelacollec2vitéontétéanalysés
Lespartenairesdisposentdesou2lsnécessairespourdevenirplusaccueillants
Unestratégieetdesplansd’ac2onper2nentsontétéélaborésenfonc2ondesbesoinsdesnouveauxarrivantsetdel’analysedesatoutsetdeslacunes
Résultatsimmédiats
Lesservicessontcoordonnésàl’échelledelacollec2vité
L’établissementdeprogrammesetlapresta2ondeservicessontadaptéspardesorganisa2onsnonliéesàl’établissement
Onaméliorel’accèsdesnouveauxarrivantsauxservicesetonaccroîtleurintérêtenversceux-ci
LesPLIonteurecoursàdesressourcesprovenantdediversessources
Entretenirlespartenariatsàl’échelledelacollec2vité
Résultatsfinaux
Lesnouveauxarrivantstrouventunemploicorrespondantàleurscompétencesetàleurexpérience
LesnouveauxarrivantsjouissentdeleursdroitsetagissentconformémentàleursresponsabilitésdanslasociétécanadienneLesCanadiensoffrentunecollec2vitéaccueillantepourfaciliterlapleinepar2cipa2ondesnouveauxarrivantsLesnouveauxarrivantsrépondentauxbesoinsduCanadaenma2èrededéveloppementéconomique,socialetculturel.
De1à2ans De3à5ans 5ansetplus
Renforcerlacapacité Amenerdeschangementsdanslacollec6vité
Améliorerlesrésultatspourlesnouveauxarrivants
Discussionenpe2tsgroupes
• Quellesautresdonnéesetinforma2onsdoiventêtreprisesenconsidéra2ondansl’évalua2ondesrésultatsdesFS,desPLIetdesRIFetdanslaproduc2ongénéralederapportsàleurégard?– Pointsàconsidérer
• Votreexpériencedanslaréalisa2onderapportssurdesprojetspourCIC(p.ex.difficultésdanslaproduc2onderapports,ques2onsquidevraientêtreposées,maisquinelesontpas,etc.)
• Votreexpérienceavecl’iEDEC• Autresinforma2onsquevousrecueillezauxfinsdeproduc2onderapportsàl’interneouquevousfournissezàd’autresorganismesdefinancement