CD Val d'Oise
Le Val d’Oise compte près de 35 000 bénéficiaires du RSA. Le Conseil départemental pilote et finance à hauteur de 7M€ un Programme départemental d’insertion (PDI) pour accompagner les bénéficiaires du RSA.
Les actions d’insertion ont-elles un réel impact sur le retour à l’emploi et sur la qualité de vie des personnes accompagnées ? Tous les bénéficiaires ne sont pas accompagnés dans le cadre du PDI : et pour les autres, que se passe-t-il ?
Mesurer l’impact sur le retour à l’emploi des actions du PDI par les méthodes de randomisation et d’appariement statistique.
Engagée à l’initiative du Directeur général des services, la mesure d’impact vise à objectiver les performances des actions d’insertion du PDI, en comparant leurs résultats à ceux obtenus pour des personnes qui n’ont pas été accompagnées par ces actions.
Le Conseil départemental, commanditaire du projet, a engagé une démarche de mesure d’impact relative à plusieurs dispositifs d’accompagnement des allocataires du RSA
Les allocataires du RSA, dont le Département souhaite favoriser le retour à l’emploi en concentrant ses ressources financières sur les dispositifs d’accompagnement les plus performants.
Deux protocoles de mesure d’impact ont été définis avec l’appui des services métiers concernés et d’un prestataire expert en data-science. Le laboratoire Mesure d’impact social de l’ESSEC a également été mobilisé pour apporter une caution scientifique et pédagogique au dispositif. Les deux protocoles ont concerné :
Une mesure d’impact par randomisation de deux parcours d’accompagnement innovants sur le territoire Val Parisis, avec deux groupes « test » de 900 bénéficiaires du RSA et un groupe « témoin » de 450 bénéficiaires. Chacun des groupes a été composé par tirage aléatoire, les deux groupes « test » ayant été accompagnés pendant un an par :
– La plateforme Neojob, pour la mise en relation avec des employeurs pour l’un des groupes,
– un incubateur-accélérateur de l’emploi autour d’un espace de co-working pour l’autre groupe.
Une mesure par appariement en comparant les parcours de 3 cohortes de bénéficiaires accompagnés les uns dans le cadre du PDI, les autres par Pôle emploi, et la troisième par Pôle Emploi et PDI, avec le suivi d’une cohorte témoin de bénéficiaires n’ayant sollicité aucun suivi composé à l’échelle départementale, par tirage aléatoire, à partir des bénéficiaires présents au 1er juillet 2017.
La mesure d’impact a consisté à suivre le taux de « sorties positives » des bénéficiaires (emploi durable, création d’activité, entrée en formation) à fréquence semestrielle, durant 24 mois.
Le projet fait l’objet de deux articles, l’un à vocation scientifique, l’autre à vocation pédagogique, co-rédigés avec l’ESSEC, avec l’appui du cabinet MFGLab. Ces articles ont vocation à documenter et valoriser les travaux de mesure d’impact.
La mesure d’impact par randomisation a été conduite de janvier 2018 à décembre 2019, pendant les 12 mois d’accompagnement des bénéficiaires, et durant une période de 12 mois après la fin de cet accompagnement.
Le suivi des cohortes a été reconstitué sur la période de juillet 2017 à décembre 2018.
L’étude a par ailleurs fortement mobilisé les équipes de la Direction de la Vie sociale du Conseil départemental pour assurer les extractions et la collecte des données à fréquence semestrielle sur la situation des bénéficiaires concernés. Elle a également mobilisé l’expertise du laboratoire Mesure d’impact social de l’ESSEC.
L’étude a mobilisé 33K€ TTC pour le recours à un prestataire en data-science qui a assuré :
– La validité de la constitution des échantillons pour l’étude par randomisation ;
– Le calcul des résultats et des intervalles de confiance ;
– L’appariement des individus entre échantillons pour l’étude sur les cohortes ;
– L’expertise scientifique pour la rédaction de l’article.
La démarche de mesure d’impact réalisée a permis de démontrer l’intérêt de recourir à des méthodes rigoureuses et scientifiques pour mesurer la performance des dispositifs d’accompagnement des allocataires. Si la mesure n’a ici porté que sur le seul retour à l’emploi des allocataires, la prise en compte de variables complémentaires permettra de mesurer d’autres bénéfices concernant le logement, la qualification ou encore la mobilité.
A la lumière de cette expérience, des démarches de mesure d’impact sont également engagées dans d’autres domaines (insertion des jeunes, éducation).
Pour l’étude par randomisation sur le territoire de Val Parisis, après 18 mois, la proportion de sorties « positives » (emploi, formation ou création d’activité) s’élève à 25,2% et 25,7% pour les groupes accompagnés dans les deux parcours expérimentés. Cette performance est supérieure de plus de 2 points par rapport au taux de sorties des bénéficiaires accompagnés dans les parcours habituels.
En ce qui concerne les cohortes, les mesures mettent en évidence un meilleur taux de retour à l’emploi dès la première année pour les allocataires accompagnés par rapport à ceux qui ne le sont pas du tout. Cette « sur-performance » est de 5,6 point supérieure pour les allocataires accompagnés à la fois dans le PDI et par Pôle emploi.