Mainpro+® evaluation

Can Fam Physician. 2020 Sep;66(9):e240-e246.

Abstract

Problem addressed: The Continuing Professional Development (CPD) department of the College of Family Physicians of Canada evaluated the Mainpro+® and CERT+® programs from June 2016 to May 2018 to determine users' awareness of the changes made to each program and to determine user engagement and satisfaction.

Objective of program: To assess changes in CPD program quality, the effects of changes on member understanding of credit reporting and engagement, data accuracy of credit reporting, and the perceptions of the CPD program certification process among providers.

Program description: Surveys and interviews were conducted with stakeholders from both groups, and consultations occurred with a third-party consultant. Administrative data and program files were also analyzed. More than 33 000 users (about 95% of all Mainpro+ participants) have accessed Mainpro+ since its launch. Satisfaction varies, with 31% of members and 39% of non-member Mainpro+ participants expressing difficulty entering activities. Most users (79%) understand the changes implemented. Among CERT+ users, half (50%) find the platform easy to use, whereas 23% find it difficult; 86% find the CPD program submission requirements somewhat or very clear. Project limitations include difficulty comparing data between phases and a lack of qualitative data.

Conclusion: The College of Family Physicians of Canada anticipates these program enhancements will lead to higher-quality CPD programs and greater clarity and efficiency for members and CPD providers. All collected data will be used to inform ongoing improvements to both platforms to improve the experience of all users.

Problème à résoudre: Le Département du développement professionnel continu (DPC) du Collège des médecins de famille du Canada a évalué les programmes Mainpro+® et CERT+® de juin 2016 à mai 2018 pour déterminer si les utilisateurs étaient au courant des changements apportés à chacun des programmes, et pour mesurer la participation et la satisfaction des utilisateurs.

Objectif du programme: Évaluer les changements dans la qualité du programme de DPC, les effets des changements sur la compréhension et l’engagement des membres quant à la déclaration des crédits, l’exactitude des données dans la déclaration des crédits, de même que les perceptions des fournisseurs relatives au processus de certification des programmes de DPC.

Description du programme: Des sondages et des entrevues ont été effectués avec des intervenants des 2 groupes, et des consultations ont eu lieu avec un consultant indépendant. Des données administratives et des dossiers du programme ont aussi été analysés. Plus de 33 000 utilisateurs (environ 95 % de tous les participants à Mainpro+) ont accédé à Mainpro+ depuis son lancement. Le degré de satisfaction varie, et 31 % des membres et 39 % des non-membres participant à Mainpro+ ont indiqué éprouver des difficultés à accéder aux activités. La majorité des utilisateurs (79 %) comprennent les changements mis en œuvre. La moitié des utilisateurs de CERT+ (50 %) trouve la plateforme facile à utiliser, tandis que 23 % la trouvent difficile; 86 % estiment que les exigences pour présenter un programme de DPC sont assez ou très claires. Parmi les limites du projet figurent la difficulté de comparer les données entre les étapes et le manque de données qualitatives.

Conclusion: Le Collège des médecins de famille du Canada prévoit que ces améliorations au programme entraîneront des programmes de DPC de qualité supérieure, de même qu’une clarté et une efficacité accrues pour les membres et les fournisseurs de DPC. Toutes les données recueillies serviront à éclairer les améliorations continues apportées aux 2 plateformes afin d’offrir une meilleure expérience à tous les utilisateurs.

MeSH terms

  • Canada
  • Clinical Competence*
  • Education, Medical, Continuing*
  • Humans
  • Physicians, Family
  • Program Development