Statistics and Psychometrics Specialist

Exams Quality Assurance (EQA)

Temporary up to 12-month contract

Today, the Royal College has over 55,000 members and the vision remains to advance the learning for specialist physicians to deliver the best health care for all. The Royal College partners and collaborates to lead the evolution of specialty medical education and standards; support specialist physicians, learners and teams to continuously improve; and advocate for excellence in specialty medicine by supporting innovation, well-being, equity and person-centered care. We are a national, nonprofit organization established in 1929 by a special Act of Parliament to oversee the medical education of specialists in Canada.

Reporting to the Manager, Exam Quality and Analytics, the Statistics and Psychometrics Specialist supports the assessments of specialty physicians by providing advice that guides and informs the direction of exam development, exam quality improvement, and assessment practices to ensure fair and valid assessments.

The Statistics and Psychometrics Specialist contributes to decision making by collecting, analyzing, and presenting data. Working in a team environment, the Statistics and Psychometrics Specialist is responsible for the accuracy and consistency of exam data, provides statistical analysis, performs quality assurance, and research studies on examination data and information for specialty and sub-specialty exams. The Statistics and Psychometrics Specialist conducts and publishes research related to Royal College examinations and assessment activities.

Here’s an insight into your typical day-to-day:

• Perform statistical and psychometric analysis of examination data and conduct quality assurance studies to ensure the integrity and quality of the data.
• Produce psychometric reports that present examination result information so that the information may be consumed by candidates, board/committee members and/or Royal College leadership.
• Guide and inform the direction of exam development, exam quality improvements, and assessment practices of the Royal College to ensure fair and valid exams.
• Contribute to decision making of exam design and results to ensure the reliability and quality of the exams.
• Support internal and external stakeholders in the development of fair and valid exams by guiding the stakeholders in applying best practices and Royal College policies.

Does this sound like you?

• Level of education, training, and experience equivalent to a master’s degree in statistics, mathematics, education, or psychology.
• Six years of experience performing statistical analysis.
• Advanced knowledge of parametric/non-parametric and regression techniques; of one or more statistical software tools (e.g., SAS, SPSS, Stata, R); as well as experience and/or familiarity with relational database systems (e.g., SQL, MS Access).
• Experience in data management, databases, and analytical skills, with knowledge of statistical methodology.
• Exceptional attention to detail and accuracy in handling quantitative data and information.
• Experience working with, interpreting, and communicating data results.
• Ability to communicate complex ideas in simple terminology and present to different audiences.
• Advanced knowledge of Microsoft Office applications (Excel, Word, Outlook, etc.)

How to get noticed?

Please apply through our UKG recruitment platform with your résumé, covering letter and salary expectations by August 3, 2025.

The Royal College invites applications from all qualified applicants. The Royal College is strongly committed to employment equity and diversity in the workplace and encourages applications from Black, racialized/visible minorities, Indigenous/Aboriginal people, women, persons with disabilities, and 2SLGBTQIA+ persons. In accordance with Canadian immigration requirements, Canadian citizens and permanent residents of Canada will be given priority.

We sincerely thank all applicants for their interest; however, we will only contact those under consideration. An eligibility list may be established for similar positions of various tenures. The list will be retained for a maximum period of 18 months.

The Royal College supports a hybrid work environment which includes a combination of working both onsite in Ottawa and from home.

The Royal College will provide support in its recruitment processes to applicants with disabilities, including accommodation that considers an applicant’s accessibility needs. If you require accommodations during the interview process, please contact careers@royalcollege.ca

Please note that the job advertisement will no longer be available once the position has closed.

Band 7 - Salary ranges from $77,770.00 to $97,263.00

-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-0-

Spécialiste des statistiques et de la psychométrie

Assurance de la qualité des examens

Contrat temporaire d’une durée maximale de 12 mois

Les statistiques et les évaluations vous passionnent? Vous désirez contribuer au système de soins de santé canadien? Si c’est le cas, nous avons un rôle enrichissant à vous proposer. En votre qualité de spécialiste des statistiques et de la psychométrie, vous appuierez les évaluations des médecins spécialistes et orienterez l’élaboration des examens, l’amélioration de la qualité des examens et les pratiques d’évaluation au Collège royal. Fin : 3 août 2025.

Le Collège royal des médecins et chirurgiens du Canada compte aujourd’hui plus de 55 000 membres, mais sa vision reste la même : faire progresser l’apprentissage des médecins spécialistes pour offrir les meilleurs soins de santé à toute la population. De façon concertée et en partenariat, le Collège royal dirige l’évolution de la formation médicale spécialisée et des normes dans ce domaine, et contribue ainsi à l’amélioration constante des médecins spécialistes, de la communauté apprenante et des équipes professionnelles. En outre, son appui à l’innovation, au bien-être, à l’équité et aux soins centrés sur la personne reflète son engagement à l’égard de l’excellence en médecine spécialisée. Le Collège royal est un organisme d’envergure nationale et sans but lucratif créé en 1929 en vertu d’une loi spéciale du Parlement pour encadrer la formation médicale des spécialistes au Canada.

Relevant du ou de la gestionnaire, Qualité et analytique des données des examens, vous appuierez les évaluations des médecins spécialistes en fournissant des conseils qui orientent la conception des examens, l’amélioration de la qualité des examens et les pratiques d’évaluation afin d’assurer la validité et l’équité des évaluations.

Vous contribuerez à la prise de décision en recueillant, en analysant et en présentant des données. Travaillant en équipe, vous serez responsable de l’exactitude et de la cohérence des données des examens, effectuerez des analyses statistiques, des contrôles de la qualité et des études de recherche sur les données et l’information des examens de spécialités et surspécialités. Vous mènerez et publierez des recherches liées aux examens et aux activités d’évaluation du Collège royal.

Aperçu de votre rôle au quotidien

• Procéder à l’analyse statistique et psychométrique des données d’examen et à des études d’assurance de la qualité pour assurer l’intégrité et la qualité des données.
• Produire des rapports psychométriques qui présentent les résultats d’examen afin que les personnes candidates, les membres des comités et les têtes dirigeantes du Collège royal puissent en prendre connaissance.
• Orienter la direction de l’élaboration des examens, de l’amélioration de la qualité des examens et des pratiques d’évaluation du Collège royal afin d’assurer le caractère valide et équitable des examens.
• Contribuer à la prise de décisions concernant la conception et les résultats des examens afin d’en assurer la fiabilité et la qualité.
• Aider les partenaires internes et externes à concevoir des examens justes et valides en les guidant dans l’application des pratiques exemplaires et des politiques du Collège royal.

Ce profil vous correspond?

• Scolarité, formation et expérience équivalentes à une maîtrise en statistiques, en mathématiques, en éducation ou en psychologie.
• Six ans d’expérience de l’analyse statistique.
• Connaissance approfondie des techniques paramétriques et non paramétriques et des techniques de régression, ainsi que d’au moins un logiciel de statistiques (p. ex. SAS, SPSS, Stata, R); et connaissance ou expérience des systèmes de base de données relationnelles (p. ex. Oracle, SQL, MS Access).
• Expérience de la gestion de données et de bases de données, compétences analytiques et connaissance de la méthodologie statistique.
• Minutie exceptionnelle dans le traitement des données et de l’information quantitatives.
• Expérience du travail en résultats de données : interprétation et communication de ces résultats.
• Capacité de communiquer des idées complexes en termes simples et de les présenter à différents auditoires.
• Connaissance approfondie des applications Microsoft Office (Excel, Word, Outlook, etc.)

Pour postuler

Veuillez poser votre candidature dans la plateforme de recrutement UKG, et joindre votre curriculum vitæ, une lettre de motivation et vos attentes salariales d’ici le 3 août 2025.

Le Collège royal invite toutes les personnes qualifiées à postuler. Fermement engagé à l’égard de l’équité en matière d’emploi et de la diversité en milieu de travail, il encourage les personnes noires, autochtones ou appartenant à un groupe ethnique particulier, les femmes, ainsi que les personnes handicapées et 2SLGBTQIA+ à poser leur candidature. Conformément aux exigences de l’immigration au Canada, ceux et celles qui ont obtenu la citoyenneté canadienne ou leur résidence permanente auront la priorité.

Nous remercions toutes les personnes qui manifestent leur intérêt, mais nous ne communiquerons qu’avec celles dont la candidature aura été retenue. Une liste d’admissibilité pourrait être établie afin de pourvoir des postes similaires de durées diverses. La liste sera conservée pendant 18 mois.

Le Collège royal favorise un mode de travail hybride, combinant le travail sur place à Ottawa et le travail à domicile.

Le Collège royal apportera son soutien aux personnes handicapées dans le cadre de ses processus de recrutement, notamment en proposant des mesures d’adaptation qui tiennent compte de leurs besoins en matière d’accessibilité. Si vous souhaitez vous en prévaloir, communiquez avec nous à l’adresse careers@collegeroyal.ca.

Veuillez noter qu’il ne sera plus possible de consulter cette offre d’emploi une fois que le poste sera pourvu.

Échelon 7 – Salaire de 77 770 $ à 97 263 $