Statistics and Psychometrics Specialist

Job Title:

Statistics and Psychometrics Specialist

The McLaughlin Centre for Evaluation (TMCE) – Exams Quality Assurance (EQA)

Permanent

Today, the Royal College has over 55,000 members, and the vision remains to advance the learning for specialist physicians to deliver the best health care for all. The Royal College partners and collaborates to lead the evolution of specialty medical education and standards; support specialist physicians, learners and teams to continuously improve; and advocate for excellence in specialty medicine by supporting innovation, well-being, equity and person-centered care. We are a national, nonprofit organization established in 1929 by a special Act of Parliament to oversee the medical education of specialists in Canada.

Reporting to the Manager, Exam Quality and Analytics, the Statistics and Psychometrics Specialist supports the assessments of specialty physicians by providing advice that guides and informs the direction of exam development, exam quality improvement, and assessment practices to ensure fair and valid assessments.

The Statistics and Psychometrics Specialist contributes to decision making by collecting, analyzing, and presenting data. Working in a team environment, the Statistics and Psychometrics Specialist is responsible for the accuracy and consistency of exam data, provides statistical analysis, performs quality assurance, and research studies on examination data and information for specialty and sub-specialty exams. The Statistics and Psychometrics Specialist conducts and publishes research related to Royal College examinations and assessment activities.

Here’s an insight into your typical day to day:

Perform statistical and psychometric analysis of examination data and conduct quality assurance studies to ensure the integrity and quality of the data.

Produce psychometric reports that present examination result information so that the information may be consumed by candidates, board/committee members and/or Royal College leadership.

Guide and inform the direction of exam development, exam quality improvements, and assessment practices of the Royal College to ensure fair and valid exams.

Contribute to decision making of exam design and results to ensure the reliability and quality of the exams.

Support internal and external stakeholders in the development of fair and valid exams by guiding the stakeholders in applying best practices and Royal College policies.

Does this sound like you?

Level of education, training, and experience equivalent to a master’s degree in statistics, mathematics, education, or psychology.

Six years of experience performing statistical analysis.

Advanced knowledge of parametric/non-parametric and regression techniques; of one or more statistical software tools (e.g., SAS, SPSS, Stata, R); as well as experience and/or familiarity with relational database systems (e.g., SQL, MS Access).

Experience in data management, databases, and analytical skills, with knowledge of statistical methodology.

Exceptional attention to detail and accuracy in handling quantitative data and information.

Experience working with, interpreting, and communicating data results.

Ability to communicate complex ideas in simple terminology and present to different audiences.

Advanced knowledge of Microsoft Office applications (Excel, Word, Outlook, etc.)

How to get noticed?

Please apply through our UKG recruitment platform with your résumé, covering letter and salary expectations by October 15, 2026.

The Royal College invites applications from all qualified applicants. The Royal College is strongly committed to employment equity and diversity in the workplace and encourages applications from Black, racialized/visible minorities, Indigenous/Aboriginal people, women, persons with disabilities, and 2SLGBTQQIA+ persons.

We sincerely thank all applicants for their interest; however, we will only contact those under consideration. An eligibility list may be established for similar positions of various tenures. The list will be retained for a maximum period of 3 years.

The Royal College supports a hybrid work environment which includes a combination of working both onsite in Ottawa and from home.

The Royal College will provide support in its recruitment processes for applicants with disabilities, including accommodation that considers an applicant’s accessibility needs. If you require accommodations during the interview process, please contact careers@royalcollege.ca

Please note that the job advertisement will no longer be available once the position has closed.

Band 7 - Salary ranges from $78,548.00 to $98,236.00

----------------------------------------------------

Titre du poste
Spécialiste des statistiques et de la psychométrie
Centre d’évaluation McLaughlin (CEM) – Assurance de la qualité des examens
Permanent

Les statistiques et les évaluations vous passionnent? Désirez-vous contribuer au système de soins de santé canadien? Si c’est le cas, nous avons un rôle enrichissant à vous proposer. Le ou la spécialiste des statistiques et de la psychométrie appuie les évaluations des médecins spécialistes et oriente l’élaboration des examens, l’amélioration de la qualité des examens et les pratiques d’évaluation au Collège royal. Date limite : 15 octobre, 2026.

Le Collège royal des médecins et chirurgiens du Canada compte aujourd’hui plus de 55 000 membres, mais sa vision reste la même : faire progresser l’apprentissage des médecins spécialistes pour offrir les meilleurs soins de santé à toute la population. De façon concertée et en partenariat, le Collège royal dirige l’évolution de la formation médicale spécialisée et des normes dans ce domaine, et contribue ainsi à l’amélioration constante des médecins spécialistes, de la communauté apprenante et des équipes professionnelles. En outre, son appui à l’innovation, au bien-être, à l’équité et aux soins centrés sur la personne reflète son engagement à l’égard de l’excellence en médecine spécialisée. Le Collège royal est un organisme d’envergure nationale et sans but lucratif créé en 1929 en vertu d’une loi spéciale du Parlement pour encadrer la formation médicale des spécialistes au Canada.

Relevant de la gestionnaire, Qualité et analytique des données des examens, le ou la spécialiste des statistiques et de la psychométrie appuie les évaluations des médecins spécialistes en fournissant des conseils qui orientent la conception des examens, l’amélioration de la qualité des examens et les pratiques d’évaluation afin d’assurer la validité et l’équité des évaluations.

Le ou la spécialiste en statistiques et en psychométrie contribue à la prise de décision en recueillant, en analysant et en présentant des données. Travaillant en équipe, il ou elle est responsable de l’exactitude et de la cohérence des données des examens, effectue des analyses statistiques, des contrôles de la qualité et des études de recherche sur les données et l’information des examens de 63 spécialités et surspécialités. Le ou la spécialiste des statistiques et de la psychométrie mène et publie des recherches liées aux examens et aux activités d’évaluation du Collège royal.

Aperçu de vos tâches quotidiennes
• Procéder à l’analyse statistique et psychométrique des données d’examen et à des études d’assurance de la qualité pour assurer l’intégrité et la qualité des données.
• Produire des rapports psychométriques qui présentent les résultats d’examen afin que les personnes candidates, les membres des comités et les têtes dirigeantes du Collège royal puissent en prendre connaissance.
• Orienter la direction de l’élaboration des examens, de l’amélioration de la qualité des examens et des pratiques d’évaluation du Collège royal afin d’assurer le caractère valide et équitable des examens.
• Contribuer à la prise de décisions concernant la conception et les résultats des examens afin d’en assurer la fiabilité et la qualité.
• Aider les partenaires internes et externes à concevoir des examens justes et valides en les guidant dans l’application des pratiques exemplaires et des politiques du Collège royal.

Le profil suivant vous correspond?
• Scolarité, formation et expérience équivalentes à une maîtrise en statistiques, en mathématiques, en éducation ou en psychologie.
• Six ans d’expérience de l’analyse statistique.
• Connaissance approfondie des techniques paramétriques et non paramétriques et des techniques de régression, ainsi que d’au moins un logiciel de statistiques (p. ex., SAS, SPSS, Stata, R); et connaissance ou expérience des systèmes de base de données relationnelles (p. ex., Oracle, SQL, MS Access).
• Expérience de la gestion de données et de bases de données, compétences analytiques et connaissance de la méthodologie statistique.
• Minutie exceptionnelle dans le traitement des données et de l’information quantitatives.
• Expérience du travail en résultats de données : interprétation et communication de ces résultats.
• Capacité de communiquer des idées complexes en termes simples et de les présenter à différents auditoires.
• Connaissance approfondie des applications Microsoft Office (Excel, Word, Outlook, etc.)

Pour postuler
Veuillez poser votre candidature dans la plateforme de recrutement UKG, et joindre votre curriculum vitæ, une lettre de motivation et vos attentes salariales, d’ici le 15 octobre, 2026.

Le Collège royal invite toutes les personnes qualifiées à postuler. Fermement engagé à respecter l’équité en matière d’emploi et la diversité en milieu de travail, il encourage les personnes noires, autochtones ou appartenant à un groupe ethnique particulier, les femmes, ainsi que les personnes handicapées et 2ELGBTQI+ à poser leur candidature.

Nous remercions toutes les personnes qui manifestent leur intérêt, mais nous ne communiquerons qu’avec celles dont la candidature aura été retenue. Une liste d’admissibilité pourrait être établie afin de pourvoir des postes similaires de durées diverses. La liste sera conservée pendant 3 ans.

Le Collège royal favorise un mode de travail hybride, combinant le travail sur place à Ottawa et le travail à domicile.

Le Collège royal apportera son soutien aux personnes handicapées dans le cadre de ses processus de recrutement, notamment en proposant des mesures d’adaptation qui tiennent compte de leurs besoins en matière d’accessibilité. Si vous souhaitez vous en prévaloir, communiquez avec nous à l’adresse careers@collegeroyal.ca.

Échelon 7 – Fourchette salariale : 78,548 $ à 98,236 $ (110%- 106,989.30 $