Le programme

Le programme de Stagiaires de recherche postdoctorale du CNRC offre un accès à des installations uniques de classe mondiale, ainsi que la possibilité de travailler au côté d'équipes multidisciplinaires qui regroupent des chercheurs et des techniciens de haut calibre dans le cadre de projets de grande importance pour le Canada. Les stagiaires effectueront des activités de recherche et développement portant sur des projets innovateurs offrant des opportunités de développement de carrière (par l'entremise de publications et/ou d'interactions avec l’industrie). Les stagiaires travailleront dans un laboratoire sous la supervision d'un chercheur du CNRC.

Les stagiaires reçoivent normalement une offre d'emploi d’une durée déterminé au Conseil national de recherches du Canada. Ils obtiennent le salaire et les avantages consentis aux agents de recherches. Le salaire, dont le montant sera établi en fonction de l'expérience de la personne choisie, est imposable et assujetti à d'autres prélèvements. À titre indicatif, le salaire de base versé aux nouveaux titulaires de doctorat est de 83,985$. De plus, les stagiaires auront droit à un fonds de voyage pour les aider à atteindre les objectifs de leur travail.

Titre du projet

Quantification de l’incertitude et calibrage des grands modèles de langage

Le rôle

Êtes-vous à la recherche d’une occasion de mener des recherches de pointe ayant des retombées concrètes? Souhaitez-vous évoluer dans un environnement d’équipe qui offre à la fois encadrement et autonomie? Voulez-vous être responsable des résultats de vos travaux et avoir l’occasion de les présenter dans des conférences internationales de premier plan? Nous avons une occasion stimulante pour vous!

Les interactions actuelles entre les humains et l’IA sont marquées par une dépendance excessive aux prédictions de l’IA, une incapacité à distinguer le contenu généré par l’IA et les risques associés aux erreurs et aux tromperies produites par l’IA. La quantification de l’incertitude dans les contenus générés par l’IA constitue une voie prometteuse pour atténuer l’ensemble de ces risques.

Traditionnellement, en recherche sur l’IA, une mesure de certitude bien conçue attribue à chaque résultat généré une probabilité d’exactitude. L’association des résultats de l’IA à des scores de confiance interprétables est extrêmement précieuse pour favoriser des interactions éclairées entre les humains et l’IA. Dans la nouvelle ère des grands modèles de langage génératifs (LLM), la quantification de l’incertitude est moins bien définie en raison du caractère ouvert des résultats produits par ces modèles (c’est-à-dire qu’il est nécessaire d’estimer simultanément l’incertitude liée à ce qui est dit et à la manière dont cela est dit, tout en composant avec un espace de sortie potentiellement infini). Pourtant, les LLM constituent aujourd’hui la pierre angulaire de la plupart des systèmes d’IA destinés aux utilisateurs. Déterminer comment saisir de façon pertinente ces incertitudes afin de fournir un contexte utile aux générations des LLM demeure une question de recherche active.

Par ailleurs, des travaux récents suggèrent que les LLM représentent des concepts interprétables par les humains (par exemple les émotions, la véracité, le caractère nuisible, etc.) à des étapes intermédiaires de leurs calculs. Cela ouvre une nouvelle possibilité d’examiner l’incertitude associée à l’encodage de ces concepts par les LLM, ce qui pourrait permettre de nouvelles perspectives et de nouveaux mécanismes d’intervention. À ce jour, nous ne connaissons aucun travail appliquant des méthodes d’étalonnage de la certitude aux représentations intermédiaires des modèles.

Ce projet vise à développer des méthodes de quantification de l’incertitude applicables à la fois aux résultats générés et aux caractéristiques intermédiaires des modèles. Les travaux fondamentaux dans ce domaine sont à la fois techniquement exigeants et hautement pertinents pour un large éventail de problèmes ouverts. Les résultats de recherche attendus se prêtent à des publications dans les plus grandes conférences internationales en linguistique computationnelle et en apprentissage automatique, telles que les conférences de l’ACL*, l’ICLR ou l’ICML.

Le problème de recherche

Les grands modèles de langage produisent du texte en générant de façon itérative une distribution de probabilité sur les mots possibles suivants, puis en échantillonnant à partir de cette distribution. Le problème de la quantification de l’incertitude consiste à condenser cette distribution de probabilité en quelques mesures de certitude significatives et interprétables. Ces mesures peuvent répondre à des questions de reproductibilité (c’est-à-dire, si l’on pose la même question de nouveau, quelle est la probabilité que le modèle réponde de la même manière?) ou de connaissances intégrées (c’est-à-dire, lorsqu’on lui pose une question factuelle, dans quelle mesure le modèle est-il certain de sa prédiction?). De telles mesures peuvent aider à contextualiser les résultats des LLM pour les utilisateurs ou les développeurs et constituent un élément essentiel des systèmes d’IA dignes de confiance.

Le programme de recherche proposé vise à développer de nouvelles méthodes de quantification de l’incertitude applicables aux caractéristiques internes des modèles, à déterminer si ces signaux peuvent améliorer les mesures d’incertitude associées à la génération de texte et à permettre une vaste gamme d’applications de recherche à fort impact :

• Détection des hallucinations
• Détection de la tromperie
• Détection du contenu synthétique
• Atténuation des défaillances liées à la sécurité
• Amélioration de l’évaluation
• Systèmes d’aide à la décision dignes de confiance

À long terme, les nouvelles connaissances générées pourront soutenir l’engagement du Canada envers une utilisation sécuritaire et responsable de l’IA générative, appuyer des applications stratégiques en matière de défense et ouvrir de nouvelles possibilités de recherche.

En plus du programme de recherche proposé, vous bénéficierez d’une proximité avec des travaux connexes actuellement en cours au sein de l’équipe. Nous travaillons présentement sur des projets distincts, mais connexes, portant sur l’interprétabilité et l’évaluation des grands modèles de langage. Vous pourriez également contribuer à ces travaux si vous le souhaitez. Nous entretenons des collaborations actives avec Mila (l’un des principaux instituts de recherche en IA au Canada) et Cohere (le plus important fournisseur canadien de grands modèles de langage), ce qui offre d’excellentes possibilités de réseautage et de collaboration. Nous nous attendons à ce que vous travailliez de manière autonome, avec l’accompagnement du responsable du projet, de façon à être pleinement responsable des résultats obtenus, à publier en tant que premier auteur et à présenter vos travaux dans ces conférences internationales de haut niveau.

Études

Un doctorat (Ph. D.) en informatique, en mathématiques, en statistique, en physique ou dans une discipline connexe est requis.

Pour plus de renseignements sur les certificats et diplômes obtenus à l'étranger, veuillez consulter Équivalence des diplômes

Expérience

• Expérience dans la conception et la mise en œuvre de projets de recherche novateurs et exploratoires dans des domaines liés à l’intelligence artificielle.
• Expérience avec les outils et bibliothèques d’apprentissage profond (deep learning), notamment ceux spécialisés dans la collecte et l’analyse de données ou dans la simulation de données.
• Dossier de publications démontrant une contribution importante à la conception et à la mise en œuvre d’expériences, à la rédaction scientifique et à la présentation de travaux dans des forums scientifiques de haut niveau.
• Expérience dans l’animation de groupes de lecture, le mentorat d’étudiants ou l’organisation d’ateliers (atout).
• Une expérience dans la compréhension des méthodes de quantification de l’incertitude ou des méthodes d’interprétabilité mécanistique constitue un atout.

Exigences linguistiques

Anglais

Renseignements sur les exigences linguistiques et les tests d'auto-évaluation

Condition d'emploi

Cote de fiabilité

Pour obtenir une cote de fiabilité, nous devons vérifier les antécédents sur une période de cinq ans.

Qui peut postuler?

• Les stagiaires reçoivent normalement une offre d'emploi de deux ans conditionnel à l’obtention de progrès satisfaisants durant la première année.
• Les candidat(e)s ayant obtenu un doctorat (ou l’équivalent) au cours des 3 dernières années (ce dernier doit avoir été obtenu le ou après le 1er juillet 2024*) ou prévoyant l’obtenir dans les 6 mois suivants leur nomination.
• Les stagiaires travailleront dans un laboratoire sous la supervision d'un chercheur du CNRC.

* Des exceptions peuvent être envisagées pour tenir compte d'absences personnelles ou familiales. N'hésitez pas à nous contacter en utilisant les coordonnées ci-dessous pour en discuter plus en détail.

Pour postuler

Pour que votre candidature soit considérée pour le programme, prenez note que vous devez absolument annexer les documents requis. Si vous ne fournissez pas les documents requis avec votre demande, celle-ci sera exclue du système de recherche.

• Curriculum vitae
• Une déclaration d’intérêt envers le projet. (au maximum une page)
• Relevé de notes de votre Doctorat. Noter qu’un relevé de notes non-officiel est acceptable.
• Liste de vos publications

Lorsque vous soumettez votre demande, veuillez inclure les documents requis dans les champs prévus à cet effet soit : « Résultats d’évaluation de langue seconde » ou « Autres pièces jointes »

De plus, les candidats qui répondent le mieux aux exigences du poste seront invités à fournir trois lettres de recommandation à une étape ultérieure du concours.

Rémunération

L’objectif de cette mesure de dotation est d’embaucher une personne au niveau ARAd. Il s’agit d’un poste pour personnes qui sont en début de carrière et l’échelle salariale est de 83,985$ à 116,641$. Cette vaste fourchette reflète divers degrés d'expertise et d'impact, ainsi que la croissance au sein du poste.

La détermination du salaire sera basée sur une évaluation approfondie de l'expérience antérieure du candidat retenu. Cette évaluation tiendra compte des réalisations, des compétences et des contributions spécifiques qui démontrent l'impact et l'expertise du candidat. À titre indicatif, le salaire moyen de départ des nouveaux doctorants est de 83,985$.

Le NRC s'engage à soutenir le potentiel de croissance salariale et de progression de carrière au sein de l'organisation, en donnant accès aux opportunités et aux ressources nécessaires pour une carrière épanouissante. Les employés du CNRC bénéficient également d’un large éventail d'avantages sociaux concurrentiels, notamment un régime de retraite solide, un régime de soins de santé et un régime de soins dentaires complets, une assurance-vie et une assurance-invalidité, une fermeture des bureaux à la fin du mois de décembre ainsi que des soutiens supplémentaires pour améliorer votre bien être durant et après votre carrière.

Explorez le champ des possibles

Tout est possible au CNRC, nommé en 2026 l'un des meilleurs employeurs pour les jeunes au Canada, l'un des meilleurs employeurs dans la région de la capitale nationale et l'un des meilleurs employeurs au Canada selon Forbes !

Le CNRC est le plus grand organisme de recherche et d'innovation du Canada. Nous menons des recherches de renommée mondiale qui repoussent les limites de la science et de l’ingénierie pour rendre l’impossible possible. Chaque jour, nous explorons de nouvelles idées à travers des recherches novatrices et nous aidons les entreprises à découvrir des possibilités qui façonnent l’avenir du Canada et le monde.

Au CNRC, vous découvrirez aussi de nouvelles possibilités. Notre milieu de travail positif favorise une culture de créativité en accueillant les nouveaux points de vue et l’innovation à tous les niveaux. Nous attachons une grande importance au travail d’équipe. Vous collaborerez dans une variété de domaines avec les esprits les plus brillants en vue de trouver des solutions novatrices. Plus important encore, vous découvrirez votre potentiel à mesure que vous évoluez dans votre carrière, vous changerez véritablement le cours des choses et vous enrichirez votre parcours professionnel. Qu’il s’agisse de découvertes révolutionnaires ou d’une carrière incomparable, explorez votre champ des possibles au CNRC.

Remarques

• En 2026, le CNRC a été choisi comme l'un des meilleurs employeurs pour les jeunes au Canada, l'un des meilleurs employeurs de la région de la capitale nationale et l'un des meilleurs employeurs au Canada selon Forbes.
• L'aide à la réinstallation sera déterminée conformément aux directives du CNRC.
• Bien que la préférence soit accordée aux citoyens canadiens et aux résidents permanents, les bourses des stagiaires de recherche postdoctorale sont également disponibles aux ressortissants de tous les pays. Veuillez inclure des renseignements à cet égard dans votre demande.
• Le ou la titulaire doit en tout temps respecter les mesures de sécurité au travail.
• Nous remercions toutes les personnes qui postuleront, mais nous ne communiquerons qu’avec celles retenues pour une évaluation subséquente.