La carrière du Dr Amir-massoud Farahmand dans le domaine de l'apprentissage par renforcement l'a conduit à traverser le Canada pour travailler avec certains des meilleurs chercheurs au monde dans ce domaine, à Edmonton et à Montréal. Aujourd'hui, après avoir effectué deux études postdoctorales et travaillé comme chercheur aux États-Unis, il a choisi de s'installer à Toronto, où il est devenu le nouveau membre du corps enseignant de l'Institut Vecteur.

"Je savais que je voulais revenir au Canada", a déclaré M. Amir-Massoud. "Lorsque j'ai comparé les options, Vector venait d'être lancé et semblait avoir beaucoup de potentiel. Les gens s'efforcent d'en faire un endroit idéal pour former des talents et faire de la recherche. Il y a aussi beaucoup de soutien de la part des sponsors de l'industrie". M. Amir-Massoud a également rencontré des chercheurs de Vector, notamment David Duvenaud, Richard Zemel et Geoffrey Hinton, lors de conférences. La possibilité de collaborer avec eux a joué un rôle important dans ma décision de venir à Toronto", a-t-il déclaré.

L'apprentissage par renforcement à la pointe de la recherche au Canada

Dès le début de ses études, Amir-Massoud pensait devenir neurochirurgien. Il était curieux de savoir comment les gens pensent, mais il aimait aussi la physique et l'informatique. Au cours de ses études de maîtrise à l'université de Téhéran, il a découvert le concept d'apprentissage par renforcement, ce qui a éveillé son intérêt et l'a incité à poursuivre ses recherches au Canada.

Amir-massoud avait entendu parler de Toronto et de Montréal comme de hauts lieux de l'IA, mais l'équipe de chercheurs dans le domaine de l'apprentissage par renforcement à l'université de l'Alberta l'a attiré à Edmonton. C'est là qu'il a terminé son doctorat, en travaillant avec Csaba Szepesvari, et qu'il a reçu le prix de la meilleure thèse de doctorat du département d'informatique de l'université de l'Alberta.

En 2011, Amir-massoud s'est retrouvé à Montréal pour son postdoc dans un laboratoire avec Doina Precup et Joelle Pineau à l'Université McGill. En réfléchissant à son séjour à Montréal, il a déclaré,

"Il n'y avait pas beaucoup d'opportunités d'emploi au Canada à l'époque. Depuis, l'émergence de la communauté de l'IA a été très rapide avec l'ouverture de nouveaux laboratoires d'entreprise et des investissements gouvernementaux. J'espère que le lancement de l'Institut Vecteur et la croissance de l'écosystème environnant contribueront à retenir les talents déjà formés au Canada."

Recherche fondamentale et appliquée

Les recherches d'Amir-massoud portent sur l'apprentissage automatique et l'apprentissage par renforcement. Il se concentre sur la compréhension des principes nécessaires à la conception d'agents d'apprentissage par renforcement capables de résoudre des problèmes industriels complexes. Ces agents, tels que les robots ou les logiciels web, peuvent adapter leur comportement en fonction des récompenses ou des punitions qu'ils reçoivent. Par exemple, l'un des projets de recherche d'Amir-Massoud aux Mitsubishi Electric Research Laboratories (MERL) à Boston a utilisé ces agents pour optimiser les systèmes de climatisation. Dans un autre projet, il a utilisé l'apprentissage par renforcement pour apprendre à un agent à passer de la batterie au carburant dans un véhicule électrique hybride afin de minimiser les coûts d'exploitation.

De retour au Canada après son séjour à Boston, M. Amir-Massoud se réjouit de pouvoir faire progresser la recherche fondamentale et appliquée à l'Institut Vecteur. "Ici, à l'Institut Vecteur, il y a plus de flexibilité en termes d'application. Ma recherche peut être plus ou moins fondamentale. J'ai également la possibilité de créer mon propre groupe d'étudiants afin d'intensifier la recherche et d'aller plus vite."

"Je veux travailler sur des applications qui faciliteront la vie des gens".

a déclaré Amir-Massoud. En même temps, il a dit,

"De nombreuses questions théoriques doivent être résolues avant que nous puissions facilement résoudre un large éventail de problèmes dans le monde réel.

Il a souligné l'importance pour les chercheurs d'être conscients des implications de leur travail et de la manière dont les gens peuvent ou non s'adapter aux nouvelles technologies.

Collaborer et partager les connaissances

Dès ses premières semaines à l'Institut Vecteur, Amir-Massoud s'est mis au travail. Cette année, il est membre du comité d'organisation de l'école d'été sur l'apprentissage par renforcement de l'Institut canadien de recherche avancée (CIFAR), qui sera accueillie par l'Institut Vecteur au mois d'août.

"Il n'y a pas forcément de cours sur l'apprentissage par renforcement ou l'apprentissage profond dans beaucoup d'universités, et cette université d'été est donc l'occasion d'apprendre beaucoup de choses en peu de temps. Nous essayons de réunir un grand nombre de bons chercheurs - parmi les meilleurs au monde - et d'assurer une bonne couverture des sujets. J'aimerais y participer si j'étais étudiant".

Richard Zemel, directeur de recherche de Vector, dirige le recrutement pour l'Institut Vector. Le Dr Zemel a déclaré : "Amir-massoud est très compétent et nous sommes très heureux qu'il ait choisi de rejoindre l'équipe de Vector. Son expérience dans le domaine de l'apprentissage par renforcement ajoutera à la diversité de l'expertise au sein de la faculté Vector. Au-delà des réalisations d'Amir-massoud dans le domaine de la recherche, le Dr Zemel a déclaré : "Nous sommes très heureux qu'il ait choisi de rejoindre l'équipe de Vector,

"Son intérêt pour la collaboration avec d'autres chercheurs et le travail avec les étudiants contribuera à faire de Vector un pôle dynamique et actif pour la recherche en IA de niveau mondial".