Nouvelles
Le AI Seminar est une réunion hebdomadaire à l'Université de l'Alberta où les chercheurs intéressés par l'intelligence artificielle (AI) peuvent partager leurs recherches. Les présentateurs comprennent à la fois des conférenciers locaux de l'Université de l'Alberta et des visiteurs d'autres institutions. Les sujets peuvent être liés de quelque manière que ce soit à l'intelligence artificielle, qu'il s'agisse de travaux théoriques fondamentaux ou d'applications novatrices de techniques d'IA à de nouveaux domaines et problèmes.
Le 17 février, Ehsan Imani,doctorant à l'université d'Alberta, a présenté "Representation Alignment in Neural Networks" (alignement des représentations dans les réseaux neuronaux) lors du séminaire sur l'intelligence artificielle.
Il est désormais courant d'entraîner les représentations des réseaux neuronaux sur de vastes ensembles de données accessibles au public et de les utiliser pour résoudre de nouveaux problèmes. Les raisons pour lesquelles les représentations de réseaux neuronaux ont connu un tel succès pour le transfert ne sont toutefois pas encore totalement comprises.
Imani montre qu'après l'entraînement, les représentations des réseaux neuronaux alignent leurs vecteurs singuliers supérieurs sur les cibles. Il étudie ce phénomène d'alignement des représentations dans une variété d'architectures de réseaux neuronaux et constate que (a) l'alignement émerge à travers une variété d'architectures et d'optimiseurs différents, avec plus d'alignement provenant de la profondeur (b) l'alignement augmente pour les couches plus proches de la sortie et (c) les CNN profonds existants à haute performance présentent des niveaux élevés d'alignement.
La présentation souligne ensuite pourquoi l'alignement entre les vecteurs singuliers supérieurs et les cibles peut accélérer l'apprentissage et montre, dans un problème de transfert synthétique classique, que l'alignement des représentations est en corrélation avec un transfert positif et négatif vers des tâches similaires et dissemblables.
Regardez la présentation complète ci-dessous :
Vous voulez savoir comment donner un coup de fouet à votre carrière dans l'IA ? En savoir plus sur l'accélérateur de carrière d'Amii pour en savoir plus.
8 avril 2024
Nouvelles
Les boursiers d'Amii partagent des conseils sur la manière de tirer le meilleur parti de votre expérience de la conférence.
26 mars 2024
Nouvelles
Dans l'épisode de ce mois-ci, Alona explique comment ChatGPT a changé la perception qu'a le public de ce que les modèles de langage d'IA peuvent faire, rendant instantanément obsolètes la plupart des références antérieures, et parle de l'excitation et de l'intensité du travail dans un domaine qui évolue rapidement comme l'IA.
18 mars 2024
Nouvelles
Google.org annonce de nouvelles subventions de recherche pour soutenir la recherche critique sur l'IA au Canada, axée sur des domaines tels que la durabilité et le développement responsable de l'IA. Les subventions accordées à Amii, à l'Institut canadien de recherches avancées (CIFAR) et au Centre international d'expertise de Montréal sur l'IA (CEIMIA) s'élèvent à un total de 2,7 millions de dollars.
Vous cherchez à renforcer les capacités en matière d'IA ? Vous avez besoin d'un conférencier pour votre événement ?
Participez à l'écosystème croissant de l'IA en Alberta ! Les demandes de conférenciers, de parrainage et de lettres de soutien sont les bienvenues.