Série de séminaires AI 2023 : Mike Ogezi

Le AI Seminar est une réunion hebdomadaire à l'Université de l'Alberta où les chercheurs intéressés par l'intelligence artificielle (AI) peuvent partager leurs recherches. Les présentateurs comprennent à la fois des conférenciers locaux de l'Université de l'Alberta et des visiteurs d'autres institutions. Les sujets peuvent être liés de quelque manière que ce soit à l'intelligence artificielle, qu'il s'agisse de travaux théoriques fondamentaux ou d'applications novatrices de techniques d'IA à de nouveaux domaines et problèmes.

Le 11 août, Mike Ogezi, étudiant en maîtrise à l'Université de l'Alberta, a présenté "Grounding Concepts to Vision with Visual Descriptions" lors du séminaire sur l'IA.

Résumé :

Cet exposé présente l'approche visant à ancrer les concepts dans la vision à l'aide de descriptions textuelles axées sur les attributs visuels. La recherche comprend deux études. La première explore la désambiguïsation visuelle du sens des mots, une tâche qui implique la sélection de l'image qui représente le mieux le sens contextuel d'un mot. La seconde étude se concentre sur la production de descriptions visuelles pour des concepts arbitraires et concrets à utiliser dans des tâches en aval telles que la classification et la génération d'images sans prise de vue. Les deux études montrent que le conditionnement d'un grand modèle de langage (LLM) pré-entraîné avec des connaissances lexico-sémantiques améliore empiriquement les descriptions visuelles, confirmant ainsi l'utilité des descriptions visuelles produites par le LLM pour ancrer les concepts lexicaux dans le domaine visuel.

Regardez la présentation complète ci-dessous :

Découvrez comment Amii peut vous aider à démarrer votre carrière dans l'IA ! Consultez notre parcours des talents page.