Les discussions de l'heure du thé 2020 : Deuxième semaine

Maintenant que les 2020 Tea Time Talks sont sur Youtube, vous pouvez toujours avoir le temps de prendre le thé avec Amii et le laboratoire RLAI! Animées par le Dr Richard S. Sutton, conseiller scientifique en chef d'Amii, ces conférences de 20 minutes sur des sujets techniques sont données par des étudiants, des professeurs et des invités. Les conférences sont une manière détendue et informelle d'entendre les leaders de l'IA discuter des futures lignes de recherche qu'ils pourraient explorer, avec des sujets allant des idées qui commencent à prendre racine aux projets entièrement terminés.

La deuxième semaine des discussions de l'heure du thé :

Roshan Shariff : Planification efficace dans les grands MDPs avec une approximation faible de la fonction linéaire.

Dans son exposé, Roshan explique comment résoudre le problème de la planification dans les MDP en utilisant l'approximation linéaire de la fonction de valeur avec de faibles exigences : une faible erreur d'approximation pour la fonction de valeur optimale et un petit ensemble d'états " centraux " dont les caractéristiques couvrent celles des autres états. Il présente ensuite un algorithme qui produit des actions presque optimales pour n'importe quel état en utilisant un oracle génératif (simulateur) pour le MDP, tandis que son temps de calcul s'échelonne de façon polynomiale avec le nombre de caractéristiques, d'états centraux et d'actions et l'horizon effectif.

Matt Taylor : Aider RL avec des informations externes : Pouvez-vous aider un agent ?

Lorsque nous envisageons de déployer des algorithmes de RL sur des problèmes du monde réel, nous ne pouvons souvent pas générer des années de données avec un simulateur (par exemple, OpenAI Five). Que doit faire un agent ? L'exposé de Matt met en évidence certaines des façons dont nous pouvons exploiter les données existantes, les agents existants et les personnes, afin de motiver les raisons pour lesquelles nous devrions penser à aider notre agent à réussir le plus rapidement possible.

Martin Müller : Quelques vieilles idées sur la recherche et l'apprentissage

Les chercheurs étudient les problèmes de recherche et d'apprentissage depuis des décennies. Dans son exposé, Martin explore les anciennes idées et questions autour de ces sujets, notamment la mise à l'échelle et la généralisation.

Regardez les Tea Time Talks en direct en ligne cette année, du lundi au jeudi de 16 h 15 à 16 h 45 MT. Chaque entretien se déroulera ici (Veuillez noter que si vous accédez au chat à partir d'une adresse électronique hors du domaine de ualberta.ca, il se peut que vous deviez attendre quelques secondes pour que quelqu'un de la réunion vous laisse entrer). Vous pouvez consulter le programme complet pour trouver les conférences qui vous intéressent, vous inscrire à la liste de diffusion du RLAI ou revoir les conférences précédentes sur la liste de lecture Youtube.