Retour sur l'architecture acteur-critique

Résumé

Cette rétrospective décrit l'ensemble du projet de recherche qui a donné lieu à l'article des auteurs "Neuronlike adaptive elements that can solve difficult learning control problems" qui a été publié en 1983 dans le numéro spécial Neural and Sensory Information Processing de l'IEEE Transactions on Systems, Man, and Cybernetics. Ce retour en arrière explique comment ce projet a vu le jour, présente les idées et les publications antérieures qui l'ont influencé, et décrit nos recherches ultérieures les plus étroitement liées. Il se termine en soulignant certains aspects notables de cet article qui ont été éclipsés par ses principales contributions, puis en commentant certaines des directions et des mises en garde qui devraient informer les recherches futures.