<div dir="ltr"><div>We invite all researchers to submit their manuscripts for review.</div><div><br></div><div>********************************************************************************</div><div>Hierarchical Reinforcement Learning Workshop</div><div>NIPS 2017</div><div>Saturday, December 9</div><div>Long Beach, CA, USA</div><div><a href="https://sites.google.com/view/hrlnips2017">https://sites.google.com/view/hrlnips2017</a></div><div>Please address questions to: <a href="mailto:hrlnips2017@gmail.com">hrlnips2017@gmail.com</a></div><div>********************************************************************************</div><div><br></div><div>Reinforcement Learning (RL) has become a powerful tool for tackling complex sequential decision-making problems as demonstrated in high-dimensional robotics or game-playing domains. Nevertheless, modern RL methods have considerable difficulties when facing sparse rewards, long planning horizons, and more generally a scarcity of useful supervision signals.</div><div><br></div><div>Hierarchical Reinforcement Learning (HRL) is emerging as a key component for finding spatio-temporal abstractions and behavioral patterns that can guide the discovery of useful large-scale control architectures, both for deep-network representations and for analytic and optimal-control methods. HRL has the potential to accelerate planning and exploration by identifying skills that can reliably reach desirable future states. It can abstract away the details of low-level controllers to facilitate long-horizon planning and meta-learning in a high-level feature space. Hierarchical structures are modular and amenable to separation of training efforts, reuse, and transfer. By imitating a core principle of human cognition, hierarchies hold promise for interpretability and explainability.</div><div><br></div><div>There is a growing interest in HRL methods for structure discovery, planning, and learning, as well as HRL systems for shared learning and policy deployment. The goal of this workshop is to improve cohesion and synergy among the research community and increase its impact by promoting better understanding of the challenges and potential of HRL. This workshop further aims to bring together researchers studying both theoretical and practical aspects of HRL, for a joint presentation, discussion, and evaluation of some of the numerous novel approaches to HRL developed in recent years.</div><div><br></div><div><br></div><div>NOTE: The main NIPS 2017 conference is currently sold out. If you intend to submit a paper, please register to the workshops as soon as possible. Registrations can be cancelled before November 16, 2017, for a full refund.</div><div><br></div><div><br></div><div>IMPORTANT DATES:</div><div>- Submission deadline: Wednesday, November 1, 2017 (Anywhere on Earth)</div><div>- Author notification: Monday, November 13, 2017</div><div>- Final paper posted online: Monday, December 4, 2017</div><div>- Workshop: Saturday, December 9, 2017</div><div><br></div><div>SUBMISSION DETAILS:</div><div>- Research papers are solicited on Hierarchical Reinforcement Learning, its theory and practice, and related fields (optimal control, cognitive science, neuroscience, and others).</div><div>- Contributed papers may include novel research, preliminary results, or surveys.</div><div>- Papers are limited to 4 pages, excluding references, in the latest camera-ready NIPS style: <a href="https://nips.cc/Conferences/2017/PaperInformation/StyleFiles">https://nips.cc/Conferences/2017/PaperInformation/StyleFiles</a></div><div>- Accepted papers will be made publicly available as a non-archival report, allowing future submissions to archival conferences or journals.</div><div>- Please submit via CMT3: <a href="https://cmt3.research.microsoft.com/HRL2017">https://cmt3.research.microsoft.com/HRL2017</a></div><div>- Please check the workshop website for the latest updates: <a href="https://sites.google.com/view/hrlnips2017">https://sites.google.com/view/hrlnips2017</a></div><div><br></div><div>ACCEPTED PAPERS:</div><div>- All accepted papers will be presented as spotlights and during two poster sessions.</div><div>- Authors of top accepted papers will be invited to give a short contributed talk.</div><div>- Lead authors of outstanding papers will be invited to a lunchtime discussion with the workshop’s invited speakers.</div><div>- Accepted student authors will be invited to apply for travel and registration support.</div><div>- The best paper will win an award.</div><div><br></div><div>INVITED SPEAKERS:</div><div>Pieter Abbeel (OpenAI/UC Berkeley)</div><div>Matt Botvinick (DeepMind/UCL)</div><div>Jan Peters (TU Darmstadt)</div><div>Doina Precup (McGill)</div><div>David Silver (DeepMind/UCL)</div><div>Josh Tenenbaum (MIT)</div><div><br></div><div>ORGANIZERS:</div><div>Andrew Barto (UMass)</div><div>Doina Precup (McGill)</div><div>Shie Mannor (Technion)</div><div>Tom Schaul (DeepMind)</div><div>Roy Fox (UCB)</div><div>Carlos Florensa (UCB)</div></div>