<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">Deadline extended!</font></font></p>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">The paper submission deadline for the 2013 Reinforcement Learning Competition and ICML Workshop,<span style>  </span>has been extended to May 21^st .</font></font></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri"><b style>Note: Revisions can be made at any time in EasyChair before the new deadline.</b><br>----------------------------------------------------------------------------------------------<b style><span style="LINE-HEIGHT:115%;FONT-FAMILY:'Arial','sans-serif';COLOR:#0070c0;FONT-SIZE:10pt"></span></b></font></font></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">2013 Reinforcement Learning Competition and ICML Workshop</font></font></p>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">20-21 June 2013 Atlanta, USA</font></font></p>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><a href="https://sites.google.com/site/rlcomp2013/icml_workshop"><font color="#800080" size="3" face="Calibri">https://sites.google.com/site/rlcomp2013/icml_workshop</font></a><span class="MsoHyperlink"></span></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><u><span style="COLOR:#0099ff"><span style="TEXT-DECORATION:none"><font size="3" face="Calibri"> </font></span></span></u></p>
<div style="BORDER-BOTTOM:windowtext 1pt solid;BORDER-LEFT:medium none;PADDING-BOTTOM:1pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in">
<p style="BORDER-BOTTOM:medium none;BORDER-LEFT:medium none;PADDING-BOTTOM:0in;MARGIN:0in 0in 10pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in" class="MsoNormal"><font size="3"><font face="Calibri">Competition goal</font></font></p>
</div>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">After a four year hiatus, the reinforcement learning competition is back. The primary aim of the competition is to test both general and domain-specific reinforcement learning algorithms, using an unbiased and transparent methodology. As a side-effect, the competition will generate a set of benchmarks domains and benchmark results in those domains, which can then be used as a basis of comparison in future work.</font></font></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3" face="Calibri">In the</font><a href="http://2013.rl-competition.org/"><font size="3"><font face="Calibri"><span style="COLOR:windowtext;TEXT-DECORATION:none"> </span>reinforcement learning competition</font></font></a><font size="3"><font face="Calibri">, researchers can test their algorithms and insights in a friendly competitive way, on new and challenging domains. The reinforcement learning competition has not been organized for a while, but will take place again this year after a long hiatus. The primary aim of the competition is to test both general and domain-specific reinforcement learning algorithms, using an unbiased and transparent methodology. The domains used in the competition will form a set of benchmarks, and the results of the submitted algorithms will form a body of benchmark results, which researchers can then use as a basis of comparison in future work. </font></font></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">A secondary aim is to discuss methodological approaches for comparing reinforcement learning algorithms. This remains an issue in reinforcement learning in general. <br>
<br>Another important aim is to ensure the continuing existence of the competition, and the prevention of further hiatuses. Our aim is to ensure that the competition will organized annually again, from this year onward. To this extend we will try to build up an organization of interested researchers. </font></font></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">As in the previous years, the competition will be hosted at</font></font></p>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><a href="http://www.rl-competition.org/"><font size="3" face="Calibri">http://www.rl-competition.org/</font></a><span class="MsoHyperlink"></span></p>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">The format will be remain as is. Agents may compete in one or more of a set of known domains. This set will include a polyathlon event, where the agents compete in a sequence of arbitrary environments.</font></font></p>

<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3"><font face="Calibri">We envisage the actual competition to take place in <b style>June 2013</b>.</font></font></p>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3" face="Calibri"> </font></p>
<div style="BORDER-BOTTOM:windowtext 1pt solid;BORDER-LEFT:medium none;PADDING-BOTTOM:1pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in">
<p style="BORDER-BOTTOM:medium none;BORDER-LEFT:medium none;PADDING-BOTTOM:0in;MARGIN:0in 0in 10pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in" class="MsoNormal"><font size="3"><font face="Calibri">ICML Workshop on the Reinforcement Learning Competition 2013 (WRLCOMP) </font></font></p>
</div>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3" face="Calibri">The competition is associated with an ICML Workshop in conjunction with</font><a href="http://icml.cc/2013/" target="_blank"><font size="3"><font face="Calibri"><span style="COLOR:windowtext;TEXT-DECORATION:none"> </span><font color="#800080">ICML 2013</font></font></font></a><font size="3"><font face="Calibri">. The ICML reinforcement learning competition workshop will bring together researchers, who participated in the competition, in order to present and discuss their results. We will evaluate what works, and also under what conditions established methods may not work so well. In this way we hope to broaden our insight into state-of-the-art RL algorithms, and important properties of RL problems.  <br>
<br>The workshop will be organized along the lines of the domains. One time slot will be reserved for each competition category winner. In addition, all competition entrants will be invited to submit a short paper describing their approach.</font></font></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><br><font size="3"><font face="Calibri">We will reserve a special time slot for papers on methodological problems that arise when comparing reinforcement learning algorithms.</font></font></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3" face="Calibri">Workshop website: </font><a href="https://sites.google.com/site/rlcomp2013/icml_workshop"><font color="#800080" size="3" face="Calibri">https://sites.google.com/site/rlcomp2013/icml_workshop</font></a><u><span style="COLOR:#0099ff"></span></u></p>

<div style="BORDER-BOTTOM:windowtext 1pt solid;BORDER-LEFT:medium none;PADDING-BOTTOM:1pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in">
<p style="BORDER-BOTTOM:medium none;BORDER-LEFT:medium none;PADDING-BOTTOM:0in;MARGIN:0in 0in 10pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in" class="MsoNormal"><font size="3"><font face="Calibri">Topics</font></font></p>
</div>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">1. For entrants</font></font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">All entrants are additionally invited to submit a paper describing the approach used in the competition, including findings and ideas that relate to more general research questions.</font></font></p>

<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">2. For everyone</font></font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">You are invited to submit a paper discussing methodological issue when comparing reinforcement learning algorithms, including but not limited to the following topics:</font></font></p>

<p style="LINE-HEIGHT:10pt;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">Effects of PRNGs in large-scale comparisons</font></font></p>
<p style="LINE-HEIGHT:10pt;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">Experimental design for an unbiased evaluation</font></font></p>
<p style="LINE-HEIGHT:10pt;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">Metrics for performance evaluation</font></font></p>
<p style="LINE-HEIGHT:10pt;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">Reproducibility of results</font></font></p>
<p style="LINE-HEIGHT:10pt;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">Robustness of algorithms</font></font></p>
<p style="LINE-HEIGHT:10pt;MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">Statistical testing standards for reinforcement learning</font></font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3" face="Calibri"> </font></p>
<div style="BORDER-BOTTOM:windowtext 1pt solid;BORDER-LEFT:medium none;PADDING-BOTTOM:1pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in">
<p style="BORDER-BOTTOM:medium none;BORDER-LEFT:medium none;PADDING-BOTTOM:0in;LINE-HEIGHT:normal;MARGIN:0in 0in 0pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in" class="MsoNormal">
<font size="3"><font face="Calibri">Submission </font></font></p></div>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3" face="Calibri"> </font></p>
<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3"><font face="Calibri">Interested authors should format their papers according to ICML formatting guidelines, available here:<span style>  </span></font></font><a href="http://icml.cc/2013/wp-content/uploads/2012/12/icml2013stylefiles.tar.gz" target="_blank"><font size="3" face="Calibri">http://icml.cc/2013/wp-content/uploads/2012/12/icml2013stylefiles.tar.gz</font></a><span class="MsoHyperlink"></span></p>

<p style="MARGIN:0in 0in 10pt" class="MsoNormal"><font size="3" face="Calibri">Papers should not exceed 4 pages and are due by May 15, 2013. All papers must be submitted as PDF</font><span style="LINE-HEIGHT:115%;FONT-FAMILY:'Arial','sans-serif';FONT-SIZE:10pt">, and be made through Easychair at </span><span class="MsoHyperlink"><a href="https://www.easychair.org/conferences/?conf=wrlcomp2013"><font color="#800080" size="3" face="Calibri">https://www.easychair.org/conferences/?conf=wrlcomp2013</font></a></span></p>

<div style="BORDER-BOTTOM:windowtext 1pt solid;BORDER-LEFT:medium none;PADDING-BOTTOM:1pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in">
<p style="BORDER-BOTTOM:medium none;BORDER-LEFT:medium none;PADDING-BOTTOM:0in;LINE-HEIGHT:normal;MARGIN:0in 0in 0pt;PADDING-LEFT:0in;PADDING-RIGHT:0in;BORDER-TOP:medium none;BORDER-RIGHT:medium none;PADDING-TOP:0in" class="MsoNormal">
<font size="3"><font face="Calibri">Important Dates</font></font></p></div>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3" face="Calibri"> </font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3"><font face="Calibri">Domains available:<span style>  </span>April 1 </font></font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3"><font face="Calibri">Testing starts: May 1</font></font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3"><font face="Calibri">Competition:<span style>  </span>June 1</font></font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3"><font face="Calibri">Paper Submission Deadline: May 21, 2013</font></font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3"><font face="Calibri">Author Notification: June 1, 2013</font></font></p>
<p style="LINE-HEIGHT:normal;MARGIN:0in 0in 0pt" class="MsoNormal"><font size="3"><font face="Calibri">Workshop: June 20-21, 2013</font></font></p><br clear="all"><br>-- <br>
<div style="MARGIN:0in 0in 0pt"><a name="SafeHtmlFilter_SafeHtmlFilter__MailAutoSig"><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt">----------------------</span></a><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt"></span></span></div>

<div style="MARGIN:0in 0in 0pt"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt">Guangliang Li</span></span></div>
<p style="MARGIN:0in 0in 0pt"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt">PhD student, Intelligent Autonomous Systems Group</span></span></p>
<p style="MARGIN:0in 0in 0pt"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt">Informatics Institute, University of Amsterdam, The Netherlands</span></span></p>
<p style="MARGIN:0in 0in 0pt"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt"> </span></span></p>
<p style="MARGIN:0in 0in 0pt"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt">Science Park 904, 1098 XH Amsterdam</span></span></p>
<p style="MARGIN:0in 0in 0pt"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt">Room C3.258A</span></span></p>
<p style="MARGIN:0in 0in 0pt"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt">Email: </span></span><a href="mailto:G.Li@uva.nl" target="_blank"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';COLOR:blue;FONT-SIZE:10pt">G.Li@uva.nl</span></span><span></span></a><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt"></span></span></p>

<p style="MARGIN:0in 0in 0pt"><span></span><a href="http://staff.science.uva.nl/~gli/" target="_blank"><span><span style="FONT-FAMILY:'Tahoma','sans-serif';COLOR:blue;FONT-SIZE:10pt">http://staff.science.uva.nl/~gli/</span></span><span></span></a><span><span style="FONT-FAMILY:'Tahoma','sans-serif';FONT-SIZE:10pt"></span></span></p>

<p> </p>