<div dir="ltr">Hi all,<div><br></div><div><b style="color:rgb(255,0,0);font-size:large">NOTE</b><span style="color:rgb(255,0,0);font-size:large">: This seminar is tomorrow at <b><u>1pm</u></b>, not the usual 12pm (due to a faculty candidate talk at 12pm).</span> </div><div> <br></div><div>Just a reminder that the <a href="http://www.cs.cmu.edu/~aiseminar/" target="_blank">CMU AI Seminar</a> is tomorrow <font color="#ff0000"><b>1pm-2pm</b></font>: <a href="https://cmu.zoom.us/j/93418102649?pwd=TTd4dElxWnBOZHJ5QndUNVBWUjZCZz09" target="_blank">https://cmu.zoom.us/j/93418102649?pwd=TTd4dElxWnBOZHJ5QndUNVBWUjZCZz09</a>. </div><div><br></div><div>Le Song (GeorgiaTech/MBZUAI) will be talking about some cool insights related to deep reasoning layers (see below). <br></div><div><br></div><div>Thanks,</div><div>Shaojie</div></div><div dir="ltr"><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, Mar 17, 2021 at 9:40 AM Shaojie Bai <<a href="mailto:shaojieb@andrew.cmu.edu" target="_blank">shaojieb@andrew.cmu.edu</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div><font color="#ff0000" size="4" style="background-color:rgb(255,255,255)"><b>UPDATE</b>: As the planned time (3/23 12pm) overlaps with a SCS faculty candidate talk, this seminar will be moved to next Wednesday (3/24) at 12pm instead.</font></div><div><font color="#ff0000" size="4">--------------------------------------------</font></div><div><br></div><div>Dear all,</div><div><br></div><div>We look forward to seeing you <b>next Wednesday (3/24)</b> from 12:00-1:00 PM (U.S. Eastern time) for the next talk of our <b>CMU AI seminar</b>, sponsored by <a href="https://careers.fortive.com/" target="_blank">Fortive</a>.</div><div><br></div><div>To learn more about the seminar series or see the future schedule, please visit the <a href="http://www.cs.cmu.edu/~aiseminar/" target="_blank">seminar website</a>.<a href="http://www.cs.cmu.edu/~aiseminar/" target="_blank"></a></div><div><br></div><font color="#0b5394" style="background-color:rgb(255,255,0)">On 3/24, <b><u>Le Song</u></b> (Georgia Tech / MBZUAI) will be giving a talk on "</font><b><font color="#0b5394" style="background-color:rgb(255,255,0)">Understanding Deep Architectures with Reasoning Layer</font></b><font color="#0b5394" style="background-color:rgb(255,255,0)">."</font><br><br><font color="#0b5394"><b>Title</b>: Understanding Deep Architectures with Reasoning Layer<br><br><b>Talk Abstract</b>: Recently, there has been a surge of interest in combining deep learning models with reasoning in order to handle more sophisticated learning tasks. In many cases, a reasoning task can be solved by an iterative algorithm. This algorithm is often unrolled, and used as a specialized layer in the deep architecture, which can be trained end-to-end with other neural components. Although such hybrid deep architectures have led to many empirical successes, the theoretical foundation of such architectures, especially the interplay between algorithm layers and other neural layers, remains largely unexplored. In this paper, we take an initial step towards an understanding of such hybrid deep architectures by showing that properties of the algorithm layers, such as convergence, stability and sensitivity, are intimately related to the approximation and generalization abilities of the end-to-end model. Furthermore, our analysis matches closely our experimental observations under various conditions, suggesting that our theory can provide useful guidelines for designing deep architectures with reasoning layers.</font><div><br><b style="color:rgb(11,83,148)">Speaker Bio</b><font color="#0b5394">: Le Song is a Professor and the Deputy Chair of the Machine Learning Department, Mohamed bin Sayed University of AI, UAE. He was an Associate Professor in the Department of Computational Science and Engineering, College of Computing, Georgia Institute of Technology, worked as a research scientist at Google, and did his post-doc in Carnegie Mellon University. His principal research area is machine learning, especially kernel methods, deep learning, and probabilistic graphical models. He is the recipient of many best paper awards at major machine learning conferences, such as NeurIPS, ICML and AISTATS, and the NSF CAREER Award. He has also served as the area chair or senior program committee for many leading machine learning and AI conferences such as NeurIPS, ICML, ICLR, AAAI and IJCAI, and the action editor for JMLR and IEEE TPAMI. He is also a board member of the International Conference for Machine Learning.</font><div><br></div><div><b>Zoom Link</b>: <a href="https://cmu.zoom.us/j/94092736800?pwd=OWlCRlV6RERtRHByWWpkZEl0YkNOQT09" target="_blank">https://cmu.zoom.us/j/94092736800?pwd=OWlCRlV6RERtRHByWWpkZEl0YkNOQT09</a><br><br><br>Thanks,<br>Shaojie Bai (MLD)</div></div></div>
</blockquote></div>