<div dir="ltr">Forwarding for Predrag:<div><br><div class="gmail_quote">---------- Forwarded message ----------<br>From: <b class="gmail_sendername">Predrag Punosevac</b> <span dir="ltr"><<a href="mailto:predragp@andrew.cmu.edu">predragp@andrew.cmu.edu</a>></span><br>Date: Thu, Mar 22, 2018 at 7:21 PM<br>Subject: Re: Driver/library version mismatch on gpu nodes<br>To: <a href="mailto:mbandrews@cmu.edu">mbandrews@cmu.edu</a><span class=""><br>
<br>
</span>Dear Autonians,<br>
<br>
This turned to be little bit bigger job than originally anticipated.<br>
This is the summary of what has being done:<br>
<br>
gpu[1-9] with the exception of GPU7 which is used to serve a client have<br>
being upgraded to the latest 3.10.0-693.21.1.el7 including all packages<br>
<br>
nvidia-smi works as expected on all of those machines now<br>
<br>
devtool-4 tools were replaced with devtool-6 which means that on all<br>
those machines you have gcc 6<br>
<br>
miniconda3 (python 3.6.3.) in /opt/miniconda3<br>
<br>
All these machines now have /opt/rh-git29<br>
<br>
<br>
MATLAB has to be removed from GPU1 and GPU2 due to the space issue. I<br>
will be reinstalling it tomorrow on the different location. As a bonus<br>
you will get MATLAB R2018a which I am not planning to install on other<br>
servers unless requested (I will be waiting for R2018b).<br>
<br>
For some reason MATLAB no longer works with GPUs on servers GPU5 and<br>
GPU9. Those two servers will have the same treatment as GPU1 and GPU2<br>
and I will install the latest version of MATLAB in order to fix the<br>
problem (IIRC GPU8 and GPU9 are still only available to designated<br>
users).<br>
<br>
Finally Tensorflow is possibly broken due to a symlink. Please see my<br>
next e-mail. I plan to fix this later tonight.<br>
<span class="HOEnZb"><font color="#888888"><br>
Predrag</font></span></div><br></div></div>