<div dir="ltr">Things appear broken on at least some of the GPU machines. This worked before last night.<div><br></div><div><div>mbarnes1@gpu3$ python</div><div>Python 2.7.5 (default, Apr 15 2018, 20:27:58) </div><div>[GCC 4.8.5 20150623 (Red Hat 4.8.5-28)] on linux2</div><div>Type "help", "copyright", "credits" or "license" for more information.</div><div>>>> import tensorflow as tf</div><div>RuntimeError: module compiled against API version 0xb but this version of numpy is 0x7</div><div>RuntimeError: module compiled against API version 0xb but this version of numpy is 0x7</div><div>Traceback (most recent call last):</div><div>  File "<stdin>", line 1, in <module></div><div>  File "/usr/lib/python2.7/site-packages/tensorflow/__init__.py", line 24, in <module></div><div>    from tensorflow.python import *</div><div>  File "/usr/lib/python2.7/site-packages/tensorflow/python/__init__.py", line 63, in <module></div><div>    from tensorflow.python.framework.framework_lib import *</div><div>  File "/usr/lib/python2.7/site-packages/tensorflow/python/framework/framework_lib.py", line 81, in <module></div><div>    from tensorflow.python.framework.sparse_tensor import SparseTensor</div><div>  File "/usr/lib/python2.7/site-packages/tensorflow/python/framework/sparse_tensor.py", line 25, in <module></div><div>    from tensorflow.python.framework import tensor_util</div><div>  File "/usr/lib/python2.7/site-packages/tensorflow/python/framework/tensor_util.py", line 33, in <module></div><div>    from tensorflow.python.framework import fast_tensor_util</div><div>  File "__init__.pxd", line 163, in init tensorflow.python.framework.fast_tensor_util</div><div>ValueError: numpy.dtype has the wrong size, try recompiling. Expected 88, got 96</div></div></div><br><div class="gmail_quote"><div dir="ltr">On Wed, Apr 25, 2018 at 10:49 PM Predrag Punosevac <<a href="mailto:predragp@andrew.cmu.edu">predragp@andrew.cmu.edu</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Dear Autonians,<br>
<br>
On April 10, Red Hat Inc. has announced the release of Red Hat<br>
Enterprise Linux (RHEL) 7.5, the latest update of the company's<br>
enterprise-class Linux distribution.<br>
<br>
Thanks to the hard work of my friend Josko Plazonic and his team at<br>
Princeton University Springdale Linux a free, enterprise-class,<br>
community-supported computing platform functionally compatible with its<br>
upstream source, Red Hat Enterprise Linux (RHEL) has also been updated<br>
last night to the version 7.5.<br>
<br>
I am happy to announce that as of this moment all Auton Lab computing<br>
nodes have been updated to the version 7.5 with exception of few<br>
obsolete machines running Springdale 6.9. Note that I didn't update CUDA<br>
and NVidia drivers on GPU[1-9] as that would require reboots and perhaps<br>
would break deep learning software many of you are using. I also didn't<br>
reboot non GPU computing nodes in order to avoid disruption, thus nodes<br>
are still running the same kernels but the very latest userland.<br>
<br>
Virtual hosts running Springdale Linux are also upgraded as well as most<br>
desktops. I upgrading few remaining desktops right now. <br>
<br>
Please test if the things work for you and report any strange behavior.<br>
Also Ben and Jarod who have GPU cards in their desktops should be extra<br>
vigilant. Please let me know if your desktops look broken. I will be<br>
happy to upgrade your NVidia drivers and CUDA if the things appear<br>
broken.<br>
<br>
Best,<br>
Predrag<br>
</blockquote></div>