tensorflow-gpu 錯誤： ImportError: libnvidia-fatbinaryloader.so.375.66

剛剛登入我的 aws instance 想要用 tensorflow 跑 model training, 卻出現了以下的錯誤訊息。昨天還跑得很順呀～
“ImportError: libnvidia-fatbinaryloader.so.375.66: cannot open shared object file: No such file or directory”

google search 看到一些結果，看不懂：
https://github.com/tensorflow/tensorflow/issues/9071

http://www.nvidia.com/object/gpu-accelerated-applications-tensorflow-installation.html
按照 nvidia 跟 tensorflow 的網頁，重新安裝 nvidia drive, cuda, cudnn, tensorflow-gpu, 都沒用。

nvidia-smi 也會出現錯誤訊息，忘記抄下了。

sudo apt-get upgrade, 發現有被 held back 的 upgrade:
https://askubuntu.com/questions/601/the-following-packages-have-been-kept-back-why-and-how-do-i-solve-it

按照比較安全的方法，分別升級它們：
sudo apt-get install cuda-drivers
sudo apt-get install libcuda1–375
sudo apt-get install nvidia-opencl-icd-375
然後 reboot, 才回復正常，可以繼續使用 gpu 版本 tensorflow 做事。