build_gpu_drivers

Compile Nvidia GPU drivers

编译方法对比

编译方法：

• 方法 A：https://github.com/emergingstack/es-dev-stack
• 方法 B：https://github.com/Clarifai/coreos-nvidia 此方法编译方便，推荐

方案	CoreOS Version	Nvidia driver 352.39	Nvidia driver 367.35
方法 A	1010.5.0(4.5.0-coreos-rc1)	工作正常	编译通过，不能正常工作（undefined in Nvidia-uvm）
方法 A	1068.9.0(4.6.3-coreos)	编译不通过 #12	未尝试
方法 B	1010.5.0(4.5.0-coreos-rc1)	需要修改，打补丁 nvprocfs.patch	编译通过，不能正常工作（undefined in Nvidia-uvm）
方法 B	1068.9.0(4.6.3-coreos)	编译不通过 #12	工作正常

注：

• 方法 B 是在CentOS 7.2.1511 测试， systemd-nspawn 版本为 219，比 https://github.com/Clarifai/coreos-nvidia 建议的版本 229 低
• 方法 B 只给出了编译 Nvidia driver，后续操作需参考方法 A
• 方法 B 简单方便，优于方法 A，推荐

结论：

采用 方法B 编译 + 1068.9.0(4.6.3-coreos) + Nvidia driver 367.35

运行应用程序只需加载已编译好的驱动，不需要再重新编译

Compile GPU drivers (方法B)

编译不需要在 CoreOS 系统上，以 CentOS 7.2.1511 为例， systemd-nspawn 版本为 219。

build.sh DRIVER_VERSION CHANNEL COREOS_VERSION

e.g.

./build.sh 367.35 stable 1068.9.0

The scripts will download both the official NVIDIA archive and the CoreOS developer images, caching them afterwards. It will then create three archives:

压缩包	说明
libraries-[DRIVER_VERSION].tar.bz2	GPU 动态库
tools-[DRIVER_VERSION].tar.bz2	GPU 工具
modules-[COREOS_VERSION]-[DRIVER_VERSION].tar.bz2	GPU 驱动

方法B编译结果

CoreOS Version	Nvidia driver	编译结果
1010.5.0(4.5.0-coreos-rc1)	367.35	编译通过，不能使用
1068.9.0(4.6.3-coreos)	367.35	编译通过，正常使用
1122.2.0(4.7.0-coreos)	367.57	编译通过，正常使用
1122.3.0(4.7.0-coreos-rc1)	367.35	编译不通过，kernel 接口有改动
1122.3.0(4.7.0-coreos-rc1)	367.57	编译通过，不能使用

结论

编译通过，而不能使用是 nvidia-uvm.ko 驱动文件大小过小，正常使用 nvidia-uvm.ko 和 nvidia.ko 大小相当（>10M），不能使用的 nvidia-uvm.ko 的文件大小在1M左右

参考

• 方法 A：https://github.com/emergingstack/es-dev-stack
• 方法 B：https://github.com/Clarifai/coreos-nvidia
• http://www.emergingstack.com/2016/01/10/Nvidia-GPU-plus-CoreOS-plus-Docker-plus-TensorFlow.html
• http://tleyden.github.io/blog/2014/11/04/coreos-with-nvidia-cuda-gpu-drivers/
• https://github.com/indigo-dc/Ubuntu1404_pyopencl/blob/master/Dockerfile
• https://github.com/NVIDIA/nvidia-docker/wiki/CUDA#requirements