由 dawei
2012年一代不世出的天才alex 和 其导师Hinton使用CUDA在NVIDIA GPU上编写了CUDA-CONVNET框架，在ImageNet竞赛中一鸣惊人，开启了深度学习的全新时代，英伟达敏锐的观察到了其潜在的可能性，开始向世界的互联网大企业推销GPU，并且专门设立了互联网行业销售，我也是在那个时候开始关注BP算法，并且在一年后决定离开英伟达加入了当时如日中天的百度IDL。
加入百度IDL后，着手开发深度学习基础库，当时在英伟达GPU上开发的深度学习基础计算，性能远超CUDA-CONVNET和Caffe，在此期间和alex在google code上有过讨论，其学术天才气质让我自惭形秽；在一次内部Hi讨论中，我论断：如果英伟达在Deep Learning领域做成功，他在深度领域的成就将会远超在传统HPC领域，当时在那个群中的朋友依旧活跃在各大公司，但各人成就差距渐大，这是后话了。在向互联网公司推销GPU的同时，英伟达就开始了其深度学习基础库CUDNN的开发，并且在不到一年后推向市场。而我在转正时决定离开百度IDL，后来追随汤晓欧教授创立商汤，走向了另外一段旅程。
在CUDA推出的一段时间内，英伟达的HPC业务收入相比其它业务还是小头，但是英伟达还是为了GPU计算开发了一代“热卡”Fermi，Fermi进一步降低了CUDA编程的难度，但是在游戏市场上差点被AMD打败，Fermi引发了是否应该为计算单独设计一个GPU架构的讨论。几年后，当我独自在各种限制和压力下事实上负责一个业务的时候，我意识到“大黄”的聪明睿智，如果当年真的为计算独立设计GPU，今天英伟达的GPU计算业务可能已经失败，离开英伟达的几年里，我渐渐深刻的认识到“大黄”是真正的战略天才，这也渐渐让我和商汤渐行渐远，最终分道扬镳。