已完成 精读
动手学深度学习 v2
视频简介
该课程由亚马逊云计算首席科学家李沐老师主讲,理论上来说是《动手学深度学习》一书的配套视频课程,但是我认为其独立于书籍,知识点讲解部分比较简单,适合已经学过的或者看书不是很明白的同学进行学习。但是本课程最经典的部分是QA环节,在QA环节中,李沐老师会回答提出的问题,我们不仅能感受到老师的知识储备全面且丰富,同时也可以学习到很多工程上的知识,并了解当时(2022年)深度学习领域的整体行业情况。总之,QA环节是本课程的精华所在,值得仔细观看。
学习收获
了解到了很多深度学习的工程实践(俗称“炼丹”思想),为什么大家都默认这么做?以及有人提出疑问时大佬是如何回答的。有些超参数设置、数据增强策略搭配等细节书上往往不会说明为什么是这么设计的,但通过弹幕补充与QA环节能补全这部分知识的前因后果。就像一本历史书一样,读完后我们不知道未来会发生什么?但我们对领域过去发生了什么有了大概的了解,比如深度学习是如何一步步从感知机发展到1998年Yang LeCun提出的LeNet-5卷积神经网络,再到2012年ImageNet大赛中AlexNet的出现,之后又是VGG、ResNet、DenseNet等网络的出现,最后到2020年Transformer在CV领域的应用。通过了解这些历史,我们可以对深度学习的发展有一个大概的了解,并且知道未来可能会发生什么。另我印象最深的就是李沐老师在某期QA中针对自动驾驶的提问给出的答案与当今发展情况基本相符,说明行业内的人可以大致的预测到未来发展的方向,让我感受到了知识的可贵。同时,本课程还涵盖了自然语言处理(RNN、LSTM、GRU、Transformer以及Word2Vec等)的内容,非常值得学习的一门课!
学习情况
已完成系统性学习。