选课类别:基础 | 教学类型:理论实验课 |
课程类别:研究生课程 | 开课单位:人工智能与数据科学学院 |
课程层次:硕士 | 学分:4.0 |
吉建民老师的《强化学习》课程内容深度丰富,涵盖了大量经典数学推导和前沿知识,适合有基础的同学深入学习。讲课速度较快,节奏紧凑,需要课前预习和课后复习才能跟上。老师激情四溢,分享科研心得和创业故事,课堂生动有趣。助教讲解实验详细,课程设计合理。
课程不点名,没有平时作业,有 3 个实验和 1 个组队大作业。实验有加分项,可以通过开源资料完成,大作业需要调研和分析。虽然有一定难度,但给分较好,大部分同学得到 80+至 85+不等。
课程实验内容包括 Sarsa、Q-learning、PG、A2C、DQN 等,提供代码框架,难度适中。需要提前准备显卡和时间来完成实验。总体来说,作业量适中,且有详细的助教指导,易于入手。
吉建民老师的课程被认为是强化学习领域的“神中神”,教学水平高,收获颇丰。虽然理论部分难度较大,但通过课程回放和助教的帮助可以克服。总体事少分高,值得推荐。
省流:分高事少,狠狠选。
开明的教育家,渊博的学者,富有激情的创业者,这是我心中吉老师的画像,也很符合我对一个优秀导师的期待。
开明的教育家是指吉老师对考核方式,及到课率的非强制。而且经常会站在同学们的角度思考问题,直言如果对强化学习非常熟悉的同学可以不到堂,但是我觉得对强化学习比较熟悉的同学听课可能会收获更多,因为这门课内容整体还挺多的,而且经典部分涉及了很多数学推导,私以为吉老师把自己定义为了引路者而不是讲授者,所以讲课速度确实快了一点,偶尔还会来点跳跃性,课前预习课后及时复习才能跟上节奏。By the way,可能也是这个原因当课程过半的时候到堂学生数也流失过半了。但可能这才是精英教育该有的样子。
渊博的学者是指吉老师上课期间并不会完全的照本宣科,常常会插入自己的做科研时的心得以及本实验室的研究经验,上面说的上课速度快也说建立在老师对知识的烂熟于心。激情的讲课方式,字里行间都显示着自己对自己研究领域的热爱。所以希望各位后来人坚持跟一跟,虽然老师不会点名,也没有平时的随堂作业,但是听惯了许多上课像上fen(二声)的课堂,如此充满激情且风格鲜明的老师值得。
富有激情的创业者,时过几月,让我再推ballman equation肯定是磕磕绊绊,但是吉老师上课所分享的一些小故事还是历历在目,无论是讲述他自己激情燃烧的岁月,还是讲一些前沿进展,仔细琢磨都会有些启发。他也谈到自己在不断鼓励自己的学生们去创业,并且准备好了许多资源,每每谈到创业他热切的眼神总是那么深入人心,祝愿有一天在中国的机器人圈提到南方的李泽湘和北方的王田苗时,人们也会不由自主想起中部的吉建民。
终于出分了,竟然比机器学习出分还要晚!
本学期没有作业,上课不签到(可以不去,学期末的时候教室空空荡荡的),有 3 个实验 + 1 个组队 (上限5人) 大作业,分别写
1. Sarsa、Q-learning
2. PG、A2C
3. DQN
框架都会给出,用心去github上搜搜总是有答案的。每次实验都有加分项供巨佬卷,第三个实验建议早做或者用个好显卡,否则一次就要跑三天
给分给了 85+,只做了实验一的附加,大作业写的水,已经很满意了。大作业是去 github 上找了个著名的RL算法进行一波调参+分析。
(貌似大家的分数都不是很高,我有个猜想,会不会是组队人数过多导致分数下降)
混分还是很简单的,想要卷绩点就比较困难了
这个课,我只能说是神中神。吉老师是全国强化学习老师中的GOAT!!!
课程设计和作业都特别特别合理,收获很多。不选后悔系列。
事少分多,yyds!
这门强化学习(RL)课程内容深度丰富,如果学生在课堂上没能理解,可以通过观看课程回放进行学习。有邀请网易公司的资深专家为学生们带来前沿报告。
此外,课程中的三个大作业都有相应的开源资料。老师不点名。
然后,GPA4.3
课程本身对于没有强化学习基础的同学来说有一定难度,但是收获很多,可以跟着吉老师了解到领域内前沿的一些知识。作业少且布置合理,难度不大,很容易入手(助教对于每次实验的讲解也很详细),给分很好!吉老师yyds
虽然强化学习理论我啥也听不懂,但是作业不多(虽然相比22增加了一些),而且作业真的很好抄。上课也从不点名,听说最少时候一百多人只有30个人去上课。
给分超好,作业很好写。刚开始讲基础的部分会有点快,但是自己课下看看了解一下就问题不大了。冲,很好的。