强化学习(吉建民) 2024秋 2023秋 2022秋 2021秋 2020秋 2019秋 2018秋  课程号:DSCI6003P01
2024秋 2023秋 2022秋 2021秋 2020秋 2019秋 2018秋  课程号:DSCI6003P01
10.0(10人评价)
10.0(10人评价)
  • 课程难度:中等
  • 作业多少:很少
  • 给分好坏:超好
  • 收获大小:一般
选课类别:基础 教学类型:理论实验课
课程类别:研究生课程 开课单位:人工智能与数据科学学院
课程层次:硕士   学分:4.0
课程主页:暂无(如果你知道,劳烦告诉我们!)
AI 总结 AI 总结为根据点评内容自动生成,仅供参考

教学水平与课程内容

吉建民老师的《强化学习》课程内容深度丰富,涵盖了大量经典数学推导和前沿知识,适合有基础的同学深入学习。讲课速度较快,节奏紧凑,需要课前预习和课后复习才能跟上。老师激情四溢,分享科研心得和创业故事,课堂生动有趣。助教讲解实验详细,课程设计合理。

考核与给分

课程不点名,没有平时作业,有 3 个实验和 1 个组队大作业。实验有加分项,可以通过开源资料完成,大作业需要调研和分析。虽然有一定难度,但给分较好,大部分同学得到 80+至 85+不等。

作业与实验

课程实验内容包括 Sarsa、Q-learning、PG、A2C、DQN 等,提供代码框架,难度适中。需要提前准备显卡和时间来完成实验。总体来说,作业量适中,且有详细的助教指导,易于入手。

总体评价

吉建民老师的课程被认为是强化学习领域的“神中神”,教学水平高,收获颇丰。虽然理论部分难度较大,但通过课程回放和助教的帮助可以克服。总体事少分高,值得推荐。

排序 学期

评分 评分 10条点评

匿名用户 2022秋
  • 课程难度:中等
  • 作业多少:很少
  • 给分好坏:超好
  • 收获大小:很多
  • 难度:中等
  • 作业:很少
  • 给分:超好
  • 收获:很多

省流:分高事少,狠狠选。

开明的教育家,渊博的学者,富有激情的创业者,这是我心中吉老师的画像,也很符合我对一个优秀导师的期待。

开明的教育家是指吉老师对考核方式,及到课率的非强制。而且经常会站在同学们的角度思考问题,直言如果对强化学习非常熟悉的同学可以不到堂,但是我觉得对强化学习比较熟悉的同学听课可能会收获更多,因为这门课内容整体还挺多的,而且经典部分涉及了很多数学推导,私以为吉老师把自己定义为了引路者而不是讲授者,所以讲课速度确实快了一点,偶尔还会来点跳跃性,课前预习课后及时复习才能跟上节奏。By the way,可能也是这个原因当课程过半的时候到堂学生数也流失过半了。但可能这才是精英教育该有的样子。

渊博的学者是指吉老师上课期间并不会完全的照本宣科,常常会插入自己的做科研时的心得以及本实验室的研究经验,上面说的上课速度快也说建立在老师对知识的烂熟于心。激情的讲课方式,字里行间都显示着自己对自己研究领域的热爱。所以希望各位后来人坚持跟一跟,虽然老师不会点名,也没有平时的随堂作业,但是听惯了许多上课像上fen(二声)的课堂,如此充满激情且风格鲜明的老师值得。

富有激情的创业者,时过几月,让我再推ballman equation肯定是磕磕绊绊,但是吉老师上课所分享的一些小故事还是历历在目,无论是讲述他自己激情燃烧的岁月,还是讲一些前沿进展,仔细琢磨都会有些启发。他也谈到自己在不断鼓励自己的学生们去创业,并且准备好了许多资源,每每谈到创业他热切的眼神总是那么深入人心,祝愿有一天在中国的机器人圈提到南方的李泽湘和北方的王田苗时,人们也会不由自主想起中部的吉建民。

10 0 复制链接
daiaqswde 2021秋
  • 课程难度:中等
  • 作业多少:很少
  • 给分好坏:一般
  • 收获大小:一般
  • 难度:中等
  • 作业:很少
  • 给分:一般
  • 收获:一般

终于出分了,竟然比机器学习出分还要晚!

本学期没有作业,上课不签到(可以不去,学期末的时候教室空空荡荡的),有 3 个实验 + 1 个组队 (上限5人) 大作业,分别写 

1. Sarsa、Q-learning

2. PG、A2C

3. DQN

框架都会给出,用心去github上搜搜总是有答案的。每次实验都有加分项供巨佬卷,第三个实验建议早做或者用个好显卡,否则一次就要跑三天

给分给了 85+,只做了实验一的附加,大作业写的水,已经很满意了。大作业是去 github 上找了个著名的RL算法进行一波调参+分析。

貌似大家的分数都不是很高,我有个猜想,会不会是组队人数过多导致分数下降

混分还是很简单的,想要卷绩点就比较困难了

4 0 复制链接
hyfqphy 2023秋
  • 课程难度:中等
  • 作业多少:很少
  • 给分好坏:超好
  • 收获大小:很多
  • 难度:中等
  • 作业:很少
  • 给分:超好
  • 收获:很多

这个课,我只能说是神中神。吉老师是全国强化学习老师中的GOAT!!!

课程设计和作业都特别特别合理,收获很多。不选后悔系列。

事少分多,yyds!

2 0 复制链接
JingT-LIU 2023秋
  • 课程难度:中等
  • 作业多少:中等
  • 给分好坏:超好
  • 收获大小:很多
  • 难度:中等
  • 作业:中等
  • 给分:超好
  • 收获:很多

这门强化学习(RL)课程内容深度丰富,如果学生在课堂上没能理解,可以通过观看课程回放进行学习。有邀请网易公司的资深专家为学生们带来前沿报告。

此外,课程中的三个大作业都有相应的开源资料。老师不点名。

然后,GPA4.3

 

 

 

1 0 复制链接
匿名用户 2023秋
  • 课程难度:中等
  • 作业多少:很少
  • 给分好坏:超好
  • 收获大小:很多
  • 难度:中等
  • 作业:很少
  • 给分:超好
  • 收获:很多

课程本身对于没有强化学习基础的同学来说有一定难度,但是收获很多,可以跟着吉老师了解到领域内前沿的一些知识。作业少且布置合理,难度不大,很容易入手(助教对于每次实验的讲解也很详细),给分很好!吉老师yyds

1 0 复制链接
匿名用户 2023秋
  • 课程难度:中等
  • 作业多少:很少
  • 给分好坏:超好
  • 收获大小:没有
  • 难度:中等
  • 作业:很少
  • 给分:超好
  • 收获:没有

虽然强化学习理论我啥也听不懂,但是作业不多(虽然相比22增加了一些),而且作业真的很好抄。上课也从不点名,听说最少时候一百多人只有30个人去上课。

1 0 复制链接
winewood 2023秋
  • 课程难度:中等
  • 作业多少:很少
  • 给分好坏:超好
  • 收获大小:很多
  • 难度:中等
  • 作业:很少
  • 给分:超好
  • 收获:很多

给分超好,作业很好写。刚开始讲基础的部分会有点快,但是自己课下看看了解一下就问题不大了。冲,很好的。

 

0 2 复制链接
winewood另外如果课后想再看看的话,推荐一下【【强化学习的数学原理】课程:从零开始到透彻理解(完结)-哔哩哔哩】 https://b23.tv/QSQAfWC
φφ回复 @winewood: 课看完了,本科生可以选这个课吗
立即登录,说说你的看法
oneway 2022秋
  • 课程难度:中等
  • 作业多少:中等
  • 给分好坏:超好
  • 收获大小:很多
  • 难度:中等
  • 作业:中等
  • 给分:超好
  • 收获:很多

学期初据说要考试,但最后因为疫情原因没考,改独立完成大作业了,因此作为基础课十分推荐。

一共有两次编程作业和单人大作业,上课没有签到。

编程作业难度适中,没接触过强化学习也可以顺利入门,给了代码框架,往里面填代码即可。大作业是从一些选题里选一个进行调研,跑跑代码+阐述原理+分析,最后给分80+。

 

0 0 复制链接

吉建民

教师主页: 戳这里

其他老师的「强化学习」课

吉建民老师的其他课

机器人编程入门 10.0 (1) 2014夏
数理逻辑 8.0 (1) 2021春
人工智能基础 7.6 (36) 2024春 2023春...
数理逻辑 2014春 2013春