这篇文章其实讲了很多细节内容,之后很多小巧思也被kai0学去了。总之核心在于RL,一个critic transformer $Q(o_t,l,s_t,a_t)$,那么接下来的很多展开都与这个critic相关:
← Home · All Readings