打赏

相关文章

蚂蚁三面问:“SFT微调超参怎么选?“ 我说lr小点、Epoch三轮、用Cosine调度. 他追问:“为啥是3轮不是5轮?lr多小算小?“ 我一下不知咋回。

前段时间有个师弟去面蚂蚁,三面的时候被问到SFT超参数怎么选。他觉得自己准备得挺充分,张口就来:学习率小一点、Epoch两三轮、用Cosine调度。面试官听完没什么表情,点了点头,然后问了一个他没想到的问题:“…

手机版浏览

扫一扫体验

微信公众账号

微信扫一扫加关注

返回
顶部