发布于 2026-08-27
摘要
这一篇主要是用于记录关于 LM 预训练中关于参数设置的一些经验之谈。这些经验的基础来自于 nanochat/nanoGPT 一系列 …
这一篇主要是用于记录关于 LM 预训练中关于参数设置的一些经验之谈。这些经验的基础来自于 nanochat/nanoGPT 一系列 …
这篇文章是计算机应用数学课的报告,当时正在研究 Muon,觉得好玩,就写了。现在看来还有很多写得不到位的地方,但扔了可惜,先端上来 …
这篇很短,主要是记录一些神奇的技术操作。 起因是回校前临时需要打印一些材料,遂尝试用自己的电脑接家里的打印机。家里的设备都是老东西 …
虽然已经摸鱼很久了,这篇文章最后还是决定补一下,免得日后网站维护的时候自己全忘了。另一方面,虽然关于 WordPress 和 Sa …