跳到正文
Civitai · Articles·· 2 小时前

我如何为 Anima 制作 Qwen3.5 文本编码器,以及能否换用更大的 LLM

How I Made the Qwen3.5 Text Encoder for Anima (and Can You Use a Bigger LLM?)

AI 导读

作者公开了为 Anima 制作 Qwen3.5-0.8B 文本编码器的完整流程:冻结 Anima、适配器与 Qwen3.5 层,只训练约 2.1M 参数的 head,在 RTX 2060 12GB 上缓存与训练各约 14 分钟,验证集相对误差从 1.12 降到 0.022。

来源:Civitai · Articles · civitai.com