
TatuEngine
05 de jul. de 2026
SFT do TatuEngine — Adafactor e os 4 fixes do NaN
A saga de fazer o Student BitMamba-1B aprender sem explodir: Adafactor vs AdamW, a economia de 4 GB de VRAM, e os 4 bugs que produziam NaN no treinamento em bf16.
Continuar lendo →