Методы калибровки квантизации HiFloat4: HiGPTQ, HiAutoRound, HiFlatQuant
В статье на arXiv (2610.41112v1) исследуются три подхода к калибровке формата HiFloat4 (HiF4) — HiGPTQ, HiAutoRound и HiFlatQuant. Авторы сообщают, что эти методы сокращают разрыв по точности с BF16 до менее чем 1% и превосходят NVFP4 на различных моделях и задачах по сравнению с прямым переводом в HiF4.