
В Nature описали байтфикацию, переводящую языковые модели на байты
Исследователи предложили переводить готовые языковые модели на работу с байтами UTF-8. На это уходит меньше 1% обычного бюджета предобучения, а качество байтовых версий близко к исходным моделям.
Читать новость








