Краткое содержание

AFM-4.5B — это языковая модель с инструкционной настройкой, содержащая 4,5 миллиарда параметров, разработанная компанией Arcee AI. Модель предварительно обучалась примерно на 8 триллионах токенов, включая 6,5 триллиона токенов общих данных и 1,5 триллиона токенов с акцентом на математическое рассуждение и генерацию кода.