Сингапурская компания по исследованию AGI Sapient Intelligence выпустила полные веса, код предварительного обучения и конвейер данных для HRM-Text — языковой модели, построенной на архитектуре, которую она называет Иерархической моделью рассуждений. Весь пакет доступен под лицензией Apache 2.0 на Hugging Face и GitHub, что означает, что любой может использовать его, изменять его или коммерчески развивать.
Заметная часть — это не только жест с открытым исходным кодом. Это экономика. HRM-Text, который имеет примерно 1 миллиард параметров, был предобучен на около 40 миллиардах токенов и стоил примерно от 1 000 до 1 500 долларов на скромном оборудовании. Для сравнения, передовые модели от крупных лабораторий обычно обучаются на триллионах токенов с использованием вычислительных бюджетов в десятки или сотни миллионов долларов.
Как это на самом деле работает
Модель использует иерархическую скрытую рекуррентную архитектуру, описанную компанией. Высокоуровневый модуль выполняет медленные, абстрактные рассуждения, проходя через 2 «H-цикла» за один проход. Низкоуровневый модуль обрабатывает быстрые, детальные операции, выполняя от 3 до 6 «L-циклов» за один проход. Вместе эти модули позволяют модели многократно итерировать свои рассуждения до генерации выходных данных, сохраняя при этом количество параметров неизменным.
Вместо генерации видимых токенов цепочки рассуждений, которые потребляют контекстное окно и увеличивают стоимость вывода, HRM-Text выполняет итеративное мышление внутренне. Рассуждения происходят в скрытых состояниях модели, а не в выходном тексте.
Результаты, превосходящие эталонные показатели
Независимые оценки, проведенные в апреле 2026 года, показывают результаты в цифрах: HRM-Text набрал 56,2% по бенчмарку MATH, 82,2% по DROP, 81,9% по ARC-Challenge и 60,7% по MMLU. Предварительное обучение, как сообщается, было завершено примерно за один день.
HRM-Text основан на более ранней работе Sapient. Первоначальная модель HRM, открытая в июле 2025 года, имела всего 27 миллионов параметров и показала высокую производительность на сложных задачах логического вывода даже при использовании всего 1000 обучающих примеров. HRM-Text представляет собой примерно 37-кратное увеличение числа параметров при сохранении той же архитектурной философии.
Sapient создала канал Discord для разработчиков, заинтересованных в изучении архитектуры. Лицензия Apache 2.0 устраняет правовые барьеры. Стоимость обучения в $1 500 устраняет большую часть финансовых барьеров.
