Илон Маск опубликовал исходный код своего чат-бота Grok-1

Компания Илона Маска опубликовала на GitHub исходный код своего чат-бота Grok-1. Данная языковая модель обладает 314 миллиардами параметров, что делает её одной из самых мощных на текущий момент. Компания предоставила доступ к весам базовой модели и сетевой архитектуре, завершив обучение модели в октябре 2023 года.

Модель распространяется под лицензией Apache 2.0, которая позволяет использовать Grok-1 в коммерческих проектах, однако не включает данные, использованные при обучении. Исследователи и энтузиасты могут бесплатно использовать архитектуру модели в своих проектах. Базовая модель обучена на большом объёме текстовых данных и не настроена для решения какой-либо конкретной задачи.