Яндекс Метрика
Языковая модель

Luminous Sparse

Aleph Alpha,Graphcore
Генерация текста

Luminous Sparse — это прорыв в вычислительной эффективности ИИ, созданный Aleph Alpha и Graphcore. Разработчики «сжали» модель с 13 до 2,6 миллиардов параметров, сохранив её мощь и научив эффективно работать с разреженными матрицами на чипах IPU.

Graphcore and our partner Aleph Alpha are unveiling a significant advance in AI compute efficiency, with the sparsification of a 13bn parameter model down to just 2.6bn parameters. The advanced technique, which removes around 80% of the model’s weights while retaining most of its capabilities, utilizes the IPU’s support for point sparse matrix multiplications - a characteristic of its made-for-AI architecture.

Что такое Luminous Sparse?+
Кто разработал Luminous Sparse?+
Какие задачи решает Luminous Sparse?+