// калькулятор стоимости обучения
Оцените стоимость обучения ИИ-модели на основе количества параметров.
// количество параметров
1M1B100B1T
// оценка стоимости обучения
$43K
// примерное время обучения
< 1 день на 8x A100
// требования к оборудованию
1-4x NVIDIA A100 (40GB)
// сравнение
Модель с 63.1M параметрами стоит примерно как GPT-2
// опорные данные
| Модель | Параметры | Стоимость |
|---|---|---|
| GPT-2 | 1.5B | $50K |
| LLaMA 7B | 7.0B | $500K |
| LLaMA 70B | 70.0B | $5.0M |
| GPT-4 | 1.8T | $100.0M |