УДК 004.85
DOI: 10.36871/ek.up.p.r.2024.12.25.022

Авторы

Анна Викторовна Бойкова,
Тверской государственный технический университет, Тверь, Россия
Василий Васильевич Елистратов,
Министерство обороны РФ, Тверь, Россия

Аннотация

Большие языковые модели (Large language models — LLMs) произвели революцию в области искусственного интеллекта, поскольку значительно превосходят возможности человека в вопросах распознавания и генерации текста. Однако процесс создания таких моделей сопряжен с трудоемкими операциями, значительными затратами и высокими техническими требованиями. В статье предложен подход, позволяющий оценить затраты на обучение больших языковых моделей. Как показал анализ, ключевыми детерминантами, оказывающими влияние на итоговую стоимость модели, являются затраты на оборудование, аппаратное обеспечение, лицензионные платежи за используемое программное обеспечение, электроэнергию, аренду вычислительных мощностей в облаке и затраты на персонал. На основе разработанного подхода можно оценить затраты на обучение большой языковой модели и выбрать наиболее подходящий вариант по соотношению цена-качество.

Ключевые слова

затраты, модели обучения ИИ, искусственный интеллект, обучение моделей ИИ, большие языковые модели, капитальные затраты, эксплуатационные затраты, облачные технологии