Тип публикации: доклад, тезисы доклада, статья из сборника материалов конференций
Конференция: Решетневские чтения; Красноярск; Красноярск
Год издания: 2025
Ключевые слова: large language models, knowledge distillation, evolutionary heuristics, multi-objective optimization, intelligent systems, space industry, большие языковые модели, дистилляция знаний, эволюционные эвристики, многокритериальная оптимизация, интеллектуальные системы, ракетно-космическая отрасль
Аннотация: В работе рассматривается применение эволюционных эвристик для оптимальной дистилляции больших языковых моделей, что позволяет снижать вычислительные затраты без потери качества. Полученные результаты могут быть использованы в системах обработки естественного языка для ракетно-космической отрасли, включая интеллектуальный анализ докПоказать полностьюументации и поддержку операторов. This work explores the use of evolutionary heuristics for optimal distillation of large language models, which reduces computational costs while keeping model quality. The results support appli-cations in the space industry, including intelligent document analysis and operator assistance sys-tems.
Журнал: Решетневские чтения
Номера страниц: 162-164
Место издания: Красноярск