ОЦЕНКА ЭФФЕКТИВНОСТИ СИНТЕЗА СТОХАСТИЧЕСКИХ МОДЕЛЕЙ С УПРАВЛЯЕМЫМИ СВОЙСТВАМИ: EVALUATION OF THE EFFECTIVENESS OF SYNTHESIS OF STOCHASTIC MODELS WITH CONTROLLED PROPERTIES
В работе исследуется возможность использования больших языковых моделей (LLM) в качестве источников стохастических бинарных после-довательностей с управляемыми статистическими свойствами. Показано, что ги-перпараметр температуры, регулирующий дисперсию выходного распределения вероятностей токенов, может рассматриваться как инструмент контролируемого управления энтропией генерируемых данных. На основе модели GPT-2 реализована методика преобразования вероятностных выходов LLM в бинарные последователь-ности фиксированной длины и проведена их оценка с использованием энтропийно-го анализа и адаптированного набора статистических тестов, аналогичных NIST SP 800–22. Экспериментальные результаты демонстрируют монотонный рост энтропии с увеличением температуры и существенное улучшение статистических характери-стик последовательностей. При температурах T ≥ 2.0 достигается прохождение до 83,3 % применённых тестов, что соответствует уровню качественных псевдослучай-ных последовательностей для некриптографических применений. Одновременно выявлено ограничение подхода, связанное с наличием слабовыраженных периоди-ческих компонент, обусловленных архитектурной детерминированностью модели. Полученные результаты определяют границы применимости LLM в задачах модели-рования, синтеза данных и тестирования алгоритмов.
Сведения
- Опубликовано
- 2026 · Т. 7, № 2(26), С. 468-483
- Язык
- Русский
- ISSN
- 2708-2032 · 2708-2040
- Издатель
- International Information Technology University
- Аффилиации
- Международный университет информационных технологий, Алматы, Казахстан
Федеральное государственное бюджетное образовательное учреждение высшего образования «Дальневосточный государственный аграрный университет», Благовещенск, Россия