Всем привет,
Я работаю над магистерской диссертацией в области компьютерных наук. В частности, я занимаюсь исследованием эффектов настройки гиперпараметров семантических моделей распределения при использовании их в качестве признаков в анализаторах статистических зависимостей. Я использую word2vec, недетерминированное программное обеспечение для встраивания слов на основе нейронной сети. Чтобы иметь возможность подтвердить свои результаты, я должен количественно оценить степень недетерминизма в моих моделях.
Однако я думаю, что этот вопрос можно задать на более абстрактном уровне — какой тест я могу использовать для количественной оценки степени недетерминизма в статистической модели? Скажем, например, что я получаю следующие результаты, выполняя один и тот же эксперимент пять раз:
89.5, 89.7, 89.4, 89.5, 89.9
Как я могу определить, «насколько недетерминирована» моя система, и использовать это как основу для принятия или отклонения результатов будущих экспериментов?