Вопросы по теме 'regularized'

R Удалить перехватчики в логистической регрессии
Я использую библиотеку rms для выполнения регуляризованной логистической регрессии и хочу принудительно установить перехват до нуля. Я использую следующее для моделирования и регрессии: library(rms) N = 100 pred <- vapply(1:12, function(i)...
928 просмотров
schedule 28.11.2021

Что делает параметр sklearn.linear_model RidgeCV normalize=
Меня смущает то, что именно normalized= делает в RidgeCV из sklearn.linear_model. В документации говорится: normalize : bool, default=False Этот параметр игнорируется, если для fit_intercept установлено значение False. Если True,...
278 просмотров

L1-регуляризация: где использовать функцию штрафных издержек?
Регуляризация L1 добавляет штрафной член к функции стоимости, чтобы ограничить размер весов. Правильно ли я понимаю, что эта функция штрафных затрат используется только на этапе оптимизации, а не для расчета потерь модели? Например. для расчета...
133 просмотров
schedule 07.08.2022

лямбда или альфа для параметра регуляризации в регуляризации?
Итак, мой вопрос касается параметра регуляризации в регуляризации (Ридж и Лассо). Это называется лямбда или альфа? Некоторые источники, такие как это , это и DataCamp говорит, что это лямбда. Казалось бы, ускоренный курс Google по машинному...
47 просмотров

Почему необходимо использовать регуляризацию в задачах машинного обучения?
Это может показаться глупым вопросом, но я просто не могу придумать разумный ответ. Говорят, что регуляризация может помочь нам получить простые модели вместо сложных, чтобы избежать переобучения. Но для задачи линейной классификации: f(x) =...
2331 просмотров

TensorFlow — введение в сеть как регуляризации L2, так и отсева. Есть ли в этом смысл?
В настоящее время я играю с ANN, которая является частью курса Udactity DeepLearning. Я успешно построил и обучил сеть и ввел регуляризацию L2 для всех весов и смещений. Прямо сейчас я пробую отсев для скрытого слоя, чтобы улучшить обобщение....
22878 просмотров

Умножает ли кофе параметр регуляризации на смещение?
У меня куча вопросов о том, как регуляризация и предвзятость работают в кафе. Во-первых, в сети по умолчанию существуют тенденциозные, правильно ли это? Или мне нужно попросить кафе добавить их? Во-вторых, когда он получает значение потерь, он...
559 просмотров
schedule 11.02.2023

Как я могу применить пользовательскую регуляризацию в CNTK (используя python)?
Знаете ли вы, как я могу применить пользовательскую функцию регуляризации к CNTK? В частности, я хотел бы добавить к потерям производную функции по отношению к входам; что-то типа newLoss = loss + lambda * gradient_F(inputs) где F —...
290 просмотров

Какой тип регуляризации использует регуляризацию L2 или исключение в multiRNNCell?
Я работаю над проектом, связанным с автокодировщиком последовательностей для прогнозирования временных рядов. Итак, я использовал tf.contrib.rnn.MultiRNNCell в кодировщике и декодере. Я не понимаю, какая стратегия используется для регуляризации...
580 просмотров
schedule 11.05.2023

Поддерживает ли scikit-learn общую тихоновскую регуляризацию в своих модулях Ridge?
Используя обозначения из Википедии , кажется, что scikit-learn Ridge используют кратную матрицу идентичности в качестве Матрица Тихонова Гамма. Таким образом, матрица Тихонова задается единственным значением альфа. Это приводит к тому, что все...
606 просмотров

Должен ли я сначала найти параметр или степень регуляризации для алгоритма регрессии опорных векторов?
Я работаю над проблемой прогнозирования дохода от фильма. Я использую алгоритм регрессии опорных векторов sklearn с полиномиальным ядром. Я попытался найти степень, которая дает наилучшую точность, используя значение параметра регуляризации по...
52 просмотров