Параметры ядра Гауссовой регрессии процесса: как получить их в Scikit-learn? - PullRequest
0 голосов
/ 11 мая 2018

Я использую квадрат экспоненциального ядра или RBF в моей операции регрессии с использованием GaussianProcessRegressor из Scikit-learn. Кроме того, я использую внутренний оптимизатор 'fmin_l_bfgs_b' (алгоритм L-BFGS-B) для оптимизации параметров ядра. В моем случае параметры ядра - это масштаб длины и дисперсия сигнала. Документация относительно log_marginal_likelihood выглядит следующим образом:

enter image description here

Я следовал этой документации, чтобы распечатать GPML kernel и log_marginal_likelihood. Ниже приведен фрагмент кода:

print("GPML kernel: %s" % gp.kernel_)
print("Log-marginal-likelihood:",
       gp.log_marginal_likelihood(gp.kernel_.theta, eval_gradient = True))

На консоли выводится следующее значение:

    GPML kernel: 31.6**2 * RBF(length_scale=1.94)
Log-marginal-likelihood: (-115.33295413296841, array([ 1.01038168e+02, -2.16465175e-07]))

Здесь я не смог выяснить значения, напечатанные с логарифмической вероятностью. Какие значения внутри массива?

Мой фрагмент кода относительно регрессии выглядит следующим образом:

x_train = np.array([[0,0],[2,2],[3,3]])
y_train = np.array([200,321,417])
xvalues = np.array([0,1,2,3])
yvalues = np.array([0,1,2,3])
a,b = np.meshgrid(xvalues,yvalues)
positions = np.vstack([a.ravel(), b.ravel()])
x_test = (np.array(positions)).T
kernel = C(1.0, (1e-3, 1e3)) * RBF(10)
gp = GaussianProcessRegressor(kernel=kernel, optimizer = 'fmin_l_bfgs_b',alpha = 1.5, n_restarts_optimizer=5)
gp.fit(x_train, y_train)
y_pred_test, sigma = gp.predict(x_test, return_std =True)

Правильный ли мой подход к печати параметров ядра?

Спасибо!

1 Ответ

0 голосов
/ 14 мая 2018

Значения, возвращаемые gp.log_marginal_likelihood, указываются в документах, которые вы прикрепили, первое значение на самом деле представляет собой конечную журнальную предельную вероятность переданного параметра, в вашем случае gp.kernel_.theta, а значения в массиве - это градиенты суважение к параметрам ядра.

Чтобы получить полученные параметры ядра после оптимизации.Используйте возвращенное ядро ​​с:

gp.kernel_.get_params()

, который возвращает словарь, содержащий параметры, или вы можете получить их по отдельности, используя:

gp.kernel_.k1

и

gp.kernel_.k2
...