如何调整GaussianNB？

Question

尝试用 GaussianNB() 拟合数据给我的准确度分数很低。

我想尝试网格搜索，但似乎无法设置参数 sigma 和 theta。反正有没有调GausssianNB?

Answer 1

朴素贝叶斯没有任何可调整的超参数。

Answer 2

截至 version 0.20

GaussianNB().get_params().keys() returns 'priors' 和 'var_smoothing'

网格搜索如下所示：

pipeline = Pipeline([
    ('clf', GaussianNB())
])

parameters = {
    'clf__priors': [None],
    'clf__var_smoothing': [0.00000001, 0.000000001, 0.00000001]
}

cv = GridSearchCV(pipeline, param_grid=parameters)

cv.fit(X_train, y_train)
y_pred_gnb = cv.predict(X_test)

Answer 3

您可以像这样调整“var_smoothing”参数：

nb_classifier = GaussianNB()

params_NB = {'var_smoothing': np.logspace(0,-9, num=100)}
gs_NB = GridSearchCV(estimator=nb_classifier, 
                 param_grid=params_NB, 
                 cv=cv_method,   # use any cross validation technique 
                 verbose=1, 
                 scoring='accuracy') 
gs_NB.fit(x_train, y_train)

gs_NB.best_params_

Answer 4

在 sklearn 管道中，它可能如下所示：

pipe = Pipeline(steps=[
                    ('pca', PCA()),
                    ('estimator', GaussianNB()),
                    ])
    
parameters = {'estimator__var_smoothing': [1e-11, 1e-10, 1e-9]}
Bayes = GridSearchCV(pipe, parameters, scoring='accuracy', cv=10).fit(X_train, y_train)
print(Bayes.best_estimator_)
print('best score:')
print(Bayes.best_score_)
predictions = Bayes.best_estimator_.predict(X_test)

如何调整GaussianNB？

How to tune GaussianNB?

machine-learning

scikit-learn

naivebayes