Pandas и scikit-learn: KeyError: [....] отсутствует в индексе

Question

Я не понимаю, почему я получаю ошибку KeyError: '[ 1351 1352 1353 ... 13500 13501 13502] not in index' при запуске этого кода:

cv = KFold(n_splits=10)

for train_index, test_index in cv.split(X):
    f_train_X, f_valid_X = X[train_index], X[test_index]
    f_train_y, f_valid_y = y[train_index], y[test_index]

Я использую X (кадр данных Pandas), чтобы разделить I cv.split(X).

X.shape
y.shape
Out: (13503, 17)
Out: (13503,)

Answer 1

Проблема в том, как вы пытаетесь проиндексировать X, используя X[train_index]. Вам необходимо использовать .loc или .iloc, поскольку у вас есть pandas фрейм данных.

---

Используйте это

cv = KFold(n_splits=10)

for train_index, test_index in cv.split(X):
    f_train_X, f_valid_X = X.iloc[train_index], X.iloc[test_index]
    f_train_y, f_valid_y = y.iloc[train_index], y.iloc[test_index]

1-й способ: пример использования iloc

import pandas as pd
import numpy as np

df = pd.DataFrame(np.random.randint(0,100,size=(100, 4)), columns=list('ABCD'))

df[[1,2]]
#KeyError: '[1 2] not in index'

df.iloc[[1,2]]
#    A   B   C   D
#1  25  97  78  74
#2   6  84  16  21

2-й способ: например, путем преобразования панд в numpy заранее

df = df.values

#now this should work fine
df[[1,2]]
#array([[25, 97, 78, 74],
#      [ 6, 84, 16, 21]])