Как мне в одно касание кодировать массив строк с помощью Numpy? - PullRequest
0 голосов
/ 03 ноября 2019

Я знаю, что существуют неоптимальные решения, но я пытаюсь оптимизировать мой код. Пока самый короткий путь, который я нашел, это:

import numpy as np
from sklearn.preprocessing import OrdinalEncoder

target = np.array(['dog', 'dog', 'cat', 'cat', 'cat', 'dog', 'dog', 'cat', 'cat'])

oe = OrdinalEncoder()
target = oe.fit_transform(target.reshape(-1, 1)).ravel()
target = np.eye(np.unique(target).shape[0])[np.array(target, dtype=np.int32)]
print(target)

[[0. 1.]
[0. 1.]
[1. 0.]
[1. 0.]
...

Это ужасный код и очень длинный. Удалите любую его часть, и она не будет работать. Я ищу более простой способ, который не будет включать в себя вызовы более полудюжины функций из двух разных библиотек.

Ответы [ 3 ]

0 голосов
/ 03 ноября 2019

Почему бы не использовать OneHotEncoder ?

>>> from sklearn.preprocessing import OneHotEncoder
>>> ohe = OneHotEncoder(categories='auto', sparse=False)
>>> arr = ohe.fit_transform(target[:, np.newaxis])
>>> arr
array([[0., 1.],
       [0., 1.],
       [1., 0.],
       [1., 0.],
       [1., 0.],
       [0., 1.],
       [0., 1.],
       [1., 0.],
       [1., 0.]])

Он хранит хорошие метаданные о преобразовании:

>>> ohe.categories_
[array(['cat', 'dog'], dtype='<U3')]

Плюс, вы можете легко конвертировать обратно:

>>> ohe.inverse_transform(arr).ravel()
array(['dog', 'dog', 'cat', 'cat', 'cat', 'dog', 'dog', 'cat', 'cat'],
      dtype='<U3')
0 голосов
/ 03 ноября 2019

Вы можете использовать керасы и LabelEncoder для него

import numpy as np
from keras.utils import to_categorical
from sklearn.preprocessing import LabelEncoder

# define example
data = np.array(['dog', 'dog', 'cat', 'cat', 'cat', 'dog', 'dog', 'cat', 'cat'])

label_encoder = LabelEncoder()
data = label_encoder.fit_transform(data)
# one hot encode
encoded = to_categorical(data)
0 голосов
/ 03 ноября 2019

Понял. Это будет работать с массивами любого количества уникальных значений.

import numpy as np

target = np.array(['dog', 'dog', 'cat', 'cat', 'cat', 'dog', 'dog', 
    'cat', 'cat', 'hamster', 'hamster'])

def one_hot(array):
    unique, inverse = np.unique(array, return_inverse=True)
    onehot = np.eye(unique.shape[0])[inverse]
    return onehot

print(one_hot(target))

Out [9]:
[[0., 1., 0.],
[0. , 1., 0.],
[1., 0., 0.],
[1., 0., 0.],
[1., 0., 0.],
[0., 1., 0.],
[0., 1., 0.],
[1., 0., 0.],
[1., 0., 0.],
[0., 0., 1.],
[0., 0., 1.]])

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...