Как читать файлы в папке на диске внутри ноутбука - PullRequest
Новая
       53

Как читать файлы в папке на диске внутри ноутбука

0 голосов
/ 30 мая 2018

Я хочу прочитать набор данных с диска внутри Google Colab Notbook.Как мне это сделать?Я сделал что-то подобное, но это не работает. 

train_data_dir = "data/train/"
validation_data_dir = "data/validation/"

This is the structure of my project

Папка данных выглядит так: 

data/
    train/
        dogs/
            dog001.jpg
            dog002.jpg
            ...
        cats/
            cat001.jpg
            cat002.jpg
            ...
    validation/
        dogs/
            dog001.jpg
            dog002.jpg
            ...
        cats/
            cat001.jpg
            cat002.jpg
            ...

1 Ответ

0 голосов
/ 30 мая 2018

Я нашел решение с помощью Оболочки Drive FUSE

Вы должны установить обертку предохранителя диска, затем создать каталог и смонтировать его, этот каталог является корневым каталогом вашего диска,загрузите свой набор данных на свой диск Google и получите к нему доступ, используя "/ content / name_of_your_directory / dataset_name /"

, в моем случае я выполнил следующие действия:

1-Установка оболочки Drive FUSE. 

!apt-get update -qq 2>&1 > /dev/null
!apt-get install -y -qq software-properties-common python-software-properties module-init-tools
!add-apt-repository -y ppa:alessandro-strada/ppa 2>&1 > /dev/null
!apt-get update -qq 2>&1 > /dev/null
!apt-get -y install -qq google-drive-ocamlfuse fuse

затем

2-Создать токены авторизации для Colab 

from google.colab import auth
auth.authenticate_user()

3-Создать кредиты для библиотеки Drive FUSE. 

from oauth2client.client import GoogleCredentials
creds = GoogleCredentials.get_application_default()
import getpass

4-Решение неправильной работы STREAM и STDIN в Jupyter. 

prompt = !google-drive-ocamlfuse -headless -id={creds.client_id} -secret={creds.client_secret} < /dev/null 2>&1 | grep URL
vcode = getpass.getpass(prompt[0] + '\n\nEnter verification code: ')
!echo {vcode} | google-drive-ocamlfuse -headless -id={creds.client_id} -secret={creds.client_secret}

5 -Создание каталога и монтирование Google Диска с использованием этого каталога. 

!mkdir -p yourdirectory
!google-drive-ocamlfuse yourdirectory

6- доступ к этому каталогу из кода, например:в моем случае 

train_data_dir = "/content/yourdirectory/data/train/"
validation_data_dir = "/content/yourdirectory/data/validation/"
...