Escape-последовательность Python и MySQL для пути UNC - PullRequest
Новая
       23

Escape-последовательность Python и MySQL для пути UNC

0 голосов
/ 04 июля 2018

У меня чертовски много времени получается получить локальные данные загрузки данных для работы с python. Я пробовал кучу разных способов в Python 3.6.5: 

sqlpath = '\\corp.domain.com\dept\DCGSI\Extracts\SIM\'
sqlpath = "\\corp.domain.com\dept\DCGSI\Extracts\SIM\"
sqlpath = '\\\\corp.domain.com\\dept\\DCGSI\\Extracts\\SIM\\'
sqlpath = '//corp.domain.com/dept/DCGSI/Extracts/SIM/'
sqlpath = os.path.join("\\corp.domain.com","dept","DCGSI","Extracts","SIM")
sqlpath = os.path("\\\\corp.domain.com\dept\DCGSI\Extracts\SIM\")

Кажется, я не могу получить право на побег для использования в следующих целях, чтобы спасти мое здравомыслие. Я прочитал по крайней мере 10 различных сообщений здесь и перепробовал все эти предложения. Что я делаю не так, чтобы я мог использовать путь unc в loadQuery.

Вот (СОВРЕМЕННЫЙ) весь скрипт: 

import config
import os
import pymysql


username = config.username
dbpassword = config.dbpassword
dbhost = config.dburl
conn =  pymysql.connect(host=dbhost, port=3306,user=username,password=dbpassword,db='dcgsreports',autocommit=True,local_infile=1)
path = '//corp.domain.com/dept/DCGSI/Extracts/SIM'
tables = []
files = []

fileNames = os.listdir(path)
for fileNames in fileNames:
    if fileNames.endswith(".csv"):
        files.append(fileNames)
        tables.append(fileNames.split('.')[0])

for f,t in zip(files, tables) :
    truncQuery = '''TRUNCATE TABLE %s''' %t
    loadQuery = '''LOAD DATA LOCAL INFILE '//corp.domain.com/dept/DCGSI/Extracts/SIM/%s' INTO TABLE %s FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"' LINES TERMINATED BY '\\r\\n' IGNORE 1 LINES;''' %(f, t)
    print(loadQuery)
    cursor = conn.cursor()
    cursor.execute(truncQuery)
    cursor.execute(loadQuery)
    conn.commit()
conn.close()

то, что оператор print показывает следующее, это то, что должно быть передано как запрос (который должен быть правильным): ЗАГРУЗИТЬ ДАННЫЙ ЛОКАЛЬНЫЙ ИНФИЛЬ '//corp.domain.com/dept/DCGSI/Extracts/SIM/SIM_Availability.csv' INTO TABLE SIM_Availability ПОЛЯ, ПРЕКРАЩАЕМЫЕ ',' ФАКУЛЬТАТИВНО ВКЛЮЧЕНЫ '' 'ЛИНИИ, ПРЕКРАЩАЕМЫЕ' 'IGNORE 1 LINES;

Все таблицы пусты, хотя, по-видимому, это указывает на то, что выполняется только truncQuery.

1 Ответ

0 голосов
/ 10 июля 2018

Обратите внимание на os-agnostic Python os.path.join() и не беспокойтесь о обратной или прямой. И используйте string.format или даже новую Python 3.6 f-string (буквенная интерполяция строк, такая как Perl и $ string в Perl). Оператор модуля для интерполяции строк не рекомендуется. Обязательно также commit действия: 

path = r"\\corp.domain.com\dept\DCGSI\Extracts\SIM"

for t, f in zip(tables, files) :

    truncQuery = "TRUNCATE TABLE `{t_name}`"
    loadQuery = """LOAD DATA LOCAL INFILE '{f_name}'
                   INTO TABLE `{t_name}` FIELDS TERMINATED BY ',' 
                   OPTIONALLY ENCLOSED BY '"' LINES 
                   TERMINATED BY '\r\n' IGNORE 1 LINES;"""

    print(loadQuery)

    cursor = conn.cursor()
    cursor.execute(truncQuery.format(t_name = t)
    cursor.execute(loadQuery.format(f_name = os.path.join(path, f),
                                    t_name = t))

    cursor.close()
    conn.commit()

С ф-струной 

for t, f in zip(tables, files) :

    f_name = os.path.join(path, f)

    truncQuery = f"TRUNCATE TABLE `{t}`"
    loadQuery = f"""LOAD DATA LOCAL INFILE '{f_name}'
                    INTO TABLE `{t}` FIELDS TERMINATED BY ',' 
                    OPTIONALLY ENCLOSED BY '"' LINES 
                    TERMINATED BY '\r\n' IGNORE 1 LINES;"""

    print(loadQuery)

    cursor = conn.cursor()
    cursor.execute(truncQuery)
    cursor.execute(loadQuery)

    cursor.close()
    conn.commit()
...