Сравните столбец между двумя CSV-файлами и запишите различия, используя Python - PullRequest
Новая
       10

Сравните столбец между двумя CSV-файлами и запишите различия, используя Python

0 голосов
/ 02 июня 2018

Я пытаюсь распечатать различия, сравнивая столбец между двумя CSV-файлами.

CSV1: 

SERVER,   FQDN,   IP_ADDRESS,  
serverA, device1.com, 10.10.10.1  
serverA,device2.com,10.11.11.1  
serverC,device3.com,10.12.12.1   
and so on..

CSV2: 

FQDN, IP_ADDRESS, SERVER,  LOCATION  
device3.com,10.12.12.1,serverC,xx  
device679.com,20.3.67.1,serverA,we  
device1.com,10.10.10.1,serverA,ac  
device345.com,192.168.2.0,serverA,ad  
device2.com,192.168.6.0,serverB,af  
and so on...

Я хочу сравнить столбец FQDN и записать различия в новый выходной файл CSV.,Таким образом, мой вывод будет выглядеть примерно так:

Output.csv: 

FQDN, IP_ADDRESS, SERVER, LOCATION  
device679.com,20.3.67.1,serverA,we  
device345.com,192.168.2.0,serverA,ad  
and so on..

Я пытался, но не смог получить вывод.

Это мой кодПожалуйста, скажите мне, где я иду не так; 

import csv

data = {}  # creating list to store the data

with open('CSV1.csv', 'r') as lookuplist:
 reader1 = csv.reader(lookuplist)
 for col in reader1:
    DATA[col[0]] = col[1]

with open('CSV2.csv', 'r') as csvinput, open('Output.csv', 'w', newline='') as f_output:
 reader2 = csv.reader(csvinput)
 csv_output = csv.writer(f_output)
 fieldnames = (['FQDN', 'IP_ADDRESS', 'SERVER'])
 csv_output.writerow(fieldnames)  # prints header to the output file

    for col in reader1:
     if col[1] not in reader2:
        csv_output.writerow(col)

(РЕДАКТИРОВАТЬ) Это еще один подход, который я использовал: 

import csv

f1 = (open("CSV1.csv"))
f2 = (open("CSV2.csv"))

csv_f1 = csv.reader(f1)
csv_f2 = csv.reader(f2)

for col1, col2 in zip(csv_f1, csv_f2):
    if col2[0] not in col1[1]:
    print(col2[0])

По сути, здесь я только пытаюсь выяснить,во-первых, напечатаны ли несоответствующие FQDN или нет.Но вместо этого он печатает весь столбец CSV1.Пожалуйста, помогите, ребята, много исследований было в этом, но пока не нашлось удачи!(

Ответы [ 3 ]

0 голосов
/ 03 июня 2018 
import csv

data = {}  # creating list to store the data

with open('CSV1.csv', 'r') as lookuplist, open('CSV2.csv', 'r') as csvinput, open('Output.csv', 'w') as f_output:
 reader1 = csv.reader(lookuplist)
 reader2 = csv.reader(csvinput)
 csv_output = csv.writer(f_output)
 fieldnames = (['FQDN', 'IP_ADDRESS', 'SERVER', 'LOCATION'])
 csv_output.writerow(fieldnames)  # prints header to the output file
 _tempFqdn = []
 for i,dt in enumerate(reader1):
     if i==0:
         continue
     _tempFqdn.append(dt[1].strip())
 for i,col in enumerate(reader2):
     if i==0:
         continue
     if col[0].strip() not in _tempFqdn:
         csv_output.writerow(col)
0 голосов
/ 04 июня 2018 
import csv

data = {}  # creating dictionary to store the data

with open('CSV1.csv', 'r') as lookuplist:
reader1 = csv.reader(lookuplist)
for col in reader1:
    data[col[1]] = col[1]  # stores the data from column 0 to column 1 in the data list

with open('CSV2.csv', 'r') as csvinput, open('Output.csv', 'w', newline='') as f_output:
reader2 = csv.reader(csvinput)
csv_output = csv.writer(f_output)
fieldnames = (['SERVER', 'FQDN', 'AUTOMATION_ADMINISTRATOR', 'IP_ADDRESS', 'PRIMARY_1', 'MHT_1', 'MHT_2',
               'MHT_3'])
csv_output.writerow(fieldnames)  # prints header to the output file

for col in reader2:
    if col[0] not in data:  # if the column 1 in CSV1 does not match with column 0 in CSV2 Extract
    col = [col[0]]


        csv_output.writerow(col)  # writes all the data that is matched in CMDB WLC Extract

Таким образом, в основном мне нужно было изменить «не в» в разделе «цикл» и изменить столбцы в списке данных, которые будут считываться из создаваемого мной файла CSV1.

0 голосов
/ 02 июня 2018

Этот код использует встроенный difflib , чтобы выплевывать строки из file1.csv, которые не отображаются в file2.csv и наоборот.

Я использую Differ объект для идентификации изменений строки.Я предположил, что вы не расцените перестановку строк как разницу, поэтому я добавил вызов функции sorted(). 

from difflib import Differ
csv_file1 = sorted(open("file1.csv", 'r').readlines())
csv_file2 = sorted(open("file2.csv", 'r').readlines())
with open("diff.csv", 'w') as f:
    for line in Differ().compare(csv_file1,csv_file2)):
        dmode, line = line[:2], line[2:]
        if dmode.strip() == "":
            continue
        f.write(line + "\n")

Обратите внимание, что если строка отличается как-то (не только в столбце FQDN)он появится в diff.csv

...