Как добавить уникальные элементы в массив в awk из нескольких текстовых файлов ввода - PullRequest
Новая
       17

Как добавить уникальные элементы в массив в awk из нескольких текстовых файлов ввода

0 голосов
/ 30 июня 2011

Как подсказывает топик, как мне прочитать информацию из нескольких текстовых файлов и добавить элементы только один раз в массив независимо от того, встречаются ли они несколько раз в разных текстовых файлах?

Я начал сэтот скрипт, который считывает и печатает все элементы в том порядке, в котором они встречаются в разных документах.

Например, посмотрите на эти 3 различных текстовых файла, содержащих следующие данные

Файл 1: 

2011-01-22 22:12 test1 22 1312 75 13.55 1399 
2011-01-23 22:13 test4 22 1112 72 12.55 1499

Файл 2: 

2011-01-24 22:14 test1 21 1322 75 23.55 1599 
2011-01-25 22:15 test2 23 2312 77 33.55 1699

Файл 3: 

2011-01-26 22:16 test2 20 1412 79 63.55 1799 
2011-01-27 22:17 test5 12 1352 78 43.55 1999

Я хочу проверить, является ли текущий элемент ужедобавлен в массив, но на данный момент мой скрипт распечатывает все элементы. 

{
    BUILDd[NR-1] = $3; len++
}
   END { 
        SUBSYSTEM=substr(FILENAME, 1, length(FILENAME)-7)
        LABEL= "\"" toupper(SUBSYSTEM) "\""
        print  "#{"
        print "\"buildnames\": {"
        print "        \"label\": \"buildnames\","
        print "        \"data\": ["
        for (i = 0 ; i <= len-1; i ++ ) {
        if(i == len-1){print "            [\"" BUILDd[i] "\"]"}
        else
            { print "            [\"" BUILDd[i] "\"],"}
        }
        print "        ]"
        print " }"
        print "};"
}

Дает этот вывод 

#{
"buildnames": {
        "label": "buildnames",
        "data": [
            ["test1"]
            ["test4"]
            ["test1"]
            ["test2"]
            ["test2"]
            ["test5"]
        ]
        }
};

Когда я хочу, чтобы он выдал следующее 

#{
"buildnames": {
        "label": "buildnames",
        "data": [
            ["test1"]
            ["test2"]
            ["test4"]
            ["test5"]
        ]
        }
};

1) Другими словами, сначала проверьте, есть ли уже элементы в массиве, а если нет, то добавьте их / их

2) Сортируйте массив, если это возможно,

Спасибо=) * * тысяча тридцать одна

1 Ответ

1 голос
/ 30 июня 2011

За исключением форматирования, это то, что вы пытаетесь достичь (a, b, c, файлы, содержащие ваши журналы)? 

$ cut -d" " -f3 a b c | sort | uniq
test1
test2
test4
test5

с использованием awk 

{
    BUILDd[$3] = 1
}
END {
    for (i in BUILDd) {
    print i
    }
}

Придает 

awk -f a.awk a b c
test1
test2
test4
test5

Обратите внимание, что правильный порядок сортировки здесь чисто случайный ... Материал заказа помещается в массив, а не порядок его печати. ​​

...