вставлять вместе определенные столбцы из многих файлов - PullRequest
3 голосов
/ 26 октября 2011

для несжатых файлов одинаковое количество строк и одинаковое количество столбцов.

Все файлы находятся в одном и том же каталоге.

Можно ли извлекать каждый 5-6 столбециз каждого файла и вставьте их вместе без необходимости создания временных файлов?

Что-то вроде

for i in *.gz
do
   gunzip -c $i |cut -f5-6 >$i.tmp;
done

paste *.tmp

Спасибо

Ответы [ 2 ]

6 голосов
/ 26 октября 2011

Вы можете создать командную строку для оценки и использовать подстановку процесса bash, чтобы избежать временных файлов:

command=paste
for i in *.gz; do
    command="$command <(gzip -cd $i | cut -f5-6)"
done
eval $command
1 голос
/ 26 октября 2011
for f in *.gz ; do
  printf '_fn %s\n' "$f" 
  gunzip -c "$f"  
done | 
  awk 'END {
    for (i = 0; ++i <= m;)
      for (j = 0; ++j <= fc;)
        printf "%s", (d[j, i] (j < fc ? OFS : RS))    
    }
  $1 == "_fn" {
    fn = $2; fnr = x; ++fc
    next
    }
  { 
    d[fc, ++fnr] = $5 OFS $6
    fnr > m && m = fnr
    }' OFS='\t'
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...