как конвертировать скрипт bash в C ++, используя boost :: iostreams - PullRequest
9 голосов
/ 22 февраля 2011

Я пытаюсь преобразовать следующий код bash в C ++, используя boost :: iostreams:

#!/usr/bin/bash
(
    gzip -cd file1.ext.gz
    cat file2.ext
) | grep '^regex' # or sed 's/search/replace/'

Я могу открыть файл и распаковать его:

std::ifstream s("file.ext.gz", std::ios_base::in | std::ios_base::binary);
boost::iostreams::filtering_istreambuf in;
in.push(boost::iostreams::gzip_decompressor());
in.push(s);

Затем откройте несжатый файл:

std::ifstream s2("file.ext", std::ios_base::in | std::ios_base::binary);

Теперь я немного застрял, поэтому вот мои вопросы:

1) Что представляет собой решение boost :: iostreams для объединения двух потоков?

2) Как вывести результат через фильтр регулярных выражений для эмуляции grep / sed?

В результате я хотел бы иметь istream, который я могу скопировать в cout:

boost::iostream::copy(result, std::cout);

ОБНОВЛЕНИЕ полное решение с использованием конкатенации Хамигаки :

/*
 * convert the following bash script into C++
 *
 * #!/bin/bash
 * (
 *     gzip -cd file1.ext.gz
 *     cat file2.ext
 * ) | grep '^filter' | 'sed s/search/replace/g'
 *
 */

#include <iostream>
#include <boost/bind.hpp>
#include <boost/iostreams/filtering_streambuf.hpp>
#include <boost/iostreams/device/file.hpp>
#include <boost/iostreams/filter/gzip.hpp>
#include <boost/iostreams/filter/regex.hpp>
#include <boost/iostreams/filter/grep.hpp>
#include <boost/iostreams/copy.hpp>

// http://hamigaki.sourceforge.jp/hamigaki/iostreams/concatenate.hpp
#include "concatenate.hpp"

namespace io = boost::iostreams;

int main(int argc, char const* argv[])
{
    io::file_source file1("file1.ext.gz");
    io::file_source file2("file2.ext");
    io::gzip_decompressor gzip;
    io::regex_filter sed(boost::regex("search"), "replace");
    io::grep_filter grep(boost::regex("^filter"));

    io::filtering_istreambuf in1(gzip | file1);
    io::filtering_istreambuf in2(file2);

    io::filtering_istreambuf combined(sed | grep | 
            hamigaki::iostreams::concatenate(
                boost::ref(in1),
                boost::ref(in2)
            )
        );

    io::copy(combined, std::cout);

    return 0;
}

Ответы [ 2 ]

3 голосов
/ 22 февраля 2011

1) Я не знаю, есть ли что-то встроенное в boost, но этот класс, кажется, именно то, что вы хотите: http://hamigaki.sourceforge.jp/hamigaki/iostreams/concatenate.hpp

Подвох в том, что он ожидает, что устройства CopyConstructible объединятся и цепочкикажется, не CopyConstructible.Тем не менее, мы можем легко обойти это, используя boost :: ref.Этот код выполняет (почти) то, что, как я понял, вы спрашиваете:

int main(int argc, char const* argv[])
{
  boost::iostreams::filtering_istreambuf in;
  boost::regex regex("search");
  boost::iostreams::regex_filter rf(regex, "replace");
  in.push(rf);

  boost::iostreams::file_source file1(argv[1]);
  in.push(file1);

  boost::iostreams::file_source file2(argv[2]);
  boost::iostreams::copy(hamigaki::iostreams::concatenate(boost::ref(in), file2), std::cout);

  return 0;
}

Я просто использовал фильтр регулярных выражений вместо gzip, для тестирования.

2) boost :: iostreams имеетфильтр регулярных выражений: http://www.boost.org/doc/libs/1_45_0/libs/iostreams/doc/classes/regex_filter.html

РЕДАКТИРОВАТЬ: Кажется, у вас это работает, сейчас.

0 голосов
/ 22 февраля 2011

1) Недоступно для повышения

Сцепление Хамигакиса звучит интересно, но я не мог понять, как использовать его для объединения двух boost :: iostreams :: chain s. В коде упоминается, что он предназначен для «объединения устройств», поэтому его нельзя использовать для цепочек. Пожалуйста, поправьте меня, если я ошибаюсь.

РЕДАКТИРОВАТЬ: обновил мой вопрос с полным решением.

2a) поведение grep (фильтр):

#include <boost/iostreams/filtering_streambuf.hpp>
#include <boost/iostreams/filter/grep.hpp>

boost::iostreams::filtering_istreambuf in;
boost::regex regex("^search")
boost::iostreams::grep_filter grep(regex);
in.push(grep);

2b) поведение sed (поиск / замена):

#include <boost/iostreams/filtering_streambuf.hpp>
#include <boost/iostreams/filter/regex.hpp>

struct formatter {
    std::string operator()(const boost::match_results<const char*>& match)
    {
        return str(boost::format("%s | %s") % match[2] % match[1]);
    }
};
boost::iostreams::filtering_istreambuf in;
boost::regex regex("^([a-z]+) ([0-9]+)");
boost::iostreams::regex_filter sed(regex, formatter());
in.push(sed);
...