Как я могу переформатировать сообщения в файле mbox с помощью bash или Perl? - PullRequest
1 голос
/ 10 декабря 2008

У меня огромный файл mbox, в котором может быть 500 писем.

Это выглядит следующим образом:

From x@blah.com Fri Aug 12 09:34:09 2005
Message-ID: <42FBEE81.9090701@blah.com>
Date: Fri, 12 Aug 2005 09:34:09 +0900
From: me <x@blah.com>
User-Agent: Mozilla Thunderbird 1.0.6 (Windows/20050716)
X-Accept-Language: en-us, en
MIME-Version: 1.0
To: someone <someone@hotmail.com>
Subject: Re: (no subject)
References: <BAY101-F9353854000A4758A7E2CCA9BD0@phx.gbl>
In-Reply-To: <BAY101-F9353854000A4758A7E2CCA9BD0@phx.gbl>
Content-Type: text/plain; charset=ISO-8859-1; format=flowed
Content-Transfer-Encoding: 8bit
Status: RO
X-Status: 
X-Keywords:                 
X-UID: 371
X-Evolution-Source: imap://x+blah.com@blah.com/
X-Evolution: 00000002-0010

Hey

the actual content of the email

someone wrote:

> lines of quotedtext

Я хотел бы знать, как я могу удалить весь цитируемый текст, удалить большую часть заголовков, кроме строк «До», «От» и «Дата», и при этом иметь несколько непрерывных значений.

Моя цель состоит в том, чтобы иметь возможность печатать эти электронные письма в формате книги, и в настоящее время каждая программа хочет печатать одно электронное письмо на страницу или все заголовки и цитируемый текст. Любые предложения о том, с чего начать при запуске небольшой программы с помощью инструментов оболочки?

Ответы [ 3 ]

6 голосов
/ 10 декабря 2008

Mail :: Box :: Mbox позволит вам легко разобрать файл в отдельные сообщения. Слайды Марка Овермера из YAPC :: Europe 2002 содержат довольно много подробностей о том, почему разбор гораздо сложнее, чем кажется. Использование этой библиотеки также будет работать с mh, IMAP и многими другими форматами, кроме mbox.

    #!/usr/bin/perl
    use warnings;
    use strict;
    use Mail::Box::Manager;

    my $file = shift || $ENV{MAIL};
    my $mgr = Mail::Box::Manager->new(
        access      => 'r',
    );

    my $folder = $mgr->open( folder => $file )
    or die "$file: Unable to open: $!\n";

    for my $msg ($folder->messages)
    {
        my $to      = join( ', ', map { $_->format } $msg->to );
        my $from    = join( ', ', map { $_->format } $msg->from );
        my $date    = localtime( $msg->timestamp );
        my $subject = $msg->subject;
        my $body    = $msg->body;

        # Strip all quoted text
        $body =~ s/^>.*$//msg;

        print <<"";
    From: $from
    To: $to
    Date: $date
    $body

    }

Возможно, вы захотите пересмотреть свой запрос на удаление цитируемого текста - что если вы отправите электронное письмо с чередованными ответами? Удаление цитируемого текста очень усложнит понимание такого рода писем:

  Foo wrote:
  > I like bar.

  Bar?  Who likes bar?

  > It is better than baz.

  Everyone knows that.

  -- 
  Quux

Кроме того, что вы планируете делать с вложениями, нетекстовыми / простыми типами MIME, закодированными текстовыми объектами и другими странностями?

1 голос
/ 10 декабря 2008

Для начала, я бы, вероятно, использовал «formail» для извлечения писем только с теми заголовками, которые вы хотите. Либо так, либо используйте какую-то таблицу состояний в awk, чтобы увидеть, находитесь ли вы в заголовке или нет, и либо удалите все, кроме нужных заголовков, если вы находитесь в заголовке, и удалите кавычки, если это не так. 1001 *

0 голосов
/ 10 декабря 2008

Использование инструментов оболочки может быть не лучшим ответом на это, поскольку на многих языках есть много библиотек для работы с mbox, будь то Ruby, Perl или что-то еще. Вам также следует учитывать, что символы цитирования не всегда являются символом «>», что может испортить процесс удаления цитирования. Что касается извлечения заголовков, которые вы хотите, это не должно быть трудным на любом языке. Я знаю, что это общий ответ, может быть, недостаточно конкретный ...

...