ParseKit не соответствует моим символам EOL: что я делаю не так? - PullRequest
Новая
       28

ParseKit не соответствует моим символам EOL: что я делаю не так?

2 голосов
/ 12 марта 2012

Приключение ParseKit продолжается ... и мое следующее препятствие - попытка распознать символы новой строки.

Вот моя грамматика: 

@symbolState = '\n';
@start = textline*;
textline = Any* eol;
eol = '\n';

Вот мой тестовый текст: 

1
2
3
4
5

Текст читается из текстового файла UTF-8 с окончаниями строк в формате Unix (LF).Я проверил этот формат как в Xcode (инспектор файлов -> Настройки текста), так и внешне, с помощью TextWrangler.

И вот соответствующий код: 

#import "FileImporterThing.h"
#import <ParseKit/ParseKit.h>

@interface FileImporterThing ()
@property (nonatomic, retain)PKParser* parser;
- (void)parser:(PKParser *)p didMatchTextline:(PKAssembly *)a;
- (void)parser:(PKParser *)p didMatchEol:(PKAssembly *)a;
@end


@implementation FileImporterThing

@synthesize parser = _parser;

-(id)init
{
    if (!(self = [super init])) return nil;

    // Have also tried "textline = Any* '\n';"
    NSString *g = @"@symbolState = '\n'; @start = textline*; textline = Any* eol; eol = '\n';";
    self.parser = [[PKParserFactory factory] parserFromGrammar:g assembler:self];

    return self;
}

- (void)testParse
{
    // read string from UTF-8 file Unix (LF) line endings 
    // (this verified in project->file inspector->Text Settings and externally with TextWrangler)
    NSString *path = [[NSBundle bundleForClass:[self class]] pathForResource:@"LF-test" ofType:@"parsetext"];
/* file contains text:
1
2
3
4
5

*/
    NSString *s = [NSString stringWithContentsOfFile:path encoding:NSUTF8StringEncoding error:nil];

    [self.parser parse:s];
}

- (void)parser:(PKParser *)p didMatchEol:(PKAssembly *)a
{
    NSLog(@"eol found");// stack = %@", [a stack]);
}

- (void)parser:(PKParser *)p didMatchTextline:(PKAssembly *)a
{
    NSLog(@"textline matched");
}

@end

Но ябоюсь, краска просто не высыхает!Перепробовал всевозможные вариации на вышесказанном.Я не могу на всю жизнь заставить парсер распознавать новую строку.Я, вероятно, могу обойти это, читая файл-буфер построчно (что может быть более производительным в любом случае?), Но было бы неплохо иметь возможность сопоставления '\ n'.

1 Ответ

2 голосов
/ 13 марта 2012

Разработчик ParseKit здесь.Я могу внести две вещи:

1.

Я попробовал ваш пример, используя текстовый файл, созданный либо в TextMate, либо в TextWrangler (сохраненный в виде файла .txt), и все казалосьотлично работаетМои обратные вызовы -parser:didMatchEol: и -parser:didMatchTexline: были вызваны, как и ожидалось.

Если это не работает для вас, возможно, попробуйте начать с ввода строки в памяти, чтобы посмотреть, будет ли это работать по крайней мере: 

NSString *s = @"foo bar\nbaz bat\n";
[parser parse:s];

В любом случае, вот мой код из DebugAppDelegate.m, который работает для меня с вводом в память или на диск: 

- (void)doTestGrammar {
    NSString *g = @"@symbolState = '\n'; @start = textline*; textline = Any* eol; eol = '\n';";
    PKParser *p = [[PKParserFactory factory] parserFromGrammar:g assembler:self];
    //NSString *s = @"foo bar\nbaz bat\n";
    NSString *path = [@"~/Desktop/text.txt" stringByExpandingTildeInPath];
    NSString *s = [NSString stringWithContentsOfFile:path encoding:NSUTF8StringEncoding error:nil];
    [p parse:s];
}

- (void)parser:(PKParser *)p didMatchEol:(PKAssembly *)a {
    NSLog(@"%s %@", __PRETTY_FUNCTION__, a);
}

- (void)parser:(PKParser *)p didMatchTextline:(PKAssembly *)a {
    NSLog(@"%s %@", __PRETTY_FUNCTION__, a);
}

2.

Я на самом деле был немного удивлен тем, что ваш пример сработал, так как я думал, что использование вами Any* будет жадно потреблять токены \n в конце строки, таким образом, ничто не сравнится с производством eol.

Однако, как я уже говорил, это не было проблемой, когда я запускал ваш пример (для ParseKit HEAD транка).

Тем не менее, для хорошей меры, я бы, вероятно, рекомендовал изменить вашу textline производство к этому: 

textline = ~eol* eol;

определение этого производства должно читаться как:

ноль или более токенов, НЕ соответствующих eol, за которыми следует один токен, соответствующийeol

~ является логическим оператором отрицания в синтаксисе грамматики ParseKit.

После внесения этого изменения в мой пример кода все по-прежнему работает должным образом.

Если вы все еще не можете его получитьработая после этих двух советов, дайте мне знать.
...