2

ParseKit 的冒险仍在继续……我的下一个障碍是尝试识别换行符。

这是我的语法：

@symbolState = '\n';
@start = textline*;
textline = Any* eol;
eol = '\n';

这是我的测试文本：

1
2
3
4
5

正在从具有 Unix 格式 (LF) 行尾的 UTF-8 文本文件中读取文本。我已经在 Xcode（文件检查器 -> 文本设置）以及外部使用 TextWrangler 验证了该格式。

这是相关的代码：

#import "FileImporterThing.h"
#import <ParseKit/ParseKit.h>

@interface FileImporterThing ()
@property (nonatomic, retain)PKParser* parser;
- (void)parser:(PKParser *)p didMatchTextline:(PKAssembly *)a;
- (void)parser:(PKParser *)p didMatchEol:(PKAssembly *)a;
@end


@implementation FileImporterThing

@synthesize parser = _parser;

-(id)init
{
    if (!(self = [super init])) return nil;

    // Have also tried "textline = Any* '\n';"
    NSString *g = @"@symbolState = '\n'; @start = textline*; textline = Any* eol; eol = '\n';";
    self.parser = [[PKParserFactory factory] parserFromGrammar:g assembler:self];

    return self;
}

- (void)testParse
{
    // read string from UTF-8 file Unix (LF) line endings 
    // (this verified in project->file inspector->Text Settings and externally with TextWrangler)
    NSString *path = [[NSBundle bundleForClass:[self class]] pathForResource:@"LF-test" ofType:@"parsetext"];
/* file contains text:
1
2
3
4
5

*/
    NSString *s = [NSString stringWithContentsOfFile:path encoding:NSUTF8StringEncoding error:nil];

    [self.parser parse:s];
}

- (void)parser:(PKParser *)p didMatchEol:(PKAssembly *)a
{
    NSLog(@"eol found");// stack = %@", [a stack]);
}

- (void)parser:(PKParser *)p didMatchTextline:(PKAssembly *)a
{
    NSLog(@"textline matched");
}

@end

但恐怕油漆还没干！已经尝试了上述各种变化。我一辈子都无法让解析器识别换行符。我可能可以通过逐行读取文件缓冲区来解决这个问题（无论如何这可能会更高性能？），但仍然可以选择匹配'\ n'。

4

1 回答 1

2

ParseKit的开发者在这里。我可以贡献两件事：

1.

我使用在 TextMate 或 TextWrangler 中创建的文本文件（保存为 .txt 文件）尝试了您的示例，一切似乎都正常。我的-parser:didMatchEol:和-parser:didMatchTexline:回调按预期调用。

如果这对您不起作用，也许尝试从内存中的字符串输入开始，看看至少这是否可行：

NSString *s = @"foo bar\nbaz bat\n";
[parser parse:s];

无论如何，这是我的代码，DebugAppDelegate.m它适用于我的内存输入或磁盘输入：

- (void)doTestGrammar {
    NSString *g = @"@symbolState = '\n'; @start = textline*; textline = Any* eol; eol = '\n';";
    PKParser *p = [[PKParserFactory factory] parserFromGrammar:g assembler:self];
    //NSString *s = @"foo bar\nbaz bat\n";
    NSString *path = [@"~/Desktop/text.txt" stringByExpandingTildeInPath];
    NSString *s = [NSString stringWithContentsOfFile:path encoding:NSUTF8StringEncoding error:nil];
    [p parse:s];
}

- (void)parser:(PKParser *)p didMatchEol:(PKAssembly *)a {
    NSLog(@"%s %@", __PRETTY_FUNCTION__, a);
}

- (void)parser:(PKParser *)p didMatchTextline:(PKAssembly *)a {
    NSLog(@"%s %@", __PRETTY_FUNCTION__, a);
}

2.

但是，您的示例有效，实际上我有点惊讶，因为我认为您对Any*生产的使用会贪婪地消耗生产\n线末端的令牌，因此没有任何东西可供eol生产匹配。

但是，正如我所提到的，当我运行您的示例（针对主干的 ParseKit HEAD）时，这不是问题。

不过，为了更好的衡量标准，我可能会建议您将您的textline生产更改为：

textline = ~eol* eol;

该产生式的定义应理解为：

零个或多个不匹配的标记eol，后跟一个匹配的标记eol

~是 ParseKit 语法中的布尔否定运算符。

对我的示例代码进行此更改后，一切仍按预期工作。

如果在这两个提示之后您仍然无法使其正常工作，请告诉我。

于 2012-03-12T21:00:37.360 回答