objective-c - ParseKit的PKTokenizer类如何分离各类符号

Question

我正在尝试使用 ParseKit 解析 PGN 文件。我想识别令牌的类型并采取后续答案

PKTokenizer *t = [PKTokenizer tokenizerWithString:moveString];
[t.symbolState add:@"..."];
[t setTokenizerState:t.commentState from:'{' to:'{'];
[t.commentState addMultiLineStartMarker:@"{" endMarker:@"}"];
[t setTokenizerState:t.wordState from:'$' to:'$'];    
t.commentState.reportsCommentTokens = YES;
PKToken *eof = [PKToken EOFToken];
PKToken *tok = nil;

while ((tok = [t nextToken]) != eof) {
    NSLog(@" %@", [tok debugDescription]);
}        

(我只想在收到符号时才将单词类型添加到数组中。

任何有关使用 ParseKit 的文档都会有很大帮助 谢谢

Answer 1

ParseKit的开发者在这里。

这是在括号内捕获标记的简单方法：

BOOL inParens = NO;
PKToken *openParen = [PKToken tokenWithTokenType:PKTokenTypeSymbol stringValue:@"(" floatValue:0.0];
PKToken *closeParen = [PKToken tokenWithTokenType:PKTokenTypeSymbol stringValue:@")" floatValue:0.0];
NSMutableArray *cache = [NSMutableArray array];

PKTokenizer *t = [PKTokenizer tokenizerWithString:@"foo (bar) baz"];

PKToken *eof = [PKToken EOFToken];
PKToken *tok = nil;
while ((tok = [t nextToken]) != eof) {
    if ([openParen isEqual:tok]) {
        inParens = YES;
    } else if (inParens) {
        if ([closeParen isEqual:tok]) {
            inParens = NO;
        } else {
            [cache addObject:tok];
        }
    }
}

NSLog(@"%@", cache);

印刷：

(
    bar
)