2

我正在尝试创建一个运行时解析器,它可以识别给定语言的关键字或用于语法突出显示。我知道如何设计和实现一个简单的有限状态机,但问题是实时解析用户输入。从控制台很简单,我只需在用户按下回车键后调用 getline() 并逐个字符地遍历字符串。但在 GUI 环境中,我无法弄清楚如何实时解析。现在,我首先在 Metro 风格应用程序中创建一个简单的文本框,并通过触发 textchanged 事件来获取用户输入,将其存储到字符串中,然后将其发送到词法分析器进行解析。

void InterpreterMetro::MainPage::EditWindow_TextChanged(Platform::Object^ sender, Windows::UI::Xaml::Controls::TextChangedEventArgs^ e)
{
    String ^ input = "";
    input = EditWindow -> Text;

    // Send the string to the lexer for parsing
    m_lexer.Initialize( input )
}

在我的词法分析器中,我执行以下操作:

void Lexer::Initialize( std::wstring input )
{
    // Store the current input string
    m_input = input;

    // Get the next character in the input
    NextCharacter();

    // Analyze the current input character
    Scan();
}

在我的扫描函数中,我有一个由 switch 语句实现的简单有限状态机

Token Lexer::Scan()
{
    State = Initial;

    while( State != Exit )
    {
        switch( State )
        {
            case Initial:
                {
                    if( m_peek == '>' ){ State = Greater; }
                    else{ State = Exit; }
                } break;

            case Greater:
                {
                    NextCharacter();
                    if( m_peek == '='){ State = GreaterEqual; }
                    else{ return m_token.GREATER; }
                } break;

            case GreaterEqual:
                {
                    NextCharacter();
                    return m_token.GREATEREQUAL;
                } break;
        }
    }
}

我遇到的主要问题是当我调用函数 NextCharacter() 来确定它是 > 还是 >= 时,字符会通过开关并绕过 nextcharacter 函数,因为它不等待下一个输入。但我不知道如何解决这个问题。这是我的 NextCharacter() 函数:

void Lexer::NextCharacter()
{
    std::wstring::iterator iterator = m_input.begin();

    for( iterator; iterator != m_input.end(); ++iterator )
    {
        m_peek = *iterator;
    }
}

我一直在寻找一种解决方案,了解如何实时收集用户输入并对其进行迭代,以便在文本编辑器等环境中的运行时解析器中使用。我发现的一切都是基于控制台的,但基于 GUI 的却大不相同。谁能指出我正确的方向,最好的方法是什么?有没有更好的方法让用户在运行时解析器中输入?我这样做的方式完全错了吗?

4

1 回答 1

2

我认为您的 NextCharacter() 唯一有问题的是扫描整个输入字符串,始终返回最后一个字符。您最好在词法分析器中存储一个“当前”迭代器,并在它到达输入字符串的 end() 时停止。

在类词法分析器中:

class Lexer
{
   ... your current code...

private:
    std::wstring m_input;
    std::wstring::iterator m_it;
};


Lexer::Lexer()
   : m_input("")
   , m_it(m_input.end())
{
}


void Lexer::Initialize(const std::wstring& input)
{
    m_input = input;
    m_it = m_input.begin();
}

bool Lexer::NextCharacter()
{
    if (m_it != m_input.end())
    {
        m_peek = *m_it++;
        return true;
    }
    return false;
}

类似的东西。在输入字符串副本旁边保留当前输入的迭代器。我在网页上敲了这个,所以肯定会有错误,但我希望你明白。

于 2012-11-06T01:00:45.200 回答