Как я могу использовать pyparsing для синтаксического анализа вложенных выражений с несколькими типами открывания/сближения?

Я хотел бы использовать pyparsing для синтаксического анализа выражения формы: expr = '(gimme [some {nested [lists]}])' и вернуть список python формы: [[['gimme', ['some', ['nested', ['lists']]]]]]. Сейчас моя грамматика выглядит так:

nestedParens = nestedExpr ('(', ')')
nestedBrackets = nestedExpr ('[', ']')
nestedCurlies = nestedExpr ('{', '}')
закрыто = nestedParens | Вложенные рамки | nestedCurlies

В настоящее время enclosed.searchString(expr) возвращает список формы: [[['gimme', ['some', '{nested', '[lists]}']]]]. Это не то, что я хочу, потому что он не распознает квадратные или фигурные скобки, но я не знаю почему.

Ответ 1

Здесь находится пираринг-решение, которое использует самомодифицируемую грамматику для динамического соответствия правильному закрывающемуся символу.

from pyparsing import *

data = '(gimme [some {nested, nested [lists]}])'

opening = oneOf("( { [")
nonBracePrintables = ''.join(c for c in printables if c not in '(){}[]')
closingFor = dict(zip("({[",")}]"))
closing = Forward()
# initialize closing with an expression
closing << NoMatch()
closingStack = []
def pushClosing(t):
    closingStack.append(closing.expr)
    closing << Literal( closingFor[t[0]] )
def popClosing():
    closing << closingStack.pop()
opening.setParseAction(pushClosing)
closing.setParseAction(popClosing)

matchedNesting = nestedExpr( opening, closing, Word(alphas) | Word(nonBracePrintables) )

print matchedNesting.parseString(data).asList()

печатает:

[['gimme', ['some', ['nested', ',', 'nested', ['lists']]]]]

Обновлено: Я разместил вышеупомянутое решение, потому что я написал его более года назад в качестве эксперимента. Я просто посмотрел на ваш оригинальный пост, и это заставило меня задуматься о рекурсивном определении типа, созданном методом operatorPrecedence, и поэтому я отменил это решение, используя ваш оригинальный подход - гораздо проще следовать! (возможно, проблема с левой рекурсией с правильными входными данными, хотя и не была тщательно протестирована):

from pyparsing import *

enclosed = Forward()
nestedParens = nestedExpr('(', ')', content=enclosed) 
nestedBrackets = nestedExpr('[', ']', content=enclosed) 
nestedCurlies = nestedExpr('{', '}', content=enclosed) 
enclosed << (Word(alphas) | ',' | nestedParens | nestedBrackets | nestedCurlies)


data = '(gimme [some {nested, nested [lists]}])' 

print enclosed.parseString(data).asList()

дает:

[['gimme', ['some', ['nested', ',', 'nested', ['lists']]]]]

Ответ 2

Это должно сделать трюк для вас. Я протестировал его на вашем примере:

import re
import ast

def parse(s):
    s = re.sub("[\{\(\[]", '[', s)
    s = re.sub("[\}\)\]]", ']', s)
    answer = ''
    for i,char in enumerate(s):
        if char == '[':
            answer += char + "'"
        elif char == '[':
            answer += "'" + char + "'"
        elif char == ']':
            answer += char
        else:
            answer += char
            if s[i+1] in '[]':
                answer += "', "
    ast.literal_eval("s=%s" %answer)
    return s

Комментарий, если вам нужно больше