|
|
9ae3a8 |
From 2975abb487a54b49246646db9aa40ee6d1beaa97 Mon Sep 17 00:00:00 2001
|
|
|
9ae3a8 |
From: Markus Armbruster <armbru@redhat.com>
|
|
|
9ae3a8 |
Date: Wed, 27 Jul 2016 07:35:08 +0200
|
|
|
9ae3a8 |
Subject: [PATCH 10/16] qjson: Convert to parser to recursive descent
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
RH-Author: Markus Armbruster <armbru@redhat.com>
|
|
|
9ae3a8 |
Message-id: <1469604913-12442-12-git-send-email-armbru@redhat.com>
|
|
|
9ae3a8 |
Patchwork-id: 71474
|
|
|
9ae3a8 |
O-Subject: [RHEL-7.3 qemu-kvm PATCH v2 10/15] qjson: Convert to parser to recursive descent
|
|
|
9ae3a8 |
Bugzilla: 1276036
|
|
|
9ae3a8 |
RH-Acked-by: Miroslav Rezanina <mrezanin@redhat.com>
|
|
|
9ae3a8 |
RH-Acked-by: John Snow <jsnow@redhat.com>
|
|
|
9ae3a8 |
RH-Acked-by: Paolo Bonzini <pbonzini@redhat.com>
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
We backtrack in parse_value(), even though JSON is LL(1) and thus can
|
|
|
9ae3a8 |
be parsed by straightforward recursive descent. Do exactly that.
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
Based on an almost-correct patch from Paolo Bonzini.
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
Signed-off-by: Paolo Bonzini <pbonzini@redhat.com>
|
|
|
9ae3a8 |
Signed-off-by: Markus Armbruster <armbru@redhat.com>
|
|
|
9ae3a8 |
Message-Id: <1448486613-17634-10-git-send-email-armbru@redhat.com>
|
|
|
9ae3a8 |
Reviewed-by: Eric Blake <eblake@redhat.com>
|
|
|
9ae3a8 |
(cherry picked from commit d538b25543f4db026bb435066e2403a542522c40)
|
|
|
9ae3a8 |
Signed-off-by: Miroslav Rezanina <mrezanin@redhat.com>
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
Conflicts:
|
|
|
9ae3a8 |
qobject/json-parser.c
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
Straighforward conflicts because lacking commit fc48ffc "qobject: Use
|
|
|
9ae3a8 |
'bool' for qbool", we still use qbool_from_int(), and we lack commit
|
|
|
9ae3a8 |
e549e71 "json-parser: Accept 'null' in QMP".
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
Signed-off-by: Markus Armbruster <armbru@redhat.com>
|
|
|
9ae3a8 |
---
|
|
|
9ae3a8 |
qobject/json-parser.c | 163 ++++++++++++++------------------------------------
|
|
|
9ae3a8 |
1 file changed, 46 insertions(+), 117 deletions(-)
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
diff --git a/qobject/json-parser.c b/qobject/json-parser.c
|
|
|
9ae3a8 |
index 79f4173..b242fba 100644
|
|
|
9ae3a8 |
--- a/qobject/json-parser.c
|
|
|
9ae3a8 |
+++ b/qobject/json-parser.c
|
|
|
9ae3a8 |
@@ -266,23 +266,6 @@ static QObject *parser_context_peek_token(JSONParserContext *ctxt)
|
|
|
9ae3a8 |
return token;
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
-static JSONParserContext parser_context_save(JSONParserContext *ctxt)
|
|
|
9ae3a8 |
-{
|
|
|
9ae3a8 |
- JSONParserContext saved_ctxt = {0};
|
|
|
9ae3a8 |
- saved_ctxt.tokens.pos = ctxt->tokens.pos;
|
|
|
9ae3a8 |
- saved_ctxt.tokens.count = ctxt->tokens.count;
|
|
|
9ae3a8 |
- saved_ctxt.tokens.buf = ctxt->tokens.buf;
|
|
|
9ae3a8 |
- return saved_ctxt;
|
|
|
9ae3a8 |
-}
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
-static void parser_context_restore(JSONParserContext *ctxt,
|
|
|
9ae3a8 |
- JSONParserContext saved_ctxt)
|
|
|
9ae3a8 |
-{
|
|
|
9ae3a8 |
- ctxt->tokens.pos = saved_ctxt.tokens.pos;
|
|
|
9ae3a8 |
- ctxt->tokens.count = saved_ctxt.tokens.count;
|
|
|
9ae3a8 |
- ctxt->tokens.buf = saved_ctxt.tokens.buf;
|
|
|
9ae3a8 |
-}
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
static void tokens_append_from_iter(QObject *obj, void *opaque)
|
|
|
9ae3a8 |
{
|
|
|
9ae3a8 |
JSONParserContext *ctxt = opaque;
|
|
|
9ae3a8 |
@@ -334,7 +317,6 @@ static void parser_context_free(JSONParserContext *ctxt)
|
|
|
9ae3a8 |
static int parse_pair(JSONParserContext *ctxt, QDict *dict, va_list *ap)
|
|
|
9ae3a8 |
{
|
|
|
9ae3a8 |
QObject *key = NULL, *token = NULL, *value, *peek;
|
|
|
9ae3a8 |
- JSONParserContext saved_ctxt = parser_context_save(ctxt);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
peek = parser_context_peek_token(ctxt);
|
|
|
9ae3a8 |
if (peek == NULL) {
|
|
|
9ae3a8 |
@@ -372,7 +354,6 @@ static int parse_pair(JSONParserContext *ctxt, QDict *dict, va_list *ap)
|
|
|
9ae3a8 |
return 0;
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
out:
|
|
|
9ae3a8 |
- parser_context_restore(ctxt, saved_ctxt);
|
|
|
9ae3a8 |
qobject_decref(key);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
return -1;
|
|
|
9ae3a8 |
@@ -382,16 +363,9 @@ static QObject *parse_object(JSONParserContext *ctxt, va_list *ap)
|
|
|
9ae3a8 |
{
|
|
|
9ae3a8 |
QDict *dict = NULL;
|
|
|
9ae3a8 |
QObject *token, *peek;
|
|
|
9ae3a8 |
- JSONParserContext saved_ctxt = parser_context_save(ctxt);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
token = parser_context_pop_token(ctxt);
|
|
|
9ae3a8 |
- if (token == NULL) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
- if (token_get_type(token) != JSON_LCURLY) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
+ assert(token && token_get_type(token) == JSON_LCURLY);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
dict = qdict_new();
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
@@ -435,7 +409,6 @@ static QObject *parse_object(JSONParserContext *ctxt, va_list *ap)
|
|
|
9ae3a8 |
return QOBJECT(dict);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
out:
|
|
|
9ae3a8 |
- parser_context_restore(ctxt, saved_ctxt);
|
|
|
9ae3a8 |
QDECREF(dict);
|
|
|
9ae3a8 |
return NULL;
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
@@ -444,16 +417,9 @@ static QObject *parse_array(JSONParserContext *ctxt, va_list *ap)
|
|
|
9ae3a8 |
{
|
|
|
9ae3a8 |
QList *list = NULL;
|
|
|
9ae3a8 |
QObject *token, *peek;
|
|
|
9ae3a8 |
- JSONParserContext saved_ctxt = parser_context_save(ctxt);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
token = parser_context_pop_token(ctxt);
|
|
|
9ae3a8 |
- if (token == NULL) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
- if (token_get_type(token) != JSON_LSQUARE) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
+ assert(token && token_get_type(token) == JSON_LSQUARE);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
list = qlist_new();
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
@@ -507,107 +473,70 @@ static QObject *parse_array(JSONParserContext *ctxt, va_list *ap)
|
|
|
9ae3a8 |
return QOBJECT(list);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
out:
|
|
|
9ae3a8 |
- parser_context_restore(ctxt, saved_ctxt);
|
|
|
9ae3a8 |
QDECREF(list);
|
|
|
9ae3a8 |
return NULL;
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
static QObject *parse_keyword(JSONParserContext *ctxt)
|
|
|
9ae3a8 |
{
|
|
|
9ae3a8 |
- QObject *token, *ret;
|
|
|
9ae3a8 |
- JSONParserContext saved_ctxt = parser_context_save(ctxt);
|
|
|
9ae3a8 |
+ QObject *token;
|
|
|
9ae3a8 |
const char *val;
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
token = parser_context_pop_token(ctxt);
|
|
|
9ae3a8 |
- if (token == NULL) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
- if (token_get_type(token) != JSON_KEYWORD) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
+ assert(token && token_get_type(token) == JSON_KEYWORD);
|
|
|
9ae3a8 |
val = token_get_value(token);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
if (!strcmp(val, "true")) {
|
|
|
9ae3a8 |
- ret = QOBJECT(qbool_from_int(true));
|
|
|
9ae3a8 |
+ return QOBJECT(qbool_from_int(true));
|
|
|
9ae3a8 |
} else if (!strcmp(val, "false")) {
|
|
|
9ae3a8 |
- ret = QOBJECT(qbool_from_int(false));
|
|
|
9ae3a8 |
- } else {
|
|
|
9ae3a8 |
- parse_error(ctxt, token, "invalid keyword '%s'", val);
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
+ return QOBJECT(qbool_from_int(false));
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
- return ret;
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
-out:
|
|
|
9ae3a8 |
- parser_context_restore(ctxt, saved_ctxt);
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
+ parse_error(ctxt, token, "invalid keyword '%s'", val);
|
|
|
9ae3a8 |
return NULL;
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
static QObject *parse_escape(JSONParserContext *ctxt, va_list *ap)
|
|
|
9ae3a8 |
{
|
|
|
9ae3a8 |
- QObject *token = NULL, *obj;
|
|
|
9ae3a8 |
- JSONParserContext saved_ctxt = parser_context_save(ctxt);
|
|
|
9ae3a8 |
+ QObject *token;
|
|
|
9ae3a8 |
const char *val;
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
if (ap == NULL) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
+ return NULL;
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
token = parser_context_pop_token(ctxt);
|
|
|
9ae3a8 |
- if (token == NULL) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
- if (token_get_type(token) != JSON_ESCAPE) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
+ assert(token && token_get_type(token) == JSON_ESCAPE);
|
|
|
9ae3a8 |
val = token_get_value(token);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
if (!strcmp(val, "%p")) {
|
|
|
9ae3a8 |
- obj = va_arg(*ap, QObject *);
|
|
|
9ae3a8 |
+ return va_arg(*ap, QObject *);
|
|
|
9ae3a8 |
} else if (!strcmp(val, "%i")) {
|
|
|
9ae3a8 |
- obj = QOBJECT(qbool_from_int(va_arg(*ap, int)));
|
|
|
9ae3a8 |
+ return QOBJECT(qbool_from_int(va_arg(*ap, int)));
|
|
|
9ae3a8 |
} else if (!strcmp(val, "%d")) {
|
|
|
9ae3a8 |
- obj = QOBJECT(qint_from_int(va_arg(*ap, int)));
|
|
|
9ae3a8 |
+ return QOBJECT(qint_from_int(va_arg(*ap, int)));
|
|
|
9ae3a8 |
} else if (!strcmp(val, "%ld")) {
|
|
|
9ae3a8 |
- obj = QOBJECT(qint_from_int(va_arg(*ap, long)));
|
|
|
9ae3a8 |
+ return QOBJECT(qint_from_int(va_arg(*ap, long)));
|
|
|
9ae3a8 |
} else if (!strcmp(val, "%lld") ||
|
|
|
9ae3a8 |
!strcmp(val, "%I64d")) {
|
|
|
9ae3a8 |
- obj = QOBJECT(qint_from_int(va_arg(*ap, long long)));
|
|
|
9ae3a8 |
+ return QOBJECT(qint_from_int(va_arg(*ap, long long)));
|
|
|
9ae3a8 |
} else if (!strcmp(val, "%s")) {
|
|
|
9ae3a8 |
- obj = QOBJECT(qstring_from_str(va_arg(*ap, const char *)));
|
|
|
9ae3a8 |
+ return QOBJECT(qstring_from_str(va_arg(*ap, const char *)));
|
|
|
9ae3a8 |
} else if (!strcmp(val, "%f")) {
|
|
|
9ae3a8 |
- obj = QOBJECT(qfloat_from_double(va_arg(*ap, double)));
|
|
|
9ae3a8 |
- } else {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
+ return QOBJECT(qfloat_from_double(va_arg(*ap, double)));
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
- return obj;
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
-out:
|
|
|
9ae3a8 |
- parser_context_restore(ctxt, saved_ctxt);
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
return NULL;
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
static QObject *parse_literal(JSONParserContext *ctxt)
|
|
|
9ae3a8 |
{
|
|
|
9ae3a8 |
- QObject *token, *obj;
|
|
|
9ae3a8 |
- JSONParserContext saved_ctxt = parser_context_save(ctxt);
|
|
|
9ae3a8 |
+ QObject *token;
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
token = parser_context_pop_token(ctxt);
|
|
|
9ae3a8 |
- if (token == NULL) {
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
+ assert(token);
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
switch (token_get_type(token)) {
|
|
|
9ae3a8 |
case JSON_STRING:
|
|
|
9ae3a8 |
- obj = QOBJECT(qstring_from_escaped_str(ctxt, token));
|
|
|
9ae3a8 |
- break;
|
|
|
9ae3a8 |
+ return QOBJECT(qstring_from_escaped_str(ctxt, token));
|
|
|
9ae3a8 |
case JSON_INTEGER: {
|
|
|
9ae3a8 |
/* A possibility exists that this is a whole-valued float where the
|
|
|
9ae3a8 |
* fractional part was left out due to being 0 (.0). It's not a big
|
|
|
9ae3a8 |
@@ -626,46 +555,46 @@ static QObject *parse_literal(JSONParserContext *ctxt)
|
|
|
9ae3a8 |
errno = 0; /* strtoll doesn't set errno on success */
|
|
|
9ae3a8 |
value = strtoll(token_get_value(token), NULL, 10);
|
|
|
9ae3a8 |
if (errno != ERANGE) {
|
|
|
9ae3a8 |
- obj = QOBJECT(qint_from_int(value));
|
|
|
9ae3a8 |
- break;
|
|
|
9ae3a8 |
+ return QOBJECT(qint_from_int(value));
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
/* fall through to JSON_FLOAT */
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
case JSON_FLOAT:
|
|
|
9ae3a8 |
/* FIXME dependent on locale */
|
|
|
9ae3a8 |
- obj = QOBJECT(qfloat_from_double(strtod(token_get_value(token), NULL)));
|
|
|
9ae3a8 |
- break;
|
|
|
9ae3a8 |
+ return QOBJECT(qfloat_from_double(strtod(token_get_value(token),
|
|
|
9ae3a8 |
+ NULL)));
|
|
|
9ae3a8 |
default:
|
|
|
9ae3a8 |
- goto out;
|
|
|
9ae3a8 |
+ abort();
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
- return obj;
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
-out:
|
|
|
9ae3a8 |
- parser_context_restore(ctxt, saved_ctxt);
|
|
|
9ae3a8 |
-
|
|
|
9ae3a8 |
- return NULL;
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
static QObject *parse_value(JSONParserContext *ctxt, va_list *ap)
|
|
|
9ae3a8 |
{
|
|
|
9ae3a8 |
- QObject *obj;
|
|
|
9ae3a8 |
+ QObject *token;
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
- obj = parse_object(ctxt, ap);
|
|
|
9ae3a8 |
- if (obj == NULL) {
|
|
|
9ae3a8 |
- obj = parse_array(ctxt, ap);
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
- if (obj == NULL) {
|
|
|
9ae3a8 |
- obj = parse_escape(ctxt, ap);
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
- if (obj == NULL) {
|
|
|
9ae3a8 |
- obj = parse_keyword(ctxt);
|
|
|
9ae3a8 |
- }
|
|
|
9ae3a8 |
- if (obj == NULL) {
|
|
|
9ae3a8 |
- obj = parse_literal(ctxt);
|
|
|
9ae3a8 |
+ token = parser_context_peek_token(ctxt);
|
|
|
9ae3a8 |
+ if (token == NULL) {
|
|
|
9ae3a8 |
+ parse_error(ctxt, NULL, "premature EOI");
|
|
|
9ae3a8 |
+ return NULL;
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
- return obj;
|
|
|
9ae3a8 |
+ switch (token_get_type(token)) {
|
|
|
9ae3a8 |
+ case JSON_LCURLY:
|
|
|
9ae3a8 |
+ return parse_object(ctxt, ap);
|
|
|
9ae3a8 |
+ case JSON_LSQUARE:
|
|
|
9ae3a8 |
+ return parse_array(ctxt, ap);
|
|
|
9ae3a8 |
+ case JSON_ESCAPE:
|
|
|
9ae3a8 |
+ return parse_escape(ctxt, ap);
|
|
|
9ae3a8 |
+ case JSON_INTEGER:
|
|
|
9ae3a8 |
+ case JSON_FLOAT:
|
|
|
9ae3a8 |
+ case JSON_STRING:
|
|
|
9ae3a8 |
+ return parse_literal(ctxt);
|
|
|
9ae3a8 |
+ case JSON_KEYWORD:
|
|
|
9ae3a8 |
+ return parse_keyword(ctxt);
|
|
|
9ae3a8 |
+ default:
|
|
|
9ae3a8 |
+ parse_error(ctxt, token, "expecting value");
|
|
|
9ae3a8 |
+ return NULL;
|
|
|
9ae3a8 |
+ }
|
|
|
9ae3a8 |
}
|
|
|
9ae3a8 |
|
|
|
9ae3a8 |
QObject *json_parser_parse(QList *tokens, va_list *ap)
|
|
|
9ae3a8 |
--
|
|
|
9ae3a8 |
1.8.3.1
|
|
|
9ae3a8 |
|