使用Python处理json字符串中的非法双引号问题

Python处理json字符串中的非法双引号

工作中数据清洗时遇到以下情况:

a = '{"地区": "湖南", "描述": "精通软件开发、"数据挖掘"和分布式"}'

由于读取出的json字符串中包含有非法双引号,在使用json.loads()处理的时候报错

json.decoder.JSONDecodeError: Expecting ',' delimiter: line 1 column 29 (char 28)

写了大半个小时的正则都无法解决

后来使用如下方法解决了,一并把json字符串中的换行符、分隔符和双引号都转义了

def deal_json_invaild(data):
    data = data.replace("\n", "\\n").replace("\r", "\\r").replace("\n\r", "\\n\\r") \
        .replace("\r\n", "\\r\\n") \
        .replace("\t", "\\t")
    data = data.replace('": "', '&&testPassword&&')\
        .replace('", "', "$$testPassword$$")\
        .replace('{"', "@@testPassword@@")\
        .replace('"}', "**testPassword**")
    print(data)

    data = data.replace('"', r'\"')\
        .replace('&&testPassword&&', '": "').replace('$$testPassword$$', '", "').replace('@@testPassword@@', '{"').replace('**testPassword**', '"}')
    print(data)
    return data

测试如下:

a = deal_json_invaild(a)
json_data = json.loads(a)

> {"地区": "湖南", "描述": "精通软件开发、\"数据挖掘\"和分布式"}

此时转使用json.loads()便不会报错了

Python json单、双引号问题

在 python3 里,一个json是一个字典,形如 {"a":15}

json转换成字符串的话

那么,如果你要将它转换成字符串,也许你用的是str({"a":15}),这样转出来的,可能是是s= "{'a':'15'}",也就是说,里面的kv是单引号的。这个字符串,传到其他地方,再用json.loads(s)的时候会出错,json不支持单引号。

所以,假如你想把一个json结构,转成字符串,传递给远处,然后再重新解析成json结构,应该这样:

s = json.dumps({"a":15})

然后,把数据传到远端,然后再解析回来:

d = json.loads(s)

这样就不会出错了。

也支持列表,能一次性传多个结构

s = json.dumps([{"a":15}, {"b":20}])

然后,把数据传到远端,然后再解析回来:

d = json.loads(s)

总结

以上为个人经验,希望能给大家一个参考,也希望大家多多支持脚本之家。

你可能感兴趣的:(使用Python处理json字符串中的非法双引号问题)