我正在与一个API交互并获取JSON数据。在JSON对象的顶层,我有“常规”数据,但有些字段具有更高级的结构:
{
"foo": 1,
"bar": "string",
"spam": {
"egg":"green",
"ham":"yum",
"ran": {
"out_of":"fake_words"
}
}
}
我需要保留这些高级结构(“垃圾邮件”)作为有效的JSON
我使用请求获取数据,并将其加载到Pandas DataFrame中,如下所示:
api_result = api.get_data().json() #the json output of the Request object
df = read_json(json.dumps(api_result))
这给了我一个很好的DataFrame,它有三列,正如我所期望的(这也是我想要的)。问题在于字符串:
foo bar spam
1 'string' {'egg':'green','ham':'yum','ran':{'out_of':'fake_words'}
熊猫或Python已经将数据中的所有字符串更改为单引号('),而不是有效的JSON双引号(")。这种行为破坏了所有期望有效JSON对象的下游处理,因为所有引号现在都是单引号。
编辑->我的程序写出了一个csv,这个csv被输入到一个数据库表中,期望在许多字段中使用有效的JSON。该表用于进一步分析和数据准备的许多其他过程。<--编辑
有没有办法告诉Pandas/Python停止将字符串从双引号改为单引号?我知道一般的让步是单引号更多的是Pythonic的,但现在他们正在毁掉我的一切。
谢谢!
发布于 2015-10-22 15:11:36
如果您想在Python中生成有效的JSON,最好的路径是内置的json
包。您可以使用dumps
函数从Python字典中创建一个有效的JSON字符串:
>>> import json
>>> data = {'egg':'green','ham':'yum','ran':{'out_of':'fake_words'}}
>>> json.dumps(data)
'{"ham": "yum", "ran": {"out_of": "fake_words"}, "egg": "green"}'
根据编辑的问题编辑的答案:
问题是,当您将JSON读入Pandas时,它会将所有内容转换为Python对象。在您的示例中,JSON字符串正在转换为Python,当您打印结果时,它将显示Python对dicts的字符串表示。这种表示形式几乎类似于JSON,但不是JSON。
您需要做的是将数据帧中的数据块转换为有效的JSON字符串。要在"spam"
列中执行此转换,可以使用apply()
方法调用。
data['spam'] = data['spam'].apply(json.dumps)
现在,该列包含JSON字符串,而不是Python。
发布于 2015-10-22 15:23:57
试试这个:
from pandas.io.json import json_normalize
import pandas as pd
import json
a = {
"foo": 1,
"bar": "string",
"spam": {
"egg":"green",
"ham":"yum",
"ran": {
"out_of":"fake_words"
}
}
}
a["spam"] = json.dumps(a["spam"])
df = json_normalize(a)
df
https://stackoverflow.com/questions/33284381
复制相似问题