首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >熊猫/Python在DataFrames中破坏JSON数据

熊猫/Python在DataFrames中破坏JSON数据
EN

Stack Overflow用户
提问于 2015-10-22 15:08:15
回答 2查看 3.6K关注 0票数 3

我正在与一个API交互并获取JSON数据。在JSON对象的顶层,我有“常规”数据,但有些字段具有更高级的结构:

代码语言:javascript
运行
复制
{
    "foo": 1,
    "bar": "string",
    "spam": {
                "egg":"green",
                "ham":"yum",
                "ran": {
                        "out_of":"fake_words"
                       }
            }
}

我需要保留这些高级结构(“垃圾邮件”)作为有效的JSON

我使用请求获取数据,并将其加载到Pandas DataFrame中,如下所示:

代码语言:javascript
运行
复制
api_result = api.get_data().json()     #the json output of the Request object
df = read_json(json.dumps(api_result))

这给了我一个很好的DataFrame,它有三列,正如我所期望的(这也是我想要的)。问题在于字符串:

代码语言:javascript
运行
复制
foo    bar        spam
1      'string'   {'egg':'green','ham':'yum','ran':{'out_of':'fake_words'}

熊猫或Python已经将数据中的所有字符串更改为单引号('),而不是有效的JSON双引号(")。这种行为破坏了所有期望有效JSON对象的下游处理,因为所有引号现在都是单引号。

编辑->我的程序写出了一个csv,这个csv被输入到一个数据库表中,期望在许多字段中使用有效的JSON。该表用于进一步分析和数据准备的许多其他过程。<--编辑

有没有办法告诉Pandas/Python停止将字符串从双引号改为单引号?我知道一般的让步是单引号更多的是Pythonic的,但现在他们正在毁掉我的一切。

谢谢!

EN

回答 2

Stack Overflow用户

回答已采纳

发布于 2015-10-22 15:11:36

如果您想在Python中生成有效的JSON,最好的路径是内置的json包。您可以使用dumps函数从Python字典中创建一个有效的JSON字符串:

代码语言:javascript
运行
复制
>>> import json
>>> data = {'egg':'green','ham':'yum','ran':{'out_of':'fake_words'}}
>>> json.dumps(data)
'{"ham": "yum", "ran": {"out_of": "fake_words"}, "egg": "green"}'

根据编辑的问题编辑的答案:

问题是,当您将JSON读入Pandas时,它会将所有内容转换为Python对象。在您的示例中,JSON字符串正在转换为Python,当您打印结果时,它将显示Python对dicts的字符串表示。这种表示形式几乎类似于JSON,但不是JSON。

您需要做的是将数据帧中的数据块转换为有效的JSON字符串。要在"spam"列中执行此转换,可以使用apply()方法调用。

代码语言:javascript
运行
复制
data['spam'] = data['spam'].apply(json.dumps)

现在,该列包含JSON字符串,而不是Python。

票数 6
EN

Stack Overflow用户

发布于 2015-10-22 15:23:57

试试这个:

代码语言:javascript
运行
复制
from pandas.io.json import json_normalize
import pandas as pd
import json
a = {
    "foo": 1,
    "bar": "string",
    "spam": {
                "egg":"green",
                "ham":"yum",
                "ran": {
                        "out_of":"fake_words"
                       }
            }
}
a["spam"] = json.dumps(a["spam"])
df = json_normalize(a)
df

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/33284381

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档