使用Pandas展平包含列表值的嵌套JSON
Pandas是一个强大的数据分析工具，它提供了丰富的功能来处理和分析数据。展平包含列表值的嵌套JSON是一种常见的数据处理需求，可以通过Pandas的相关函数来实现。
在Pandas中，可以使用json_normalize()函数来展平包含列表值的嵌套JSON。该函数可以将JSON数据转换为扁平化的表格形式，使得每个嵌套的列表值都成为独立的行。
下面是展示如何使用Pandas展平包含列表值的嵌套JSON的示例代码：
import pandas as pd
import json
# 嵌套的JSON数据
nested_json = {
"name": "John",
"age": 30,
"skills": [
{"name": "Python", "level": "Advanced"},
{"name": "Java", "level": "Intermediate"},
{"name": "SQL", "level": "Intermediate"}
]
}
# 将JSON数据转换为DataFrame
df = pd.json_normalize(nested_json, record_path='skills', meta=['name', 'age'])
# 打印展平后的DataFrame
print(df)运行以上代码，将会得到如下输出：
name age name level
0 John 30 Python Advanced
1 John 30 Java Intermediate
2 John 30 SQL Intermediate在这个示例中，我们使用json_normalize()函数将嵌套的JSON数据转换为DataFrame。record_path参数指定了要展平的列表值所在的路径，meta参数指定了要保留的其他列。最终得到的DataFrame中，每个嵌套的列表值都成为了独立的行，同时保留了原始JSON数据中的其他列。
推荐的腾讯云相关产品：腾讯云数据库TDSQL、腾讯云云服务器CVM、腾讯云对象存储COS。
以上是关于使用Pandas展平包含列表值的嵌套JSON的完善且全面的答案。
相关·内容
1回答
我有一个可查询的对象集合。
每个对象都包含一个列表。
我想生成一个列表，其中包含集合中每个对象的列表中的每个元素。
我如何使用linq或其他方式来完成此操作？
浏览 0提问于2011-05-03得票数 1
回答已采纳
我使用的代码如下所示。
该屏幕截图是我目前正在获取的输出。我还想扩展CVE_Items列。
import pandas as pd
df = pd.read_json('nvdcve-1.0-modified.json')
df.to_csv("test.csv")
JSON格式。这是来自NVD网站的NVD数据。
{
"CVE_data_type" : "CVE",
"CVE_data_format" : "MITRE",
"CVE_data_version
浏览 0提问于2018-04-04得票数 1
1回答
如何从csv文件推断候选密钥
、、、、
我有一个包含csv文件的文件夹，其中包含以下文件: car.csv、person.csv、student.csv....每个文件都有列。 我正在尝试读取列值并将它们放入列表中。 这是我的函数： import pandas
from itertools import chain, combinations
def key_options(items):
print(7,items)
return chain.from_iterable(combinations(items, r) for r in range(1, len(items)+1) )
def pr
浏览 17提问于2021-11-07得票数 0
回答已采纳
我正在尝试将CSV的最后一行转换为JSON文件。 import pandas as pd
df = pd.read_csv("names.csv")
df = df.tail(1)
print(df)
df.to_json("names.json") 输出是正确的，但是它包含不想要的行ID (3)，例如： print(df)
Name Age Weight
3 John 42 79
names.json
{"name":{"3":"John"},"Age":
浏览 2提问于2020-04-13得票数 0
在SQL Server中，有没有办法让嵌套的case语句继续嵌套的CASE语句？
CASE
WHEN ... then
CASE
WHEN ... THEN
ELSE **[Continue to below WHEN]** END
WHEN ... then
WHEN ... then
ELSE ... END
我想知道我是否可以通过不将正在进行的WHEN语句复制/粘贴到嵌套的CASE中来保持代码的整洁。
浏览 4提问于2021-09-17得票数 0
2回答
我有一个这样的列表。如果问题的标题不正确，请原谅。
[array(['5029339601'], dtype=object), array(['5029339601'], dtype=object)]
我想把这个列表转换成一个普通的列表，比如
[ '5029339601' '5029339601']
对于这样一个模糊的问题，我事先表示抱歉。如果您的建议，我将不胜感激。谢谢
浏览 0提问于2021-05-20得票数 1
R=[['dafdwsf','fafwfwe','fedfwefw','kmlknkfwe'],['cdcdcewfqedq','aasdecercre','hhkklkmlk','testing'],['nvnnkv','mmffwe','ljfljfwe']]
S=[['hhkklkmlk','cdcdcewfqedq'],['fwlkmfw','mmffwe&
浏览 8提问于2020-05-07得票数 0
回答已采纳
例如，如果我有一个包含3个列表作为值的字典"dict“：{1: ['A', 'B', 'C'], 2: ['D'], 3: ['Z']}
如何检查“D”是否是字典内3个列表中的任何一个元素？
'C' in dict.values()不能工作，我认为这是因为"dict“只包含列表的值，而不是字母。
浏览 2提问于2018-07-31得票数 0
我有一个变量表，其中原始json数据存储在名为" raw“的列中，如下所示。
该表的每一行都是从API中提取的完整数据，并通过snowpipe获取。在json中有一个“pxQueryTimestamp”键和值对。此字段的最新值应包含最新数据。我如何才能只规范化这一行呢？
通常，我的解决方法是只传递来自"s3“的最新数据，这样这个表只有一行，然后我将其规范化。
我希望有一个所有数据拉取的历史表格，如下所示，但在归一化时，我们只关心最相关的最新数据。
如有任何帮助，我们不胜感激！
浏览 8提问于2020-03-09得票数 0
回答已采纳
3回答
我有一个字典，其中的键是元组。我正在寻找一个理解列表来分解列表中的元组
dicto={(1,2):1, (3,4):1, (5,6):3}
expected outcome: [1,2,3,4,5,6] (order doesnt matter)
到目前为止，我得到的最好的结果是：
[x for x, y in dicto.keys()] ### [x, y for x, y in dicto.keys()] doesnt work :-(
有没有一种好的、优雅的方法来在一行中实现这一点呢？
谢谢
浏览 14提问于2018-02-27得票数 3
回答已采纳
我有一个如下所示的df： col1 col2
1 [1,2] 我如何检查df在框架中是否有列表，以便应用我的扁平化逻辑？ 示例代码： if list present in df == TRUE:
flatten code
else:
do nothing
浏览 21提问于2019-01-10得票数 0
回答已采纳
我正在尝试将嵌套的JSON转换为Pandas数据帧。我一直在成功地使用json_normalize，直到我遇到了某个JSON。我做了一个小版本来重现这个问题。
from pandas.io.json import json_normalize
json=[{"events": [{"schedule": {"date": "2015-08-27",
"location": {"building": "BDC", "floor": 5},
"
浏览 0提问于2015-08-30得票数 9
回答已采纳
2回答
我很好奇如何使用pandas来读取以下结构的嵌套json：
{
"number": "",
"date": "01.10.2016",
"name": "R 3932",
"locations": [
{
"depTimeDiffMin": "0",
"name": "Spital am Pyhrn Bahnhof",
浏览 2提问于2016-11-14得票数 42
回答已采纳
如何展平嵌套的列表，如下所示：
[1, 2, 3, 4] == flatten [[[1,2],[3]],[[4]]]
浏览 2提问于2011-05-13得票数 63
回答已采纳
1回答
我注意到，如果我重命名一个包含.的列名，例如device.name，它将在BigQuery中自动转换为device_name。
select Device device.name from mydataset.DeviceTable limit 10
有没有什么我可以在列名中使用点的？
浏览 1提问于2012-12-12得票数 1
回答已采纳
我在SQLite数据库中存储了一部电影的表示。它由一个id和一个流派列表组成。
一个类型由一个id和一个名称组成。
我在反序列化流派列表时遇到了麻烦，因为我必须扁平化层次结构以将其作为字符串存储在数据库中。
数据库中的流派列表如下所示：
[{id: 1, name: Comedy}, {id: 2, name: Drama}]
如何将数据库行反序列化为Movie类的对象？
class Genre {
int id;
String name;
Genre({this.id, this.name});
factory Genre.fromMap(Map<String, dyn
浏览 0提问于2019-10-31得票数 0
我想要记录VI上所有控件和指示器的值。我可以使用调用节点ctrl val.get，然后使用datalog vis将名称/变量数据集群的数组保存到磁盘。
但是，我现在想施加一个大小限制:我只想在大小低于阈值(例如，100kb)时保存数据，以避免生成巨大的文件(例如，如果前面板包含图像)。我希望这个函数是泛型的，所以我不能创建一个控件名称列表来排除控件数据类型或按控件数据类型排序。
似乎有一种方法是将变量数据展平为字符串，然后测量字符串的大小，但如果控件包含异常大量的数据(例如，最终可能会创建1 GB的字符串)，这似乎是一个潜在的问题。
有没有更好的方法来处理这个问题？
浏览 1提问于2019-01-02得票数 2
1回答
扩展数组元素
、、
如何将包含字符串数组的对象数组扩展为字符串数组？我有： data class MyClass (
@JsonProperty("applicant") val applicant: String,
val products: List<Product>
) {
fun getCiss(): List<String> = products........
companion object {
data class Product(
val cises: List<String>)
}
} 我有这个JS
浏览 9提问于2020-09-01得票数 0
回答已采纳
我正在为一个特殊的Javascript问题而苦苦挣扎，我希望有人能帮助我。
我有一个名称和值对的列表，例如：
苹果50
香蕉60
葡萄70
Apple 40
橙色30
我正在尝试用这些值创建一个Javascript对象：
var myObj = {};
然后，对于列表中的所有项目：
myObj[name] = value;
但正如你所看到的，一些名字在列表中出现了不止一次(例如Apple)，所以在本例中，我想通过将对象中的值转换为数组并将新值添加到数组中，将其添加到对象的相同属性中。
因此，myObj将包含：
苹果= 50,40
香蕉= 60
葡萄= 70
橙色= 30
有人能帮上忙吗？
谢谢
浏览 2提问于2011-06-27得票数 1
回答已采纳
"data": {"values": [{
"key": "test1",
"doc_count": 14,
"misc": {
"min": 5,
"max": 8,
"avg": 6.5
浏览 10提问于2018-12-20得票数 0
回答已采纳
我想显示来自JSON对象的字段。目前，所有字段仅从对象的第一级加载。示例JSON文件如下所示。
"DATE": "2021/01/02",
"VOUCHERNUMBER": "GST/20-21/3833",
"VOUCHERTYPENAME": "Udaan Sales",
"INVENTORYENTRIES": [
{
"STOCKITEMNAME": [
"Printed K
浏览 1提问于2021-02-01得票数 1
我们有一组表与用户在线互动的数据，我们想创建一个类似于的方案的表(此功能在俄罗斯尚未提供)。
我找不到关于如何在查询现有表的BQ中创建记录字段的信息。
相反，认为“这种类型只有在使用JSON源文件时才可用”。
在不久的将来，是否有任何解决方法或此功能预期？我可以提交功能请求吗？
浏览 2提问于2014-03-18得票数 2
1回答
我想在列表上创建动态数据透视表，该列表具有以下格式的数据
"products" :
{
"name": "ABC",
"Variance": [
{
"Date": "01-01-2018",
"Value": "10"
浏览 0提问于2018-03-03得票数 0
我有两个列表，我想合并成一个列表。 def values = [[name:"A",prof:"B"],[exp:["C","E"]]]
def list3=values.flatten(); //flatten is not working
println ("list 2 is"+list3); 结果是一样的 [[name:A, prof:B], [exp:[C, E]]] 预期输出： [[name:A, prof:B, exp:[C, E]]
浏览 13提问于2019-04-21得票数 0
回答已采纳
1回答
我有如下的映射：
"profile": {
"properties": {
"educations": {
"properties": {
"university": {
"type": "string"
},
&#
浏览 1提问于2013-12-18得票数 2
我在试着训练一个多目标分类器。为此，我将我的数据集信息存储到pandas DataFrame中，它目前看起来如下所示：
|IMAGE_PATHS---|LABELS------------------------------------------|
|path_to_image1|[[c11 x11 y11 w11 h11],[c12 x12 y12 w12 h12]...]|
|path_to_image2|[[c21 x21 y21 w21 h21],[c22 x22 y22 w22 h22]...]|
|...
但是以这种方式使用它并不容易。例如，如果我想在我的图像中看到所有标记的
浏览 0提问于2019-09-06得票数 0
1回答
我有一个包含多行和多列的pandas数据帧，其中每个单元格都包含一个值列表。我想分别计算每一行的平均值(在列表中)。
Dataframe看起来像这样：
l1 = [[1,2,4,3],[1,2,4,3], [1,2,4,3]]
l2 = [[8,2,6,4],[1,2,4,3],[1,2,4,3]]
l3 = [[1,2,4,9],[1,2,4,3],[1,2,4,3]]
df = pd.DataFrame([l1, l2, l3], columns=list('xyz'))
df：
x y z ...
x [1,2,4,3] [1,
浏览 9提问于2020-02-17得票数 1
回答已采纳
我想知道@ symbol在这行代码中是做什么的，@ do？这正在Ansible中使用。谢谢。 json_query("response.result.job | [@][]") 完整的代码： - name: task1
<removed for simplicity>
cmd: 'show jobs all'
register: all_jobs
until: |
all_jobs is not failed
and (all_jobs.stdout | f
浏览 15提问于2021-08-12得票数 1
回答已采纳
我有一个列表，其中包含以下内容
a= [june,32,may,67,april,1,dec,99]
我只想按降序对数字进行排序，但它应该与相应的数字对一起显示：
Output Expected
----------------
dec,99,may,67,june,32,april,1
我试图在列表中使用a.sort(reverse=True)命令进行排序，但没有得到预期的输出，这一点很令人困惑。
浏览 0提问于2018-06-05得票数 2
1回答
父类别包含子类别列表，子类别包含子类别列表。现在我想获取所有父类别，如果它的状态和子类别都是真的。我想在抓取的同时检查子类别的状态。我当前的查询是
db.Categories.Where(x => x.Status)
.Include(x=>x.SubCategories)
. OfType<ParentCategory>().ToList();
如何查询子类别在此查询中的状态？？
浏览 1提问于2015-01-23得票数 0
1回答
我有一个类型为<MyKey, List<MyClass>>的字典和一个类型为MyClass的列表。现在，我想检查后者中是否有未包含在字典中的任何列表中的元素。我的第一种方法是嵌套两个循环(一个用于实际列表，另一个用于字典中的列表)。如果找到一个项目，我可能会中断内部循环，继续外部循环中的下一个元素。
foreach (MyClass feature in features)
{
bool found = false;
foreach (var kv in this._features) // this._features is the dictiona
浏览 2提问于2014-09-16得票数 0
4回答
展平列表列表
、、、
我必须编写一个函数来展平列表列表。
例如flatten [] = []、flatten [1,2,3,4] = [1,2,3,4]或flatten [[1,2],[3],4,5]] = [1,2,3,4,5]
我在匹配类型时遇到了问题，这取决于为flatten函数提供的内容。
这就是我所拥有的：
data A a = B a | C [a] deriving (Show, Eq, Ord)
flatten::(Show a, Eq a, Ord a)=>A a -> A a
flatten (C []) = (C [])
flatten (C (x:xs) ) = (C flat
浏览 1提问于2012-03-01得票数 13
7回答
我想得到x在嵌套列表中出现的次数。
如果列表是：
list = [1, 2, 1, 1, 4]
list.count(1)
>>3
这样就可以了。但如果列表是：
list = [[1, 2, 3],[1, 1, 1]]
如何获取1出现的次数？在本例中，为4。
浏览 2提问于2011-04-29得票数 27
回答已采纳
使用laravel，我创建了数组项集合的。
我希望在map期间通过首先平整集合集合来处理每个数组项。
然而，我并没有获取每个数组项，而是突然迭代了每个数组的值(在此过程中丢失了关键字)。为什么？这里发生什么事情？
public function testItFlattensCollectionOfCollections()
{
$json = <<<JSON
[
[
{
"userId": "10",
"foo": "bar"
},
浏览 1提问于2021-07-30得票数 0
1回答
Lodash展平嵌套列表。
我在我的Typescript脚本中有一个函数，用来转换一些对象。
不幸的是，一些对象是嵌套的，因此返回类型有时会是嵌套列表。
const values: (IRobotics | IRobotics[][])[] //this is an interface type i described
我使用了LoDash FlatMap函数试图将其展平，但它仍然为每个对象提供了一个嵌套级别。
当响应到来时，它只删除外部列表。
我最初尝试使用const parsedValues = _.flatMap(values) as IRobotics[];这个_.flatMap()函
浏览 0提问于2021-02-25得票数 1
我尝试在ADF (Gen 2)数据流中使用派生列转换，其中我已经摄取了一个具有嵌套结构的Delta表。我正在努力解决展开这些结构所需的语法问题，尽管我能够预览数据，但没有显示任何列信息。
这样的结构将是：
{
"ContactId":"1002657",
"Name":{
"FirstName":"Donna",
"FullName":"Donna Brittain",
"LastName":"Brittain"
浏览 1提问于2020-10-28得票数 0
3回答
扁平化嵌套列表的方法有很多。我将在这里复制一个解决方案，仅供参考：
def flatten(x):
result = []
for el in x:
if hasattr(el, "__iter__") and not isinstance(el, basestring):
result.extend(flatten(el))
else:
result.append(el)
return result
我感兴趣的是逆操作，它将列表重新构造为其原始格式。例如：
L = [[array([[ 24,
浏览 1提问于2015-01-16得票数 4
2回答
我正在尝试让数据绑定和tmpls - jquery插件很好地协同工作。因此，我想使用一个模板来呈现数据，然后使用数据绑定将其挂接到我的对象中。例如：
var items = [{ Name: 'Barak Obama', Phone: '555-1212' },
{ Name: 'George Bush', Phone: '444-2222'}];
function addItems() {
$("MyList").html("");
for (var i
浏览 2提问于2011-04-29得票数 1
回答已采纳
1回答
我想从HTML表单中获取输入，并以JSON格式提供输出。当选择多个值时，它们不会转换为JSON数组，只使用第一个值。
@app.route('/form')
def show_form():
return render_template('form.html')
@app.route("/result", methods=['POST'])
def show_result():
result = request.form
return render_template('result.html
浏览 8提问于2017-08-09得票数 8
回答已采纳
下面是一个查询，它返回一个
IQueryable<IEnumerable<YogaSpaceEvent>>
但是我想让tit返回一个YogaSpaceEvents列表
var listYogaEvents = dbContext.YogaProfiles.Select(i => i.YogaSpaceEvents.Where(j => j.EventStatus == YogaSpaceEventStatus.Active));
如何让它返回一个
List<YogaSpaceEvents>
浏览 1提问于2018-02-28得票数 1
回答已采纳
3回答
我正在尝试比较两个列表(它们包含不同大小的子列表)，并找到在另一个列表中不存在的对(括在圆括号中)。
代码如下：
s1 = [
[('RESOLVED - DUPLICATE', 'VERIFIED')], [('NEW', 'RESOLVED - FIXED'), ('RESOLVED - FIXED', 'VERIFIED')], [('NEW', 'RESOLVED - DUPLICATE'), ('RESOLVED - DUPLICATE
浏览 0提问于2017-11-05得票数 0
5回答
我在C#中有一本字典：
Dictionary<string, List<string>>
如何使用Linq将其扁平化为一个包含字典中所有列表的List<string>？
谢谢!
浏览 8提问于2012-02-24得票数 47
回答已采纳
我有一个10个数据帧的列表(每个数据帧有不同的行数和列数)： list1 = [df1, df2, df3,....df10] 单独转换每个数据帧会给出一个列表列表： list1[i].values.tolist() 就像这样 [[a,b,c],[d,e,f],[g,h,i]] 有没有一种优雅的方法可以将'list1‘中的所有数据帧转换为一个单独的列表，如下所示？ [a,b,c,d,e,f,g,h,i]
浏览 2提问于2021-01-20得票数 0
回答已采纳
我正在尝试使用Kendo UI网格来显示和编辑多值属性。我没有使用Jsp或ASP.NET包装器来做这件事。我在这方面面临着几个问题。首先，我无法在网格列下的网格中看到从服务器填充的数据。此外，我还尝试使用普通的多选控件(HTML)作为自定义编辑器。填充的数据采用json格式，并返回多值属性的散列数组，例如，如果属性是库，则正在获取的json是“库”：{id:1，名称：“name1”}，{id:2，名称："name2"}
如何自定义此属性的显示以在网格中显示逗号分隔的名称。另外，如何使用选择框作为编辑器并将其绑定到已选择的数据？
浏览 0提问于2013-05-08得票数 1
1回答
海运中的分组箱形图
、、、
在这里一些很棒的人的帮助下，我能够在seaborn中生成我的第一个盒子图。我有两个单独的海运图表，显示两个比较从excel工作表。我现在要做的是将两个数据比较(显示在下面的两列中)显示在同一个图上，实质上是创建一个分组的箱形图。我尝试将数据转换为dataframe，连接，并将其融化，但没有成功。我是python的新手，所以我想知道你们是否可以帮助我。下面是我的代码。
import pandas as pd
import numpy as np
import xlrd
import matplotlib.pyplot as plt
import seaborn as sns
%matplotli
浏览 2提问于2018-11-28得票数 0
我有两个数组: listingMapIds和selectedFeePayload。我想要做的是，对于每个listingMapId，发送selectedFee的数量，也就是说，如果selectedFeePayload包含两个对象，那么每个listingMapId发送两个请求。下面是我的代码摘录： if (selectedFeePayload.length > 0) {
const response = yield all(listingMapIds.map(listingMapId => selectedFeePayload.map(fee =>
浏览 11提问于2021-07-07得票数 0
我需要浏览列表(ClassB)中的列表(A类)。我想使用streams JAVA8，但通过第二个列表，我丢失了第一个列表中的引用 class A {
Collection<B> listB ;
String x;
// Some other variables
}
class B {
String y;
// Some other variables
}
// List object A
Collection<class A> listA;
listA.stream()
.filter(a -> a.getLista
浏览 13提问于2019-06-22得票数 3
回答已采纳
我对elastic search比较陌生，对于访问list中的元素中的元素有一个问题。结构如下：
{
'TestA':'1',
'TestB':{
'TestC':'2',
'TestD':[
{
'TestE':'3',
'TestF':'4'
},
{
浏览 0提问于2018-10-23得票数 1
1回答
我有一组JSON数组，如下所示： [
{
team: 111,
enemyId: 123123,
enemyTeam: '',
winnerId: 7969,
won: 1,
result: '',
dateunix: 1590462000000,
},
{
team: 111,
enemyId: 123123,
浏览 13提问于2020-08-24得票数 1
回答已采纳
假设我有一个嵌套的字符串列表 lst = [['a'], ['b', 'c'], ['d', ['e', 'f']]] 我想从嵌套列表生成所有可能的组合，如下所示： new_lst = [['a', 'b', 'd'],
['a', 'b', 'e', 'f'],
['a', 'c', 'd'],
浏览 52提问于2018-01-30得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
