当前位置:

首页 > 编程开发 > Python处理JSON嵌套结构技巧

Python处理JSON嵌套结构技巧

json_normalize是pandas用于处理嵌套JSON数据的工具。1.理解嵌套JSON结构,如包含字典和列表的多层结构;2.使用json_normalize可将嵌套数据拍平成表格形式,地址字段通过点号路径展开;3.利用explode展开列表字段,每个元素单独一行,或合并为字符串显示;4.处理复杂嵌套时可通过record_path指定路径提取深层字段,结合max_level控制展开层级。

本文目录

    json_normalize 是 pandas 用于处理嵌套 JSON 数据的工具。1. 理解嵌套 JSON 结构,如包含字典和列表的多层结构;2. 使用 json_normalize 可将嵌套数据拍平成表格形式,地址字段通过点号路径展开;3. 利用 explode 展开列表字段,每个元素单独一行,或合并为字符串显示;4. 处理复杂嵌套时可通过 record_path 指定路径提取深层字段,结合 max_level 控制展开层级。

    如何用Python处理JSON嵌套结构—json_normalize平铺技巧

    处理JSON嵌套结构在Python中是一个常见的任务,尤其是在从API获取数据时。json_normalize 是 pandas 提供的一个非常实用的工具,能将嵌套的 JSON 数据“拍平”成表格形式,方便后续分析。

    如何用Python处理JSON嵌套结构—json_normalize平铺技巧

    1. 理解什么是嵌套JSON

    在实际工作中,我们经常遇到类似如下的结构:

    data = [
        {
            "id": 1,
            "name": "Alice",
            "address": {
                "city": "Beijing",
                "zip": "100000"
            },
            "hobbies": ["reading", "cycling"]
        },
        {
            "id": 2,
            "name": "Bob",
            "address": {
                "city": "Shanghai",
                "zip": "200000"
            },
            "hobbies": ["gaming"]
        }
    ]

    这个结构中包含了字典嵌套和列表,直接用 pd.DataFrame(data) 处理的话,有些字段还是嵌套的,不方便查看和分析。

    如何用Python处理JSON嵌套结构—json_normalize平铺技巧

    2. 使用 json_normalize 基础用法

    pandas.json_normalize() 的基本作用就是把嵌套结构展开成列。你可以这样使用它:

    import pandas as pd
    
    df = pd.json_normalize(data)
    print(df)

    输出结果会是这样的 DataFrame:

    如何用Python处理JSON嵌套结构—json_normalize平铺技巧
    idnameaddress.cityaddress.ziphobbies
    1AliceBeijing100000[reading, cycling]
    2BobShanghai200000[gaming]

    这样地址信息就被“平铺”出来了。

    提示:

    • 如果你只想要某些字段,可以加 record_path 参数指定路径。
    • 想要展开列表类型字段(比如 hobbies),可以结合 max_level=1 或者使用 explode。

    3. 展开列表字段的技巧

    上面的例子中,hobbies 字段是列表,如果我们想把每个爱好单独一行,可以用 explode:

    df = df.explode("hobbies")

    这样原来的一行可能会变成多行,例如 Alice 就会有两行记录,分别对应 reading 和 cycling。

    如果你希望保留原始结构但又不想丢掉列表中的多个值,也可以考虑把这些值合并成字符串:

    df["hobbies"] = df["hobbies"].apply(lambda x: ", ".join(x))

    这样显示更直观,适合展示类用途。


    4. 更复杂的嵌套怎么处理?

    当结构更深的时候,比如:

    {
        "user": {
            "profile": {
                "name": "Charlie",
                "contact": {
                    "email": "charlie@example.com",
                    "phone": "123456789"
                }
            }
        }
    }

    你可以通过点号表示法访问深层字段:

    pd.json_normalize(data, max_level=10)

    或者指定字段路径:

    df = pd.json_normalize(
        data,
        record_path=["user", "profile"],
        meta=[["user", "profile", "contact", "email"]]
    )

    不过一般建议先用 max_level 试试看效果,再根据需要提取特定字段。


    总的来说,json_normalize 虽然功能强大,但也不是万能的,有时候需要配合 apply、explode、rename 等操作一起使用。关键是理解原始结构,并有意识地控制输出格式。

    基本上就这些,不复杂但容易忽略细节的地方在于字段路径和层级结构的匹配,稍不小心就会出错。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发 JSON
    相关文章 更多
    Java发送post请求发送json数据的实现方法与代码示例
    Java发送post请求发送json数据的实现方法与代码示例

    深入解析Java发送JSON格式POST请求的实现机制,对比原生API与第三方库的代码差异,提供可复制的代码示例,并探讨超时设置、编码处理及微服务场景下的例外情况。

    抖音官网入口网页
    抖音官网入口网页

    抖音官网入口的正确打开方式 如果你在寻找抖音网页版的入口,那么直接访问 https://www.douyin.com 就是了。这不仅是通往海量短视频世界的门户,更是一个功能越来越专业的媒体素材库和创作工具箱。为什么这么说?看看它最近在功能上的深度拓展就知道了。 简单一个网址背后,其实是一个日益精密的

    在小说搜搜找不到想看的小说怎么办?小说搜搜换源功能使用详解【必学】
    在小说搜搜找不到想看的小说怎么办?小说搜搜换源功能使用详解【必学】

    小说搜搜搜索不到结果?五种实用解决方法帮你搞定 在小说搜搜里搜不到想看的书?这事儿其实挺常见。问题多半出在书源上——要么是默认的书源还没来得及收录,要么是原先的源数据失效了,更新没跟上。别急,下面这五条解决路径,基本能覆盖绝大多数情况,操作起来也不复杂。 一、通过阅读页调出换源入口手动切换 这个方法

    蓝海搜书搜书攻略及入口指南免费分享
    蓝海搜书搜书攻略及入口指南免费分享

    蓝海搜书提供超三百万部小说资源,覆盖十余类题材;具备毫秒级搜索响应、四套主题引擎、跨端加密同步及全文索引等核心功能,入口为lanhaizw.com。 关于蓝海搜书的免费资源入口和核心功能,一直是许多读者关注的焦点。今天,我们就来深入拆解一下这个平台,看看它在资源、体验和功能上究竟有哪些门道。 官方入

    Java中JSONassert,JsonUnit和Jackson三方比对
    Java中JSONassert,JsonUnit和Jackson三方比对

    断言工具专为测试场景设计,支持宽松模式并精准定位差异;单元工具基于断言工具和杰克逊库封装,提供更友好的断言接口;杰克逊库作为主流处理库,可通过节点树模型自定义比对逻辑,适用于业务开发中精细控制差异的场景。

    百度编辑器从Json对象中取值,完成初次渲染,在编辑器内画表格
    百度编辑器从Json对象中取值,完成初次渲染,在编辑器内画表格

    通过AJAX异步请求服务器获取JSON格式的表格数据,解析JSON对象后遍历数据条目,动态拼接成包含表格标签的HTML字符串,最后调用编辑器实例的setContent()方法将HTML写入编辑器,完成表格在编辑器内的初次渲染。

    1024编程
    1024编程

    面向8-18岁青少年,采用计算机硕士以上师资,以Scratch、Python、C++、CSP-J/S和NOIP五个阶段系统化循序渐进推进,避免冗余理论,注重实战,紧密对标竞赛与升学需求,形成高效衔接、直通信息学奥赛的课程体系,着力培养计算思维,助力学生冲刺升学。

    能编程与会编程
    能编程与会编程

    能编程与会编程的区别在于前者仅是技术实现,后者包含情绪管理、坚持探索、主动负责、追求完善及知识体系构建等综合能力。编程之外的能力决定了解决问题的深度与广度。

    c++如何解析GeoJSON中的FeatureCollection地理要素集【实战】
    c++如何解析GeoJSON中的FeatureCollection地理要素集【实战】

    使用nlohmann/json库解析GeoJSONFeatureCollection,需逐层防御性访问features、geometry和properties,坐标数组维度不确定,需判断。坐标系和精度问题在解析层无法解决,应暴露原始坐标数组供上层处理。性能敏感时避免重复解析和深拷贝,可缓存并视口裁剪。

    Pandas如何解析JSON数据为表_利用json_normalize函数扁平化数据
    Pandas如何解析JSON数据为表_利用json_normalize函数扁平化数据

    pandas.json_normalize 这个函数,说起来挺有意思的——很多人以为它能一键把嵌套 JSON 拍扁成表格,结果往往发现列名变成了一串带点的“火车”(比如 profile.address.city),真正棘手的问题却一个都没解决。字段缺失怎么办?列表嵌套怎么炸开?多层结构怎么拆?答案其

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。