当前位置:

首页 > 编程开发 > Golang解析HTML方法详解

Golang解析HTML方法详解

必须先调用html.Parse()或html.ParseFragment()构建DOM树,不可直接操作html.Node;Parse用于完整HTML文档,需io.Reader输入;ParseFragment适用于HTML片段。

必须先调用 html.Parse() 或 html.ParseFragment() 构建 DOM 树,不可直接操作 html.Node;Parse 用于完整 HTML 文档,需 io.Reader 输入;ParseFragment 适用于 HTML 片段。

如何在Golang中解析HTML页面_Golang net/html HTML解析方法

用 net/html 解析 HTML 时,必须先调用 html.Parse() 获取根节点

直接对原始 HTML 字符串调用 html.Node 相关操作会 panic,因为没有解析器上下文。必须先通过 html.Parse() 或 html.ParseFragment() 构建 DOM 树。

  • html.Parse() 用于完整 HTML 文档(含 、 等),输入需是 io.Reader,常见用法:
    doc, err := html.Parse(strings.NewReader(htmlStr))
    if err != nil {
        log.Fatal(err)
    }
  • html.ParseFragment() 适合解析片段(如仅
    ...
    ),需传入一个“上下文节点”(如 &html.Node{Type: html.ElementNode, Data: "body"}),否则可能丢节点或 panic
  • 注意:解析器不校验编码,默认按 UTF-8 处理;若 HTML 声明为 gbk 或 utf-8 但实际字节非 UTF-8,会读出乱码甚至提前截断

遍历节点时,node.Type 比 node.Data 更可靠

很多新手误以为查 node.Data == "div" 就能定位元素,但 Data 在不同 Type 下含义不同:文本节点存内容,注释节点存注释文字,元素节点才存标签名。漏判 Type 会导致逻辑错位或空指针。

  • 关键类型常量:html.ElementNode(标签)、html.TextNode(文本)、html.CommentNode(注释)、html.DoctypeNode(doctype)
  • 安全遍历示例:
    func findDivs(n *html.Node) {
        if n.Type == html.ElementNode && n.Data == "div" {
            // 处理 div 元素
            fmt.Println("found div")
        }
        for c := n.FirstChild; c != nil; c = c.NextSibling {
            findDivs(c)
        }
    }
  • 不要依赖 n.DataAtom —— 它是内部优化字段,未导出且仅在特定构建下有效,跨平台或新版 Go 可能失效

node.Attr 是切片,查属性必须遍历,没有 GetAttribute() 这种方法

Go 的 net/html 不提供类似 jQuery 的 attr("href") 便捷接口,所有属性访问都得手动循环 node.Attr 切片比对 Key。

  • 常见错误:写成 node.Attr["href"] —— 编译失败,因为 Attr 是 []html.Attribute 类型,不是 map
  • 正确写法:
    func getHref(n *html.Node) (href string) {
        for _, a := range n.Attr {
            if a.Key == "href" {
                href = a.Val
                break
            }
        }
        return href
    }
  • 注意大小写:HTML 属性名不区分大小写,但 net/html 不做归一化,"HREF" 和 "href" 被视为不同 key;生产环境建议统一转小写再比较

解析后不调用 html.Render() 就无法还原 HTML 字符串

如果你从网页提取结构后想拼回 HTML 片段(比如清洗后重新生成),不能靠字符串拼接,必须用 html.Render() 写入 io.Writer。否则丢失转义、闭合逻辑、自闭合标签处理(如 )等细节。

  • html.Render() 会自动处理特殊字符转义(如 < → <)、标签闭合、空白压缩策略(取决于节点类型)
  • 简单还原示例:
    var buf bytes.Buffer
    err := html.Render(&buf, doc)
    if err != nil {
        log.Fatal(err)
    }
    htmlOut := buf.String() // 此时才是合法可渲染的 HTML
  • 注意:若只取部分子树(如某个
    ),要确保其作为独立片段可渲染 —— 比如 子节点单独 render 可能缺 ,浏览器容错强,但服务端处理时需留意 解析 HTML 最容易被忽略的是编码推断和错误恢复机制:net/html 在遇到非法嵌套(如

    )时会自动修复 DOM 结构,这和浏览器一致,但也意味着你写的 XPath 或层级假设可能在意外情况下失效。 本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发
    相关文章 更多
    gradle安装步骤详解及环境变量配置教程
    gradle安装步骤详解及环境变量配置教程

    本文详细介绍Gradle的下载、解压、环境变量配置步骤以及安装验证方法,帮助开发者快速完成Gradle本地开发环境搭建。

    shell脚本怎么执行命令并获取执行结果的方法
    shell脚本怎么执行命令并获取执行结果的方法

    详细讲解在Shell脚本中执行命令并获取执行结果的常用方法,涵盖标准输出捕获、退出状态码判断、错误流重定向、多行结果处理及常见避坑要点。

    Java变量声明与初始化:局部、成员及静态变量的定义语法
    Java变量声明与初始化:局部、成员及静态变量的定义语法

    系统解析Java局部变量、成员变量与静态变量的定义语法、声明与初始化机制、生命周期及JVM内存驻留规则,结合图解与代码示例分析常见编译错误与认知误区。

    windows claude code 安装
    windows claude code 安装

    详解如何在Windows 10/11上安装Claude Code。涵盖WSL与Git Bash终端选择、Node.js版本检查、npm全局安装步骤、身份验证流程及claude doctor诊断方法,帮助开发者快速搭建本地AI编码助手。

    typescript是什么语言?一文看懂其定义与用途
    typescript是什么语言?一文看懂其定义与用途

    深入浅出解析TypeScript是什么语言。本文详细介绍TypeScript的语言定义、超集架构、核心运行原理、与JavaScript的核心对比以及四类典型工业级应用场景,帮助读者全面看懂TS的价值与用途。

    codex安装windows教程桌面版完整安装步骤指南
    codex安装windows教程桌面版完整安装步骤指南

    详解如何在 Windows 电脑上通过 Microsoft Store 安装 Codex 桌面应用,包括启动登录、切换 Codex 模式、关联本地代码项目及终端环境配置的界面操作指引。

    github配置ssh key windows
    github配置ssh key windows

    本文详解如何在Windows环境中使用PowerShell生成SSH密钥对,配置ssh-agent自动加载私钥,并将公钥安全添加至GitHub账户,最后通过git remote set-url切换为SSH地址,解决每次操作需输入账号密码的问题。

    backdrop和background区别
    backdrop和background区别

    深入解析backdrop与background在网页开发及视觉设计中的区别。通过CSS代码示例,展示如何正确使用background设置元素背景,以及利用backdrop-filter创建弹窗遮罩模糊效果,避免概念混用。

    windsurf ide download Windows版安装教程
    windsurf ide download Windows版安装教程

    详解 Windsurf IDE 在 Windows 系统的下载来源、安装步骤及首次启动界面。指导用户如何导入编辑器设置、打开项目文件夹及使用终端与 AI 功能,适合初次接触该工具的开发者阅读。

    ServBay安装配置详细教程与操作指南
    ServBay安装配置详细教程与操作指南

    新手入门 ServBay 本地开发环境,详解安装包下载、Dashboard 状态监控、Packages 组件安装、Services 服务控制及 Websites 项目配置。掌握 .servbay.config 版本管理与日志排查技巧,快速搭建稳定的 PHP、Node.js 等多语言开发环境。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    WPS Office macOS版
    WPS Office macOS版
    macOS

    WPS Office是一款面向macOS用户的综合办公套件,将文字处理、电子表格、演示文稿、PDF工具、模板与云协作整合在同一应用中。它兼容常见Microsoft Office格式,支持Intel及Apple芯片Mac,基础功能可免费使用,

    Shapr3D macOS版
    Shapr3D macOS版
    Mac

    Shapr3D是一款面向工业设计、机械工程、建筑概念和三维打印工作流的CAD软件。Mac版采用Parasolid建模内核,支持草图约束、实体建模、工程图、可视化渲染及常见CAD格式交换,并可通过账户在多台设备之间同步项目。

    REAPER macOS版
    REAPER macOS版
    Mac

    REAPER是Cockos开发的数字音频工作站,提供多轨音频与MIDI录制、剪辑、处理、混音和母带制作工具。Mac版兼容Intel与Apple芯片,支持AU、VST、VST3、CLAP等插件格式,并提供高度可定制的工作流程。

    WINDOWS 更多
    Adobe Photoshop Windows版
    Adobe Photoshop Windows版
    Windows

    Adobe Photoshop 是面向摄影师、设计师和内容创作者的专业图像处理工具,可在 Windows 上完成照片修饰、选区抠图、图层合成、文字排版、绘画及生成式编辑。软件采用订阅授权,由 Creative Cloud 管理安装、更新与许

    Adobe InDesign Windows版
    Adobe InDesign Windows版
    Windows

    Adobe InDesign 是面向印刷与数字出版的专业页面排版工具,可制作书籍、杂志、宣传册、海报、交互式 PDF 和电子书。它提供精细的文字样式、多页面管理、印前检查及多格式输出能力,并能与 Photoshop、Illustrator

    Adobe Illustrator Windows版
    Adobe Illustrator Windows版
    Windows

    Adobe Illustrator 是用于绘制矢量图形、插画、图标、徽标和版式的专业设计工具。它以路径和锚点为核心,作品放大后仍能保持清晰,并提供画板、文字、渐变、图像描摹及精确变换等功能,适合品牌视觉、印刷物料、数字界面和商业插画创作。

    网站备案号:苏ICP备2026018738号-1 联系邮箱:bd@zhengruan.com 网站地图

    Copyright ©2018-2026