当前位置:

首页 > 编程开发 > Python统计分析实战:scipy与numpy技巧应用

Python统计分析实战:scipy与numpy技巧应用

Python统计分析首选numpy与scipy组合:numpy高效计算均值、标准差、分位数、相关系数;scipy.stats提供t检验、卡方检验、Shapiro-Wilk正态性检验等成熟统计方法。

本文目录

    Python统计分析首选numpy与scipy组合:numpy高效计算均值、标准差、分位数、相关系数;scipy.stats提供t检验、卡方检验、Shapiro-Wilk正态性检验等成熟统计方法。

    Python统计分析函数使用案例_scipy与numpy实战【技巧】

    Python中做统计分析,scipy和numpy是最常用、最可靠的组合。numpy负责高效数值计算与数据组织,scipy则提供成熟的统计模型、检验方法和分布工具。掌握它们的典型用法,能快速完成从数据清洗到假设检验、参数估计的全流程分析。

    用numpy快速计算基础统计量

    面对一维数组或二维表格数据,无需循环,直接调用numpy内置方法即可获得均值、标准差、分位数等关键指标:

    • np.mean(a)、np.std(a, ddof=1)(样本标准差,ddof=1启用贝塞尔校正)
    • np.quantile(a, [0.25, 0.5, 0.75])一次性获取四分位数
    • np.corrcoef(x, y)[0, 1]计算两变量皮尔逊相关系数(返回的是相关矩阵,取[0,1]位置)

    用scipy.stats做常见统计检验

    实际分析中常需判断差异是否显著。scipy.stats模块封装了大量检验函数,接口统一、结果清晰:

    • 独立样本t检验:scipy.stats.ttest_ind(group_a, group_b),自动处理方差齐性(默认不假设方差相等)
    • 配对样本t检验:scipy.stats.ttest_rel(before, after)
    • 卡方检验(频数表):scipy.stats.chi2_contingency(observed_table),返回卡方值、p值、自由度和期望频数
    • Shapiro-Wilk正态性检验:scipy.stats.shapiro(data),适合小样本(n < 5000)

    用scipy.stats生成/拟合概率分布

    模拟数据或检验分布假设时,scipy.stats的rv_continuous类非常实用:

    • 生成服从某分布的随机数:scipy.stats.norm.rvs(loc=170, scale=10, size=1000)(模拟1000个身高数据)
    • 计算PDF/CDF值:scipy.stats.norm.pdf(180, loc=170, scale=10)得密度值;scipy.stats.norm.cdf(180, loc=170, scale=10)得累积概率
    • 拟合分布参数:scipy.stats.norm.fit(data)返回最优的loc(均值)和scale(标准差)估计

    结合使用:一个完整的单样本检验流程

    例如检验某批零件直径是否符合标称均值25.4mm:

    • 先用np.mean和np.std查看样本中心与离散趋势
    • 用scipy.stats.shapiro检查是否近似正态(决定能否用t检验)
    • 执行单样本t检验:scipy.stats.ttest_1samp(measurements, popmean=25.4)
    • 根据返回的p值(如p=0.032)在α=0.05水平下拒绝原假设,说明均值显著偏离25.4

    不复杂但容易忽略:所有scipy.stats检验函数都默认双侧检验,若需单侧,可手动处理t值或z值的CDF;另外注意输入数据应为1D array,DataFrame列需先用.values或.to_numpy()转换。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发
    相关文章 更多
    WorkBuddy怎么用API接口?有开发文档吗
    WorkBuddy怎么用API接口?有开发文档吗

    WorkBuddy 目前没有面向普通用户的公开 REST API 接口文档,扩展与集成走四条官方路径:接入 MCP 服务扩展工具能力、用连接器打通外部应用(支持公共/个人授权)、编写技能(Skill)与专家包定制工作流、在开放平台发布 Buddy 应用。另支持接入 OpenAI 兼容的自定义模型。本文含 4 张真实界面截图并如实说明现状。

    Google Workspace MCP OAuth 2.0迁移节点已过,旧客户端、普通REST与服务账户分别适用什么规则
    Google Workspace MCP OAuth 2.0迁移节点已过,旧客户端、普通REST与服务账户分别适用什么规则

    解释Google Workspace MCP 11月11日与12日的agentic OAuth客户端迁移节点,区分普通REST应用、混合客户端、预览资格、用户权限和服务账户、Apps Script边界。

    OpenAI Agents SDK v0.24.0-alpha.8升级前为何要备份状态?
    OpenAI Agents SDK v0.24.0-alpha.8升级前为何要备份状态?

    OpenAI Agents SDK v0.24.0-alpha.8预览版新增执行前审批、自有模型客户端、Realtime与预算检查点恢复,说明alpha.7回退、Linux运行及工具认证边界。

    Claude Trading Skills六项诊断修复覆盖哪些密钥泄漏路径?
    Claude Trading Skills六项诊断修复覆盖哪些密钥泄漏路径?

    Claude Trading Skills六项技能已修复API密钥异常日志泄漏路径;not_verified保留完整安全审核缺口,离线回归通过不等于实盘验收或全面认证。

    Microsoft C++ Language Server内置MSBuild提取器后,自动化范围和使用资格怎样理解
    Microsoft C++ Language Server内置MSBuild提取器后,自动化范围和使用资格怎样理解

    解释Microsoft C++ Language Server预览版的MSBuild编译数据库自动提取,区分CMake、自定义构建、有效Copilot订阅和CLI能力,避免把测试预发布版本当最低稳定版。

    LibreOffice宏怎么用?Python脚本能调用吗
    LibreOffice宏怎么用?Python脚本能调用吗

    LibreOffice可通过“工具→宏”创建和运行Basic宏,也支持由Python脚本提供程序运行Python宏。两种方式都可以使用UNO接口操作文档;Excel VBA只有有限兼容支持,不能把所有Excel宏直接复制过来当作LibreOffice原生宏执行。

    GitHub企业Copilot席位API开放应用调用后,读取和席位变更有什么区别
    GitHub企业Copilot席位API开放应用调用后,读取和席位变更有什么区别

    说明Enterprise GitHub Apps的Copilot席位管理权限,提供第一页只读GET示例,区分total_seats、授权明细、遥测活动和待取消计费条件。

    GitHub网页仪表盘默认视图、单行标题和六项列表分别改变什么
    GitHub网页仪表盘默认视图、单行标题和六项列表分别改变什么

    解释GitHub网页仪表盘Feed或Home默认视图、六项列表、自定义选择保留和Agent sessions隐藏条件,区分布局、数据与权限。

    LangChain Python 1.4.10、JS core 1.3.7与langchain 1.6.4为什么要区分拒答和失败
    LangChain Python 1.4.10、JS core 1.3.7与langchain 1.6.4为什么要区分拒答和失败

    核对LangChain三种包版本,解释refusal内容块、ModelRefusalError与中间件传递,提供自定义错误分支示例并区分Python消息流和追踪修复。

    Anthropic Python/Ruby 2.8.0、TS 1.8.0、Go 2.9.0、Java 3.8.0参数校验应如何理解
    Anthropic Python/Ruby 2.8.0、TS 1.8.0、Go 2.9.0、Java 3.8.0参数校验应如何理解

    区分Anthropic各语言SDK及TypeScript云适配包版本,解释Claude Tag字段、Bedrock/Vertex分号差异、非法路径参数和只读Python版本核对。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。