当前位置:

首页 > 编程开发 > C++实现简单的线程池控制并发 _ std::future与任务队列【源码】

C++实现简单的线程池控制并发 _ std::future与任务队列【源码】

线程池的设计在C++后端开发中一直是高频讨论话题——尤其是当项目规模起来之后,任务投递、线程安全、异常传播和优雅关闭这些环节,任何一个处理不当,都会变成刺耳的噪音。 先给结论:线程池里到底该不该用std::future包裹任务?答案很明确:不该。 std::future的设计初衷是单次、异步、结果驱

本文目录

    线程池的设计在C++后端开发中一直是高频讨论话题——尤其是当项目规模起来之后,任务投递、线程安全、异常传播和优雅关闭这些环节,任何一个处理不当,都会变成刺耳的噪音。

    先给结论:线程池里到底该不该用std::future包裹任务?答案很明确:不该。

    std::future的设计初衷是单次、异步、结果驱动的场景,但线程池要解决的是线程复用加高吞吐的任务调度。强行用std::promise/std::future包着每一个任务,会带来三重负担:额外内存分配(每个promise对象都得在堆上搞一份),锁竞争加剧(promise的构造和设置值都需要同步),以及move语义穿透导致的隐式拷贝风险(特别是捕获lambda的时候)。实测数据说话,带上std::future的任务提交吞吐量比裸函数对象低30%到50%,这个差距放在高频提交场景下,就是一个数量级的性能损失。

    更务实的做法是:任务入队直接用std::function(),需要返回值时由调用方自己管理结果上下文,比如传一个std::shared_ptr容器,或者统一用回调函数来代替future。

    任务队列:用std::queue还是std::deque

    说到实现细节,队列容器选型也是个有争议的点。直接说结论:用std::deque,别用封装过头的std::queue。

    虽然std::queue默认底层也是std::deque,但显式用std::deque更有利于你把控行为:第一,std::queue封装太严,你没法直接调shrink_to_fit()释放多余内存,也没法用迭代器遍历队列里还有多少任务没执行,调试时只能干着急;第二,多线程环境下,std::deque的push_back()和pop_front()平均复杂度是分摊O(1),内存局部性好于std::vector,而且暴露底层接口后你可以在空闲时扔掉多余的缓冲区;第三,某些STL实现里std::queue的empty()调用可能隐含原子操作,在debug build下尤其拖慢性能,而直接操作std::deque能确保只在锁住的临界区内访问。

    如何安全终止worker线程

    退一步说,怎么让worker们安全地停下来,才是个真正的技术活。不能简单靠std::thread::join()硬等——如果worker正好在执行一个长时间任务,join会直接卡死。业界主流解决方案是「协作式中断」加「任务队列清空信号」双机制配合。

    具体做法:维护一个std::atomic stop_requested{false},所有worker循环的第一件事就是检查这个标志;停止前先把stop_requested设为true,再向任务队列里push一个特殊哨兵任务(比如一个空的std::function()),这样能确保至少有一个worker被唤醒。worker拿到任务后先判断是否为空,如果空就立即退出循环,否则正常执行。主线程调join()之前,务必确认所有worker已退出循环且队列已空——加一个简单的while循环等待workers_.size() == 0就够了。

    遗漏哨兵任务或忽略空任务判断,后果就是部分线程永远阻塞在cv_.wait()上,没法join。这个坑踩过的人应该不少。

    为什么别在worker线程里捕获std::exception_ptr

    再聊一个坑:异常传播。不推荐在worker线程里捕获std::exception_ptr,原因很直接——std::exception_ptr本身不携带任何栈信息,在线程之间传递还需要显式rethrow。如果worker只是捕获异常然后用std::current_exception()存起来不处理,主线程根本不知道出了什么问题。更麻烦的是,多个worker同时抛异常时,std::exception_ptr会丢失原始发生位置,一旦出问题你连从哪个任务开始的都不知道。

    务实做法是:让任务函数内部自己处理异常(记录日志、调用错误回调),或者约定任务签名统一定为std::function(),把错误归一化为std::error_code传回来。这样既能避免异常跨线程传播的不确定性,也方便上层做分类重试或熔断。

    说到底,线程池的难点不在于怎么让线程跑起来,而在于那些细节:出错时不静默、停止时不卡死、高负载时不互相拖慢。这些细节藏在stop_requested的读序、cv_.notify_one()的调用时机、以及任务对象移动构造的const正确性里。写对了,才是真正可用的工程组件。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发 C++
    相关文章 更多
    C++动态数组初始化怎么写?常用语句与代码示例
    C++动态数组初始化怎么写?常用语句与代码示例

    深入解析C++中动态数组的初始化机制,涵盖new操作符的不同用法、基本类型与类对象的初始化差异,以及为何在现代C++开发中应优先使用std::vector。

    C++类构造与析构函数详解
    C++类构造与析构函数详解

    C++类构造与析构函数详解 C++这门语言,可以说是从C语言这棵大树上衍生出的高级果实,如今的应用普及度有目共睹。作为一种静态类型的通用编程语言,它厉害的地方在于融合了多种编程哲学——无论是传统的面向过程,还是主流的面向对象,乃至数据抽象、泛型编程这些高级概念,它都能很好地支持。正因为这份卓越的扩展

    C++中std::upper
    C++中std::upper

    C++中std::upper_bound用法解析 在C++标准模板库(STL)的算法工具箱里,upper_bound() 绝对算得上是一把精准的“探针”。它的核心任务很明确:在一个已经排好序的区间 [first, last) 内,帮你快速定位到第一个**严格大于**指定值 value 的那个元素。这

    C++常对象与成员解析
    C++常对象与成员解析

    C++中“常”概念全景解析:从对象、成员到指针与引用 在C++的世界里,“常量性”是一个强大的保障机制。它不仅仅是一个const关键字那么简单,而是构建健壮、安全程序的重要基石。今天,我们就来系统梳理一下围绕“常”的一系列概念:常成员、常对象、常指针与常引用。理解它们,是写出高质量C++代码的关键一

    c++如何将结构体写入SQLite数据库_对象关系映射方案【进阶】
    c++如何将结构体写入SQLite数据库_对象关系映射方案【进阶】

    直接用SQLiteCAPI绑定结构体需要手动处理字段展平与顺序对齐,ORM库虽省代码但存在隐式行为风险。小项目建议原生绑定,中大型项目可搭配编译期校验使用轻量ORM。绑定std::string需传指针与长度,注意生命周期;浮点字段比较需设误差范围。

    什么是编程,学习编程的意义是?
    什么是编程,学习编程的意义是?

    编程是编写程序指令,让设备按意图运行,常用Python、C等语言或Scratch图形化编程。学习编程能跟上科技时代,锻炼自学与解决问题能力,提升逻辑思维,代表行动力,推动事物前进。各司其职,编程者尽本分。

    编程是门艺术_是编程艺术吗?
    编程是门艺术_是编程艺术吗?

    编程被争论是否为艺术。从定义看,编程是技能表达,但并非所有编程都是应用开发。写代码如音乐、文章,有独特风格。好代码需耐心与逻辑能力。编程是艺术,但应用开发不等同于编程艺术。

    【编程的感受】
    【编程的感受】

    很多人提起编程,总觉得这是一门“不起眼”的学问——不就是写写代码嘛,能有多深?但真走进去了才会发现,编程里头的门道,远比表面看上去要丰富得多。 学习编程的过程中,最容易卡住的往往是那些基础语法。就拿那个常见的 for 循环来说吧,刚开始时怎么都绕不过弯来:为什么这么写能循环?循环条件到底怎么控制?一

    对于懂得编程的人来说,编程对你来说有什么乐趣?编程大概是什么感觉?
    对于懂得编程的人来说,编程对你来说有什么乐趣?编程大概是什么感觉?

    解决编程问题后的痛快、完成作品的成就感、获取知识的满足感,以及用代码实现简化生活的惊喜与踏实,这些是编程独有的乐趣,只有真正写代码的人才能体会其中的酸甜苦辣、惊喜与满足,令人回味无穷。

    趣味编程:少儿编程思维的启蒙之旅
    趣味编程:少儿编程思维的启蒙之旅

    Scratch图形化编程以拖拽积木块方式启蒙少儿编程思维,无需记忆代码语法。通过素材库、即时反馈和社区协作,帮助孩子在创作中理解顺序执行、条件判断等核心概念,锻炼逻辑、创造力和问题解决能力。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。