当前位置:

首页 > 业界资讯 > 网易伏羲携手昇腾AI打造玉知-悟空图文理解大模型,推动个性化体验升级

网易伏羲携手昇腾AI打造玉知-悟空图文理解大模型,推动个性化体验升级

不少人都有过这样的“心动”体验:上班路上打开网易新闻,推荐内容恰好是自己最近关注的行业动态;下班途中打开网易云音乐,惊喜的发现了几个小众宝藏歌手,忍不住直呼“网易云真是太懂我了!”个性化的推荐机制像一个贴心的朋友,在互联网的海量信息中,总能捕捉到最合你心意的那个。01个性化推荐机制的背后:多模态大模型保驾护航作为国内专业从事游戏与泛娱乐AI研究和应用的顶尖机构,网易伏羲于2021年起着力打造“玉知”多模态理解大模型。基于图片-文本双塔结构,先后训练了2亿、4亿、9亿参数的“玉知”版本。同时,利用网易伏羲开

本文目录

    不少人都有过这样的“心动”体验:上班路上打开网易新闻,推荐内容恰好是自己最近关注的行业动态;下班途中打开网易云音乐,惊喜的发现了几个小众宝藏歌手,忍不住直呼“网易云真是太懂我了!”

    个性化的推荐机制像一个贴心的朋友,在互联网的海量信息中,总能捕捉到最合你心意的那个。

    01

    个性化推荐机制的背后:

    多模态大模型保驾护航

    作为国内专业从事游戏与泛娱乐AI研究和应用的顶尖机构,网易伏羲于2021年起着力打造“玉知”多模态理解大模型。基于图片-文本双塔结构,先后训练了2亿、4亿、9亿参数的“玉知”版本。同时,利用网易伏羲开源的EET高效推理框架,对模型压缩、算法适配、硬件底层等方面进行优化,使其推理速度提升4倍,满足了线上的高并发需求,降低了部署资源的损耗。

    在业务数据集的zero-shot评测中

    “玉知”多模态理解大模型优于Chinese-CLIP的CN-CLIPViT-H/14

    同时网易伏羲联合网易新闻及网易云音乐团队,将“玉知”多模态理解大模型在网易的多个业务场景中落地验证,为个性化推荐机制保驾护航:网易新闻基于“玉知”构建的图文内容表征,在推荐环节采用基于该图文向量的dropoutnet召回优化,对召回源、列表页视频试投、列表页试投整体等效果明显改进,实现视频和整体大盘的业务指标提升;网易云音乐基于“玉知”构建的内容表征引擎和内容相似检索引擎,在云音乐视频、长音频、广告等多个业务中,实现了对内容冷启动效率、CTR预估模型的优化,带来显著收益。

    网易伏羲携手昇腾AI打造玉知-悟空图文理解大模型,推动个性化体验升级

    02

    网易+昇腾AI:

    创造1+1>2的智能体验

    为了更好的使能大模型应用创新,昇腾AI构建了从规划、开发到产业化的大模型全流程使能体系,并于2022年正式发布了昇腾AI大模型开发使能平台,打通了大模型从开发到部署的全流程。

    在大模型的开发上,通过昇思MindSpore提供的自动混合并行API来加速训练过程,利用高阶的Transformer API,百行代码实现千亿级参数的模型开发,同时获得更好的模型性能;为加速大模型场景化适配,打造了丰富的微调套件,已成功应用于紫东太初大模型开放服务平台建设,支持小样本训练和模型一键微调;在大模型的推理部署上,昇腾AI提供的模型压缩工具,在精度基本无损的情况下,降低了70%计算量,提升了20%以上的推理性能。

    为了给用户带来更好的智能体验,网易伏羲联合昇思MindSpore及华为诺亚团队,充分分析互联网行业数据集特性,对多模态模型结构进行优化,优选合适编码器并采用多阶段训练模式, 基于昇腾AI大模型开发使能平台,共同打造了玉知-悟空图文理解大模型。

    玉知-悟空图文理解大模型可广泛应用在互联网推荐搜索等业务中,通过提取图文的特征进行相关的检索。在网易视频推荐业务的应用中,玉知-悟空图文理解大模型在核心算法指标中得到近5%的提升,效果远超预期。未来,联合团队将进一步将成果应用到网易新闻、网易云音乐等更丰富的业务场景中,提升最终用户的个性化体验。

    网易伏羲携手昇腾AI打造玉知-悟空图文理解大模型,推动个性化体验升级

    当被输入丰富的行业知识时,更精更专的大模型将显现出巨大的应用价值。昇腾AI大模型开发使能平台,已经具备了支持大模型开发所需的各项核心技术,同时提供了一整套高效、易用的大模型使能套件,形成了端到端的使能大模型开发能力。未来,昇腾AI将联合网易以及更多行业伙伴共建共享,助力大模型创新,为繁荣AI产业生态铺就一条信心之路。

    ☜左右滑动下方图片☞

    了解更多【华为中国政企业务】最新动态

    你的每一次“在看”,我都看得见!

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    业界资讯
    相关文章 更多
    苹果研究团队:AI实现图文理解与生成统一框架能力提升突破
    苹果研究团队:AI实现图文理解与生成统一框架能力提升突破

    苹果与伊利诺伊大学团队提出STARFlow2模型,基于自回归流与语言模型结构相同的洞察,采用Pretzel架构让图文生成共享同一套因果Transformer核心。通过垂直跳跃连接,模型在保持强大视觉理解能力的同时,实现了高质量的连续图像生成,并在多任务训练中提升了性能。

    人工智能助力空天报国梦:厦门大学团队用AI能力护“工业皇冠明珠”
    人工智能助力空天报国梦:厦门大学团队用AI能力护“工业皇冠明珠”

    “空天报国”——这四个字是在厦门大学博学逐梦团队参加昇腾AI创新大赛2023赛后采访时反复提到的一个词,它代表着航院学子的情怀,也是本次大赛开发者套件创新赛道金奖作品“南强护航-航空发动机智能视觉缺陷检测”诞生的原因开发者套件创新赛道是昇腾AI创新大赛2023新增的赛道,除了应用赛道和昇思赛道外。参赛开发者需要针对生活和生产场景,利用昇腾新一代开发板进行设计和开发,探索更多人工智能应用的可能性“南强护航-航空发动机智能视觉缺陷检测”这一作品是对“AI+航空”应用的积极探索,针对航空装备的缺陷检测人力成本高

    翔迅科技携手昇腾AI,让工业生产有了“智能安全监督员”!
    翔迅科技携手昇腾AI,让工业生产有了“智能安全监督员”!

    “一个标准生产车间平均每天(8小时)发生“三违”行为10-20次,通过视频回放进行证据查找需要消耗2-3小时,使用翔迅安全生产数智一体化管理系统后,通过前端实时告警,平均每天发生“三违”行为降至5次以下,定位违规行为发生视频仅需3-5分钟。”翔迅科技业务负责人说道。在西安未来人工智能计算中心的支持下,翔迅安全生产数智一体化管理系统与Atlas300I推理卡完成兼容性测试。Atlas300I推理卡融合“通用处理器、AICore、编解码”于一体,提供AI推理、视频分析等功能,具有超强算力、超高能效、高性能视频

    利用昇腾AI技术,秦岭·秦川交通大模型助力西安打造智慧交通创新中心
    利用昇腾AI技术,秦岭·秦川交通大模型助力西安打造智慧交通创新中心

    “高度复杂、碎片化程度高、跨领域”一直是交通行业数智化升级路上的首要痛点。近日,由中科视语、西安市雁塔区政府、西安未来人工智能计算中心联合打造的参数规模千亿级的“秦岭·秦川交通大模型”,面向智慧交通领域,为西安及其周边地区打造智慧交通创新支点。“秦岭·秦川交通大模型”结合西安当地海量开放场景下的交通生态数据、中科视语自研的原创先进算法以及西安未来人工智能计算中心昇腾AI的强大算力,为路网监测、应急指挥、养护管理、公众出行等智慧交通全场景带来数智化变革。交通管理在不同城市有不同的特点,不同道路的交通特性、行

    医渡科技携手昇腾AI发布首个医疗领域专属大模型训推一体机解决方案
    医渡科技携手昇腾AI发布首个医疗领域专属大模型训推一体机解决方案

    在2023年9月21日的华为全联接大会上,医渡科技与昇腾AI合作发布了一款重磅解决方案,即大模型训推一体机。医渡科技的董事长兼创始人宫如璟女士和首席技术官兼首席人工智能科学家闫峻博士应邀出席了这次大会作为医疗健康领域中首个软硬件一体化的大型解决方案,医渡大型解决方案训练推理一体机专为医疗机构和政府监管部门的大型需求而设计。该解决方案集成了数据处理、模型训练、微调、场景评测以及外接知识型数据库等功能,旨在帮助医疗机构和监管部门更安全、更易用、更灵活地打造私有专属的大型解决方案,从而加速进入自主创新的大型解决

    华为云正式上线昇腾AI云服务“百模千态”专区
    华为云正式上线昇腾AI云服务“百模千态”专区

    华为云今天正式推出了昇腾AI云服务的“百模千态”专区,向全球企业和开发者提供支持。您只需登录华为云官网(https://developer.huaweicloud.com/develop/aigallery/ascendcloud.html),就能开始您的大模型之旅为满足大模型时代海量算力的需求,华为云昇腾AI云服务为各行各业提供了更多元、高效、长稳的算力服务选择。训练30天长稳率达到90%,训练作业故障会自动恢复,非自动场景下恢复时长小于30分钟。我们致力于为繁荣百模千态提供稳定可靠、高质量的云底座华为

    DeepSeek V4.1 Flash 1017:Agent榜单指标与编程评测表现
    DeepSeek V4.1 Flash 1017:Agent榜单指标与编程评测表现

    了解DeepSeek V4.1 Flash 1017的Agent Arena指标、约0.20美元任务成本中位数,以及Terminal-Bench 4.0和ProgramBench成绩变化与适用边界。

    DeepSeek模型权重与DeepInfer有什么区别?开源对象和生态协作
    DeepSeek模型权重与DeepInfer有什么区别?开源对象和生态协作

    了解DeepSeek模型权重与DeepInfer推理框架的对象差异,查看官方项目入口,并从价格竞争、开发者协作和小团队参与三个角度理解开源策略。

    幻方与DeepSeek:萤火二号算力积累和V3训练硬件怎么区分?
    幻方与DeepSeek:萤火二号算力积累和V3训练硬件怎么区分?

    理清幻方量化与DeepSeek的发展脉络,关键在于区分早期萤火二号的A100集群积累与DeepSeek-V3的H800训练配置。本文解析软硬件协同工程在其中的作用,避免将资金投入简单等同于模型能力。

    Kimi K3.1 Pro、SKY-001与Mercury 3:用途与评测指标
    Kimi K3.1 Pro、SKY-001与Mercury 3:用途与评测指标

    了解 Kimi K3.1 Pro 案例费用、SKY-001 零件构建耗时和 Mercury 3 测试表的限定条件,查看经核实的官方产品说明入口。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。