当前位置:

首页 > 硬件相关 > 李海大学等五所高校联手:AI能否像老师一样看懂学生的错误思路?

李海大学等五所高校联手:AI能否像老师一样看懂学生的错误思路?

AI能读懂孩子的数学草稿吗?这项研究给出了耐人寻味的答案 2026年3月,一份由李海大学、松鼠AI学习、中科院自动化所等五所知名院校联合完成的研究,被发布在arXiv预印本平台上(编号:arXiv:2603.24961v1)。这项研究做了一件挺有意思的事:它第一次系统地探究了那些“多才多艺”的多模态

本文目录

    AI能读懂孩子的数学草稿吗?这项研究给出了耐人寻味的答案


    2026年3月,一份由李海大学、松鼠AI学习、中科院自动化所等五所知名院校联合完成的研究,被发布在arXiv预印本平台上(编号:arXiv:2603.24961v1)。这项研究做了一件挺有意思的事:它第一次系统地探究了那些“多才多艺”的多模态大语言模型,到底能不能像人类老师一样,读懂学生手写数学作业里的错误。想刨根问底的读者,不妨用上面的编号去搜搜看原文。

    想象这么一个画面:孩子的数学作业本上,写满了数字,涂涂改改,算式东倒西歪。家长看了可能一头雾水,但经验丰富的老师却能一眼看穿——错在哪里?为什么错?孩子的思路卡在哪个环节了?现在,研究人员正试图让人工智能也获得这种“透视”能力。

    一、破译手写密码:AI面临的第一道难题

    孩子的手写草稿,对AI来说无异于一部天书。数字“7”带个小勾,除号写得像加号,涂改的墨团掩盖了关键步骤……这些对人类老师而言,经过训练和经验的积累尚可解读,但对AI模型来说,却是第一道难以逾越的鸿沟。

    研究发现,现有的AI在处理手写数学符号时,表现得像个“近视眼”。举个例子,学生在计算4÷35时,可能因为不熟悉小数除法,在过程中错误地移动了小数点,最终得出一个相距甚远的答案8.75。人类老师能顺着草稿的笔迹,还原出学生的思维路径,判断出这是小数计算技能薄弱所致。然而,AI往往连那些潦草变形的数字和符号都识别不准,更别提追踪背后跳跃的逻辑了。

    更复杂的是格式问题。数学草稿从来不是印刷体,上面有随意画的圈、箭头、旁注。这好比在一张凌乱的地图上找路线,人类老师能凭经验分辨哪些是正式步骤,哪些是草稿涂鸦;而AI则很容易被这些“噪声”干扰,完全误解学生的意图。

    数据很能说明问题:即便是表现最好的AI模型,视觉识别错误率也高达36%。这意味着超过三分之一的情况,AI连学生写了什么都没看清,后续的分析自然无从谈起。

    二、从表象到本质:错误分类的精妙艺术

    即使AI勉强“看清”了内容,更大的挑战才刚刚开始:理解错误的本质。这有点像中医辨证,同样是“答案错误”,背后的“病因”却各不相同。

    研究团队将数学错误精细地分成了七大类。比如,“程序性错误”是步骤执行出了岔子;“计算错误”是具体运算时“手滑了”;而“逻辑推理错误”最为棘手,好比下棋时战略思路从根上就偏了,步步皆错却看似合理。

    不同年龄段的学生,错误模式也大不相同。小学生的错误主要集中在题目理解和基础计算上,这两类加起来能占到70%,像刚学做菜的新手,不是看错菜谱就是放错调料。中学生则更多地在复杂计算和概念理解上栽跟头。

    有趣的是,AI对不同类型错误的诊断能力也参差不齐。对于有明确外在特征的“抄写错误”,AI识别尚可;但面对需要深度理解的“逻辑推理错误”,AI就显得力不从心。

    三、思维追踪:AI能否读懂学生的心思

    识别符号是技术活,理解思维则是认知层面的高难度动作。这就像侦探破案,不能只看现场,还得推演出完整的作案动机和过程。

    来看个实际案例。题目问:“小明4分钟做了35道题,平均每道题用多少分钟?”正确答案应是4÷35≈0.11分钟。但有学生答了8.75。人类老师扫一眼草稿就能发现,学生把除数和被除数弄反了,这暴露了他对“平均时间”概念的误解。

    AI在处理这类问题时,常犯两种毛病:一是“过度推理”,自己脑补出学生根本没犯的错误;二是“表面诊断”,只能指出答案不对,却说不到错误的根子上。

    另一个反直觉的发现是:AI在处理小学低年级简单题目时的表现,有时反而不如处理中学复杂题目。原因可能在于,小学生的书写更随性,解题思路也更跳跃,缺乏规范的步骤展示,这让习惯结构化工序的AI更难以捉摸。

    四、数据背后的故事:1720份真实作业的启示

    这项研究最可贵的一点,是它基于真实的、原汁原味的学生作业。团队从海量样本中,最终筛选出1720份涵盖一到九年级的数学草稿,覆盖了数字、方程、几何、应用、统计五大领域。

    数据标注采用了“人机协作”的严谨模式:先让AI初判,再由五位资深的数学老师最终审核修正,确保标签的可靠性。这个过程,有点像医院的专家会诊。

    数据分析揭示了一些鲜明的趋势:小学阶段,理解和计算错误是重灾区;到了中学,随着知识变难,概念理解错误的比例显著上升。此外,人类专家之间对于错误判断的一致性超过了90%,这为评估AI设定了一个明确的高标准。

    五、AI大比拼:16个模型的表现如何

    研究团队拉来了16位“AI教师”同台竞技,阵容豪华,从开源翘楚到商业明星,包括Qwen2.5-VL、GPT-4o、Gemini 2.0 Flash等。

    比拼结果可谓喜忧参半。在“错误原因解释”这项核心任务上,表现最优的模型(o4-mini)准确率在70%左右。但请注意,人类老师的标杆在87%以上。这意味着,最顶尖的AI仍落后人类近20个百分点。

    而在更精细的“错误分类”任务上,差距被进一步拉大:最好的AI准确率仅40%出头,人类老师则轻松超过78%。这好比一个医生,或许能看出你生病了,但具体是什么病,却经常误诊。

    六、失败案例解剖:AI到底错在哪里

    为了找到病根,研究团队深度剖析了100个典型失败案例。

    首要问题依然是“看不清”(视觉识别失败,占36%)。学生写的“-3÷(-6)=1/2”,在AI眼里可能变成了别的符号组合,第一步就错了。

    其次是“看不懂格式”(占15%)。草稿上的箭头、圈画、涂改,这些人类老师能自动过滤的辅助信息,却经常让AI晕头转向。

    此外,“幻觉”(占16%)和“错位解读”(占17%)也很常见。AI有时会无中生有,编造学生没犯的错误;或者虽然看到了所有步骤,却无法将它们按正确的逻辑顺序串联起来,还原不出真实的思考轨迹。

    七、不同数学领域的挑战差异

    AI的能力也存在“偏科”现象。它在几何与测量、统计与概率这类步骤相对规范、答案相对唯一的领域表现较好。然而,一旦遇到方程与函数这类需要多步、复杂逻辑推理的题目,AI就颇为吃力了。

    应用数学题目则呈现两极分化:对于有固定套路的“行程问题”,AI尚能应对;一旦题目涉及现实建模和开放假设,AI就容易“死机”。这恰好暴露了当前AI在处理真实世界复杂性和灵活性上的短板。

    八、年级差异揭示的认知模式

    另一个有趣的发现是AI表现的“年级效应”。在解释错误原因时,AI的表现随年级升高而轻微下降,可能是被高年级题目的内在复杂性难住了。

    但在给错误分类时,趋势却完全相反:AI对高年级作业的分类准确率明显更高。原因在于,中学生的解题过程更规范、步骤更清晰、书写更工整——这相当于给AI提供了一份更标准的“普通话”文本,当然比解读小学生的思维“方言”要容易。

    九、商业化模型与开源模型的较量

    在这场比拼中,商业化模型(如o4-mini)整体上显著领先于开源模型,这背后是数据质量、算力投入和工程优化的综合优势。尤其是在需要深度推理的任务上,那些专门强化了推理能力的模型(无论是商业还是开源的)表现都更突出,这说明理解学生错误,光靠“看”还不够,核心在于“想”。

    当然,开源模型也有亮点。比如在某些特定领域(如统计概率),个别开源模型的表现甚至不输商业模型,显示了其在垂直领域训练的独到之处。

    十、实际应用的前景与挑战

    尽管目前AI还不能媲美人类老师,但其应用前景已然清晰。首先,它可以成为老师的“超级助教”,高效完成作业的初筛,让老师能聚焦于最需要人工干预的复杂案例。

    其次,在推动个性化学习上潜力巨大。AI若能精准诊断每个学生的独特思维误区,就能生成量身定制的学习报告和练习,实现“对症下药”。

    当然,挑战依然严峻。技术上,手写识别与深度推理能力有待突破;教育理念上,则需警惕过度依赖技术而削弱师生间宝贵的人文互动与情感连接。如何让AI真正成为“助攻”而非“主角”,是未来教育智能化必须深思的课题。

    说到底,这项研究揭示了一个核心事实:理解人类写在纸上的、充满跳跃和涂改的思维过程,其复杂程度远超我们的想象。从潦草字迹到逻辑误区,这中间需要跨越的不仅是技术鸿沟,更是认知鸿沟。

    不过,这项研究的价值恰恰在于此。它搭建了一个坚实的评估基准,提供了高质量的真实数据集,为后续的探索铺平了道路。或许在不远的将来,每个孩子真的能拥有一位永不疲倦、即时反馈的AI学习伙伴,那无疑将为教育的个性化与公平性,打开一扇全新的大门。

    Q&A

    Q1:ScratchMath数据集包含了哪些内容?

    A:它包含了1720份来自中国中小学的真实数学手写草稿,覆盖一到九年级,涉及数字与表达式、方程与函数等五大数学领域。每一份都包含了原始手写过程和经过专家标注的错误分类信息。

    Q2:当前最先进的AI在理解学生数学错误方面表现如何?

    A:即使是顶级模型,在解释错误原因上的准确率也仅在70%左右,远低于人类老师的近90%水准;在错误分类任务上,差距更大,AI约40%的准确率与人类近80%的水平相比,仍有很长一段路要走。

    Q3:AI在分析学生数学错误时主要面临哪些困难?

    A:主要困难有三:一是视觉识别关,难以准确辨认潦草、不规范的手写符号;二是格式理解关,容易被涂改、圈画等非标准布局干扰;三是逻辑推理关,难以深入追踪并理解学生多步骤解题过程中的根本性思维误区。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    硬件相关
    相关文章 更多
    国际弦理论大会首次落沪,丘成桐:上海已是亚洲理论物理研究标杆
    国际弦理论大会首次落沪,丘成桐:上海已是亚洲理论物理研究标杆

    第三十六届国际弦理论大会首次在上海开幕,约700名学者参会。丘成桐指出,上海数学与交叉学科研究院已成为亚洲理论物理研究标杆。中国弦理论研究过去五年进步显著,有望在5到10年内追赶世界一流水平。

    明尼苏达大学等机构联手打造
    明尼苏达大学等机构联手打造"进化式微调"

    明尼苏达大学等机构提出进化式微调(EFT),收集371个优化任务的17万条进化轨迹训练开源小模型,得到Finch系列。在22个陌生任务上平均提升10.22%,展现出跨领域知识迁移能力,较小模型可超越未训练的大模型。

    北京科研团队取得通用人工智能逻辑推理新突破
    北京科研团队取得通用人工智能逻辑推理新突破

    北京通用人工智能研究院联合北大团队开发的通矩模型,能自主出题与解题,突破几何推理瓶颈。通过规范化表示压缩搜索空间,并引入基于数学美学的价值评估机制,实现从被动解题到主动创题的范式跃迁。

    直播预告 | 李大潜、沈维孝两位院士讲述谷超豪的数学人生与科技强国之路
    直播预告 | 李大潜、沈维孝两位院士讲述谷超豪的数学人生与科技强国之路

    为纪念谷超豪先生百年诞辰,5月10日将在上海科技馆举办专题科普讲座。李大潜院士将回顾谷超豪从数学少年成长为学科开拓者的历程,展现其科学精神传承。沈维孝院士则以多项式求根为例,引领听众领略数学的深邃与精巧。这是一次与顶尖学者对话、感受数学魅力的难得机会。

    两位院士在上海科技馆联袂开讲,纪念谷超豪院士诞辰100周年
    两位院士在上海科技馆联袂开讲,纪念谷超豪院士诞辰100周年

    5月15日,是一个值得铭记的日子——著名数学家、中国科学院院士、2009年度国家最高科学技术奖获得者谷超豪先生诞辰一百周年。 为纪念这位科学巨擘的卓越贡献,弘扬其探索真理的科学家精神,并将基础研究的魅力传递给更广泛的公众,一场特别的科普活动于5月10日在上海科技馆报告厅举行。这便是第240期上海科普

    10 行代码让大模型数学提升 20%,“野路子”研究谷歌也测上了,主要作者全靠自学成才
    10 行代码让大模型数学提升 20%,“野路子”研究谷歌也测上了,主要作者全靠自学成才

    只要不到10行代码,就能让大模型数学能力(GSM8k)提升20%!几名独立学者提出了大模型采样的改进方案,引起了开源社区的关注。目前该方法已在Mistral-7B上取得成效,在Llama3-70B上的测试也正在进行。这种方法叫做最小p采样(min-psampling),目的是平衡生成文本的连贯性和多样性。简单说就是让模型在不同场合发挥不同的特性,例如在事实问题上保持性能稳定,在写作等场景中又能发挥创意。目前该方法已在Mistral-7B上取得成效,在Llama-70B上的测试也即将进行。在论文中作者提到,

    GPT-4数学能力大蹦极!OpenAI爆火研究「过程监督」突破78.2%难题,干掉幻觉
    GPT-4数学能力大蹦极!OpenAI爆火研究「过程监督」突破78.2%难题,干掉幻觉

    ChatGPT自发布以来,数学能力饱受诟病。就连「数学天才」陶哲轩曾表示,GPT-4在自己的数学专业领域,并没有太多的增值。怎么办,就一直让ChatGPT做个「数学智障」么?OpenAI在努力——为了提升GPT-4的数学推理能力,OpenAI团队用「过程监督」(PRM)训练模型。让我们一步一步验证!论文地址:https://cdn.openai.com/improving-mathematical-reasoning-with-process-supervision/Lets_Verify_Step_by

    GPT-3解数学题准确率升至92.5%!微软提出MathPrompter,无需微调即可打造「理科」语言模型
    GPT-3解数学题准确率升至92.5%!微软提出MathPrompter,无需微调即可打造「理科」语言模型

    大型语言模型最为人诟病的缺点,除了一本正经地胡言乱语以外,估计就是「不会算数」了。比如一个需要多步推理的复杂数学问题,语言模型通常都无法给出正确答案,即便有「思维链」技术的加持,往往中间步骤也会出错。与文科类的自然语言理解任务不同,数学问题通常只有一个正确答案,在不那么开放的答案范围下,使得生成准确解的任务对大型语言模型来说更具挑战性。并且,在数学问题上,现有的语言模型通常不会对自己的答案提供置信度(confidence),让用户无从判断生成答案的可信度。为了解决这个问题,微软研究院提出了MathProm

    白天打工,晚上科研,谷歌大脑研究科学家解决了困扰数学界几十年的猜想
    白天打工,晚上科研,谷歌大脑研究科学家解决了困扰数学界几十年的猜想

    2022年10月中旬,JustinGilmer从加利福尼亚飞往纽约,在东海岸拜访了他以前的导师MichaelSaks,一位罗格斯大学的数学家。叙旧期间,他们并未谈及数学。事实上,自从2015年在罗格斯大学获得博士学位后,Gilmer就再没认真思考过数学问题。那时候他决定不在学术界发展,同时开始自学编程。当他和Saks共同用餐时,Gilmer向导师讲述了自己在谷歌的工作:机器学习和人工智能。在校园的小路上,Gilmer边走边回忆,2013年,他花了一年多的时间走在这条路上,思考

    「数学菜鸡」ChatGPT很懂人类喜好!在线生成随机数,竟是宇宙终极答案
    「数学菜鸡」ChatGPT很懂人类喜好!在线生成随机数,竟是宇宙终极答案

    ChatGPT可能是一位废话艺术家、错误信息的传播者,但它不是「数学家」!近日,一位Meta的数据科学家ColinFraser发现,ChatGPT并不能生成真正的随机数,而更像是「人类的随机数」。通过实验,Fraser得出的结论是:「ChatGPT非常喜欢数字42和7。」网友表示,意味着人类非常喜欢这些数字。ChatGPT也爱「宇宙终极答案」在他的测试中,Fraser输入的prompt如下:「Pickarandomnumberbetween1and100.Justreturnthe

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。