据北京大学微信公众号消息,北大有一位特殊的助教,它“永远有耐心”能提供高质量互动,是一个“聪明又勤奋的家伙”。它就是“Brainiac Buddy(简称BB)”一个基于GPT-4的AI交互工程的产物。
BB上线后,获得了校内外师生以及社会人士的广泛关注,目前还在试用-反馈-完善的阶段;它对于不同学科、不同类型课程的适用性还有待时间的检验。
这样一款AI助教为什么会出自一个数学家团队?董彬老师及其团队成员对于数学和AI之间的关系是如何展望的?

BB登录界面
能做即兴发挥,随机应变地完成任务
2023年秋季学期,BB启用于北京大学博雅特聘教授北大北京国际数学研究中心董彬老师的《图像处理中的数学方法》课上学生通过对“BB”进行提问,实现了对课程的预习和个性化知识库的建立。未来,这位AI助教也将适用和支持更多的课程。
BB由董彬老师带领学生和校外科技公司联合打造,基于GPT-4开发,目标是实现个性化、定制化和互动式的助教,以此提高教学质量。
2023年年初GPT-3.5刚出来的时候,董彬还没有意识到跟这样的大语言模型的交互会产生怎样的价值。
“因为当时GPT-3.5的底层的逻辑能力还相对比较弱,我可能也跟很多人一样,跟它对话只是好奇,也会嘲笑一下它犯的低级错误,纯属娱乐。但是跟它交互时间久了之后,我逐渐意识到它的延伸价值有可能是巨大的,但是当时还没对交互工程有很清晰的认识。”交互工程是在一系列指令(包括自然语言)的引导下,让大语言模型完成对应的任务。
GPT-4的出现,让董彬看到了它逻辑推理能力的质变,“也许我们真的可以通过设计一系列的指令来引导大模型去完成那些我们之前完全不敢想的非常复杂的任务。”董彬开始着眼于AI for Mathematics,并且和数学中心的老师和同学们一起筹划如何将它的逻辑推理能力在高质量的数学类的数据集上进行训练调优,让其成为数学家的得力助手。这也成为催生这位特殊AI助教的契机。
当大模型的逻辑思维能力超过了一个阈值之后,它就能够很清晰地理解你的指令了,它可以严格遵循你的意图(只要你把你的意图用清晰的语言表述出来),甚至能够在指令比较宽泛时去做一些即兴发挥,随机应变地完成你布置给它的任务。

北京国际数学研究中心办公院落
可以因材施教,成为每个学生的定制助手
与交互工程的使用体验超出了周珍楠老师的预期。
当你问大型语言模型一些相对深刻的问题时,有时你会得到一个荒谬或者无用的回答,但有时候你可能会得到一个很有启发性的回答。在我个人的体验中,这种启发性可能会超越我在现实中找到一个“对”的人,并与之进行深入交流之后的收获。
教育一个最难的任务就是怎么做到真正意义上的因材施教,为每个学生定制一个又耐心又懂你,而且知识渊博的教学助手。而这种互动中的意外收获,也是董彬开发BB的初衷,“大语言模型也许可以很大程度上提升我们教育的质量。”因此,让不会用大模型的学生都能不费力地学会与大语言模型互动也就成为了董彬想要实现的目标。
“在大语言模型出来之后,学会提问的重要性就被放大了。”在周珍楠看来,提问者向大语言模型提供的信息量会影响他获取信息的质量。一方面,提问者需要对自己的问题有一定的了解,才能有效地让大型语言模型帮他解决问题。
“确实存在一种极端的情况:一个问题的答案明明摆在我们面前,但我们就是无法理解。比如一个艰深的数学证明。”另一方面,即使有了充分的预备知识,仍然可能不是一个好的提问者。因为我们也许不知道如何针对具体的问题,去筛选和组织相关的信息和组织一个完整的提问。而与大型语言模型的多轮对话,可以在一定程度上弥补我们在逻辑和语言组织能力上的短板。
来源/北京大学微信公众号
编辑/刘茜贤