让每一次点赞都有回应——作业帮直播课“手势识别”带来的体验

粤讯 中字

只要对着屏幕竖起拇指,不到1秒,屏幕上便会回应小朋友同样的手势,完成一次“点赞”。这是“手势识别”AI功能带给小朋友们的互动体验。在作业帮直播课“小组直播间”中,“手势识别”功能收获了一众“粉丝”,成为学生互动满意度最高的功能。

点赞、比心、OK等一系列手势,既新奇有趣,又能帮助主讲老师在线上教学场景中和学生有效互动。而通过AI技术赋能,作业帮直播课不断为线上课堂创造惊喜的同时,也驱动着在线教育形态的升级。

让每一次点赞都有回应——作业帮直播课“手势识别”带来的体验

需求:让每一次互动不落空

“让老师看看,是哪位学生没坐好啊?”“大家回答得特别棒,一起给自己点个赞吧”……在观察小学课堂时,作业帮小学产品负责人曹越发现,师生间的肢体互动是活跃课堂气氛、提升上课效率的有效手段。

尤其在“小组直播间”双向视频的模式下,由于师生间可以互相看见,类似的互动变得更加高频,一节课大约有5~6次。

但与此同时,曹越也敏锐地发现了“即时反馈缺失”带来的问题。“有时候老师让孩子给自己点个赞,点赞之后老师没有说把手放下,有的孩子可能就会一直举着,因为他们不确定老师是不是看见了自己的点赞。”

一位主讲老师同时面对数千甚至上万学生的课堂,有限的精力无暇回应每一位学生。是否能有这样一个功能,让学生的每一次参与都被感知,每一次互动都被回应?借助AI能力回应小学生在课堂上的互动行为,“手势识别”功能的需求被提出。

研发:上班时间“自拍”的程序员

作业帮智能技术实验室负责人王岩团队接到了这一需求。最初,在产研团队和主讲老师的头脑风暴环节,大概提了出15-20种手势,单手和双手都有。“产品要贴近应用,小朋友不理解的和老师上课用不到的,做了也没用。”王岩说。最后,根据老师课堂实用性,保留了点赞、比心、OK等常用手势。

但在功能落地过程中,难点也随之而来。小朋友比划的形式、角度等都会影响识别的准确率,这就需要前期尽可能多地收集样本素材,更准确地定义各个手势。

针对每个手势,技术都会内部先录制一版demo。因为要确定手势是否贴合小朋友的习惯,需要模拟孩子上课的视角。为此,技术老师编写了一个小程序。然后,一群程序员,聚在办公室里,打开手机前置摄像头,跟着自己编写的小程序,模仿小朋友做出各种比心、点赞的手势。

初版demo完成后,负责产品的聂靖骐开始在灰度测试中收集小朋友手势,总共发起4-5次收集。“由主讲老师在课中进行引导,让学生比出点赞、比心等手势。然后,根据各种手势的占比多少进行取舍。”最后,有近万名学生的2000多种手势被收录到系统中。

上线:小朋友互动满意度最高

2020年初,随着“小组直播间”的正式上线,手势识别的功能也被应用到课堂上。

在“小组直播间”中,孩子们获得了更多关注,听懂了就随手比个OK。他们也会向老师表达感谢,比如拇指和食指叠放,对着镜头比个心。

2020年暑期,在小组直播间功能升级调研中,手势识别成为小学生互动满意度最高的功能,有77.14%的小学生表示,非常满意,平均满意度达4.7分(满分5分)。

借助AI技术,作业帮让在线课堂活跃起来,变得更加有趣。对于接下来的规划,聂靖骐仍希望这项功能更好地应用到教学场景。“朝着这个方向,我们会继续丰富手势和提高识别准确率,为老师和学生带来更丰富的体验。”

作为中国用户规模最大的K12在线教育平台,作业帮旗下产品总日活用户突破5000万,月活突破1.7亿,累计服务学员超6500万。庞大的用户体量和丰富的在线教育应用场景,让人工智能这个“看起来很遥远”的技术,得以广泛应用,融入小朋友的日常学习中。

未来,作业帮将借助技术持续赋能教育,引领更加智慧的在线教育新趋势。

让每一次点赞都有回应——作业帮直播课“手势识别”带来的体验

声明: 本文系OFweek根据授权转载自其它媒体或授权刊载,目的在于信息传递,并不代表本站赞同其观点和对其真实性负责,如有新闻稿件和图片作品的内容、版权以及其它问题的,请联系我们。
侵权投诉

下载OFweek,一手掌握高科技全行业资讯

还不是OFweek会员,马上注册
打开app,查看更多精彩资讯 >
  • 长按识别二维码
  • 进入OFweek阅读全文
长按图片进行保存