上海客赛作为乐高集团的技术服务商,通过将自有技术与百度EasyDL相结合实现了webAR程序的开发。仅在短短五天内,成功为乐高集团打造出优质的“夏日时空大探险”AR互动程序,使小朋友们在积木拼接中获得更多乐趣,激发对未知领域的好奇心,目前已有3600多名用户体验了这一功能。
核心诉求
为了丰富小朋友们的暑期生活,激发其潜在的好奇心和探索力,乐高集团想要以AR的形式为平日里简单的儿童积木拼搭增添更多的趣味,让孩子们能学习到更多的知识为初衷,计划打造出“夏日时空大探险”的AR主题活动。
上海客赛公司作为乐高集团的技术服务商而积极配合本次活动,然而其目前的AR识别引擎基本上只能使用在APP上,web端如需实现AR效果却没有现成可用的识别库。 此外,如果上海客赛想要独立制作图形识别又需要花费大量的时间精力。
面对重重难题,如何寻求一种简单与定制兼备的图像识别技术,成为上海客赛能否顺利研发出“夏日时空大探险”AR活动小程序的成败要素。
解决方案
当上海客赛选择和百度EasyDL定制化训练和服务平台合作后,仅在短短五天内,就使用178张图片完成了两种特定积木及三张活动海报的识别模型,准确率达85%以上,成功为乐高集团打造出优质的“夏日时空大探险”AR小程序。具体实现过程如下:
上海客赛先行将乐高游戏的海报、积木等图像进行整理,并分类打包上传到EasyDL平台,选择图像分类模型进行训练,几十分钟后,完成训练,得到能够识别乐高游戏海报、积木的模型。然后从EasyDL中查看模型报告,并在模型校验模块中,拖入几张非训练图像进行模型效果校验,确认模型效果后,即可发布模型上线,得到API接口。最后将API能力集成到APP中,实现乐高“夏日时空大探险”定制模型的自训练和识别能力。
“夏日时空大探险”的操作玩法如下:
第一步:小朋友按图纸用乐高积木拼搭鲸鱼或火箭,并用手机扫码打开小程序,并选择探险主题;
第二步:用手机拍摄拼搭好的积木,拍摄的照片实时被提交至服务器进行识别;
第三步:上海客赛调用EasyDL模型接口进行智能识别,识别后小程序展示3D交互内容;
第四步:体验结束后,小朋友可领取小探险家电子证书留做纪念。