2023年第六届中国虚拟现实大赛 (CCVR 2023)

216 / 2023-10-25 19:09:28

厚障壁：基于YOLOv7姿态估计的汉字书写交互游戏

本作品是一款基于YOLOv7的扩展模型进行实时人体姿态估计，通过网络摄像头获取人体的17个关键点信息，以在Unity Engine中操纵虚拟角色做出实时的动作响应进行交互的虚拟现实游戏，

游戏流程脱胎于经典游戏“墙来了”：玩家虚拟角色处于持续行进状态，行进途中会出现墙壁作为障碍物阻止玩家继续前进，此时玩家必须做出相应的反馈才可以继续进行游戏。而在我们的作品中，玩家则是需要通过在现实世界中书空以控制虚拟世界中的笔触，在规定时间内完成墙壁上汉字的正确书写，方可破除障壁，获得分数并继续前进。

在游戏流程中，我们为玩家提供了两种难度选择。

第一种为古代场景中对复杂的繁体字的书写，其特点是笔画多、笔顺难，因此玩家可以获得更高的分数，同时也可能无法在规定时间内完成书写。此时玩家可以选择通过做出特定姿势切换至第二种难度和场景。

在第二种难度下，玩家将置身于现代都市场景，汉字也变为书写更为容易的简体字，但相应的得分也将变低。同理，此时也可以通过做出特定的姿势切换回第一种难度和场景。

值得注意的是，在两种难度下的汉字书写过程中，我们特别规定了汉字的书写笔顺，即玩家必须按照正确的笔顺进行书写，否则将清空当前汉字的书写进度，重新开始书写。