801 / 2023-10-27 14:45:26

主动式AI驱动虚拟人助手

项目介绍

近年来，随着社会经济飞速发展，人们的生活节奏不断加快，我们发现有这样一群人，他们或是独自生活常感孤独，或是有苦难言自我承受。根据团队调查问卷结果和相关研究报告，我们发现该群体大多数人会渴望有对象可以陪伴或倾诉，但因为各种条件限制无法满足这样的精神需求。同时，智能家居以其智能化、便捷化的家居体验逐渐受到消费者的青睐，成为家居市场的新宠儿。智能家居作为物联网应用落地较为成熟的领域，产品种类不断丰富，市场规模迅速扩张。现在市场上主要的智能家居系统，如Alexa，Google Assistant，小爱同学，天猫精灵等等，给消费者提供的是与机器语音交互的体验和端到端的远程控制能力，以及程序化特定场景下设备运行要求的能力，缺少可视化主动交互的功能。

 在个人孤独感增加需要陪伴、虚拟数字人技术成熟发展前景良好、全屋智能家居迭代需求迫切的时代背景下，心星球计划——主动式交互数字虚拟人项目组致力于结合虚拟现实技术、人工智能技术、大数据分析技术等新型互联网技术，打造软硬件一体化可交互数字虚拟人，结合垂直领域机器学习模型，提高交互流畅性，接入Generative Pre-trained Transformer和人工反馈的强化学习机制，实现“人”与“人”的主动式交互，解决当前人们的精神空缺问题，构建良好的人机交互关系。

现阶段，市场上多数数字虚拟人为视频生成式或图片生成式结果，可变参性差，精细度低，机械生硬感强，代入感差，无法实现实时交互，所以多数应用在直播带货、系统导览等强可预设环境中。

此外，现有的交互式数字虚拟人只有被动式应用，且多为语音或文字驱动的input，往往采用单软件数字虚拟人，缺少高契合度的硬件支持，导致现有数字虚拟人多为模型嵌套应用，不能支持系统高度定制化。

心星球计划团队深度学习Unreal Engine底层逻辑，创新了独有的数字虚拟人定制体系；借助企业合作优势和学院实验室硬件支持，集成了软硬件一体化数字虚拟人系统，且支持硬件设备定制；结合现有的动作捕捉和面部捕捉技术，凭借3w+TB的硬件算力建立自己的模型库接入数字虚拟人系统，实现主动式交互功能；并利用Metahuman生成虚拟人形象，致力于打造主动式智能交互数字虚拟人，更好地满足“人”“人”交互需求。

针对应用，我们不局限于主动式数字虚拟人的开发，将数字虚拟人的功能结合到智能家居设备中，实现虚拟现实智慧助手，实现高集成化的智能环境打造。

该项目处于种子阶段，致力于主动式数字虚拟人的开发，和软硬件集成化测试，确保出错率在可接受范围内，并完成核心技术加密，降低技术风险，增强技术优势。在前期开发过程中，降低开发成本，并在推广合作过程中进行广销，批量生产集成化产品进行出售获利，降低资金风险。