申请/专利权人:杭州抽象派数字科技有限公司申请日:2023-12-14
发明/设计人:吴依妮;尤宇申公开(公告)日:2024-03-05
代理机构:安徽思尔六知识产权代理事务所(普通合伙)公开(公告)号:CN117649283A
代理人:闫啸主分类号:G06Q30/0601
地址:311121 浙江省杭州市余杭区仓前街道文一西路1286号海创科技中心4幢1304室分类号:G06Q30/0601;G06V40/10;G06V20/64;G06V10/40;G06V10/24
专利状态码:在审-实质审查的生效优先权:
法律状态:2024.03.22#实质审查的生效   2024.03.05#公开   
摘要:本发明涉及深度学习技术领域,公开了一种虚拟试衣系统和虚拟试衣方法,包括:采集使用者的正面全身可见光图像和正面全身红外线图像;对采集的正面全身可见光图像识别获得使用者的人体骨架图;从数据库中提取与使用者的人体骨架图最相似的历史人体骨架图;提取历史人体骨架图对应的三维模型和正面全身红外线图像,提取与该三维模型和使用者选择的衣服效果对应的贴图数据;在提取的三维模型上标记贴图的面边界;将提取的三维模型和全身红外线图像输入贴图校正模型;重新生成三维模型,根据新的三维模型的面边界来重新进行贴图来生成展示模型;本发明能够通过模型微调来获得真实的试衣效果。
主权项:1.一种虚拟试衣方法,其特征在于,包括以下步骤:/n步骤101,采集使用者的正面全身可见光图像和正面全身红外线图像;/n步骤102,对采集的正面全身可见光图像识别获得使用者的人体骨架图;/n步骤103,从数据库中提取与使用者的人体骨架图最相似的历史人体骨架图;/n步骤104,提取历史人体骨架图对应的三维模型和正面全身红外线图像,提取与该三维模型和使用者选择的衣服效果对应的贴图数据;在提取的三维模型上标记贴图的面边界;/n步骤105,将提取的三维模型和全身红外线图像输入贴图校正模型,贴图校正模型包括卷积层、第一特征生成层、特征累加层、生成层和参数层,其中卷积层输入使用者的正面全身红外线图像和历史人体骨架图对应的正面全身红外线图像,然后输出图像特征,图像特征输入第一特征生成层,输出第一特征,第一特征与历史人体骨架图对应的三维模型的点云的点特征拼接生成第二特征;/n第二特征和表示三维模型的点云的点的连接关系的点邻接矩阵输入生成层,生成层输出对应于每个点的第三特征,第三特征输入参数层,输出第四特征向量,第四特征向量的三个分量分别表示点的新的三维坐标;/n步骤106,根据贴图校正模型输出的点的新的三维坐标来重新生成三维模型,根据新的三维模型的面边界来重新进行贴图来生成展示模型。/n