技术摘要:
本发明公开了一种基于AR技术的物品3D模型展示方法和系统,能够根据不同的物品匹配不同的3D空间模板,更加多样化,个性化,解决了现有技术中虚拟场景内容单一、固定的问题。而且,用户除了可以通过观看3D动画模型来单向获取视觉体验之外,还可以主动对3D模型进行操作, 全部
背景技术:
增强现实(Augmented Reality,简称AR),是一种将真实世界信息和虚拟世界信息 “无缝”集成的技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息, 通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感 知,从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面 或空间同时存在。AR受到的关注日益广泛,并且已经发挥了重要作用,显示出了巨大的潜 力。 目前,已有的AR技术往往是通过识别图像信息显示预设的场景,其场景是提前设 定好的,不能根据不同的物品进行个性化显示,比较单一、固定,无法由用户自定义,缺乏个 性。 因此,如何提供一种虚拟场景丰富多样、更加个性化的3D模型展示方法是本领域 技术人员亟需解决的问题。
技术实现要素:
有鉴于此,本发明提供了一种基于AR技术的物品3D模型展示方法和系统,解决了 现有技术中虚拟场景内容单一、固定,无法由用户自定义的问题,实现了用户自定义虚拟场 景,虚拟场景丰富多样,更加个性化。 为了实现上述目的,本发明采用如下技术方案: 一种基于AR技术的物品3D模型展示方法,包括: S1、对物品进行拍摄,获取物品图像; S2、基于物品图像从候选模型库中调用匹配的3D空间模板; S3、基于物品图像和所述3D空间模板生成3D模型; S4、将所述3D模型加载到交互界面进行展示; S4、采集手势动作,并根据手势动作对所述3D模型进行操作。 优选的,步骤S2具体包括: 对物品图像进行预处理,并输入到训练好的深度学习网络中进行检测、识别和分 类,获取背景与目标信息; 基于背景与目标信息以及特征提取信息从候选模型库中调用匹配的3D空间模板; 其中,所述特征提取信息与各个3D空间模板对应存储。 优选的,所述候选模型库的建立方法包括: 利用爬虫技术采集3D空间模板; 基于深度学习网络对3D空间模板提取特征信息; 4 CN 111598996 A 说 明 书 2/5 页 对应存储3D空间模板和特征信息,形成候选模型库。 优选的,步骤S4具体包括: 采集手势动作,并基于手势动作对3D模型进行旋转、放大、缩小、锁定和复位的操 作。 优选的,还包括:采集音频素材,并在展示所述3D模型时,同步播放所述音频素材。 一种基于AR技术的物品3D模型展示系统,包括: 拍摄模块,用于对物品进行拍摄,获取物品图像; 调用模块,用于基于物品图像从候选模型库中调用匹配的3D空间模板; 生成模块,用于基于物品图像和所述3D空间模板生成3D模型; 展示模块,用于将所述3D模型加载到交互界面进行展示; 交互模块,用于采集手势动作,并根据手势动作对所述3D模型进行操作。 优选的,所述调用模块包括:分析单元和调用单元; 所述分析单元用于对物品图像进行预处理,并输入到训练好的深度学习网络中进 行检测、识别和分类,获取背景与目标信息; 所述调动单元用于基于背景与目标信息以及特征提取信息从候选模型库中调用 匹配的3D空间模板;其中,所述特征提取信息与各个3D空间模板对应存储。 优选的,还包括:爬虫模块、特征提取模块和存储模块; 所述爬虫模块,用于利用爬虫技术采集3D空间模板; 所述特征提取模块,用于基于深度学习网络对3D空间模板提取特征信息; 所述存储模块用于对应存储3D空间模板和特征信息,形成候选模型库。 优选的,所述展示模块具体用于采集手势动作,并基于手势动作对3D模型进行旋 转、放大、缩小、锁定和复位的操作。 优选的,还包括:音频模块; 所述音频模块用于采集音频素材,并在展示所述3D模型时,同步播放所述音频素 材。 经由上述的技术方案可知,与现有技术相比,本发明公开提供了一种基于AR技术 的物品3D模型展示方法和系统,能够根据不同的物品匹配不同的3D空间模板,更加多样化, 个性化,解决了现有技术中虚拟场景内容单一、固定的问题。 而且,用户除了可以通过观看3D动画模型来单向获取视觉体验之外,还可以主动 对3D模型进行操作,提高了交互体验。 此外,在播放物品3D模型的同时,还可以同步播放音频,用户体验更好。 附图说明 为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现 有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本 发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据 提供的附图获得其他的附图。 图1为本发明提供的一种基于AR技术的物品3D模型展示方法流程图; 图2为本发明提供的基于物品图像从候选模型库中调用匹配的3D空间模板的流程 5 CN 111598996 A 说 明 书 3/5 页 图; 图3为本发明提供的建立候选模型库的流程图; 图4为本发明提供的一种基于AR技术的物品3D模型展示系统的示意图一; 图5为本发明提供的调用模块的示意图; 图6为本发明提供的一种基于AR技术的物品3D模型展示系统的示意图二。