基于AR技术的说明书展示方法、装置及设备

摘要:

本发明实施例公开了基于AR技术的说明书展示方法、装置及设备。由客户端执行的方法包括:提取目标说明书的特征信息;将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。本发明实施例提供的技术方案,说明书的展示方式不仅包含文字和图片,还包含说明书上的虚拟使用说明动画,提高了说明书的可读性以及趣味性,便于用户直观便捷的理解说明书。

申请号: CN201610961340.X 专利名称: 基于AR技术的说明书展示方法、装置及设备 申请(专利权)人: [百度在线网络技术(北京)有限公司] 发明人: [张钰, 李军, 王道龙, 刘晓伟, 袁艺, 易敏文, 燕宇飞, 吕文玉] 其他信息:
1.基于AR技术的说明书展示方法,其特征在于,包括: 通过摄像头扫描目标说明书;其中,所述扫描包括对所述目标说明书的完整扫描和扫描标识图案; 依据扫描结果,提取所述目标说明书的特征信息; 将提取的特征信息上报至服务端,使所述服务端依据所述特征信息,与预设的多个虚拟使用说明动画进行匹配,并将匹配成功的虚拟使用说明动画确定为所述目标说明书对应的虚拟使用说明动画; 从所述服务端中下载所述虚拟使用说明动画,并通过AR技术确定目标说明书的位置及角度,在所述目标说明书上展示所述虚拟使用说明动画。 2.根据权利要求1所述的方法,其特征在于,所述特征信息包含二维码、商标、品牌名称和产品型号中的至少一种信息。 3.根据权利要求1所述的方法,其特征在于,通过AR技术在所述目标说明书上展示所述虚拟使用说明动画之后,还包括: 依据用户操作,调整使用所述虚拟使用说明动画的展示内容和/或展示进度。 4.根据权利要求1所述的方法,其特征在于,所述目标说明书为药品的服用说明书或物品的使用说明书。 5.基于AR技术的说明书展示方法,其特征在于,包括: 获取客户端上报的目标说明书的特征信息;所述特征信息是通过摄像头扫描目标说明书,依据扫描结果提取得到;其中,所述扫描包括对所述目标说明书的完整扫描和扫描标识图案; 将所述特征信息与预设的多个虚拟使用说明动画进行匹配,并将匹配成功的虚拟使用说明书动画确定为目标说明书对应的虚拟使用说明动画; 将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR 技术确定目标说明书的位置及角度,在所述目标说明书上展示所述虚拟使用说明动画。 6.基于AR技术的说明书展示装置,其特征在于,包括: 特征提取模块,包括说明书扫描单元,用于通过摄像头扫描目标说明书;其中,所述扫描包括对所述目标说明书的完整扫描和扫描标识图案;特征提取单元,用于依据扫描结果,提取所述目标说明书的特征信息; 特征上报模块,用于将提取的特征信息上报至服务端,使所述服务端依据所述特征信息,与预设的多个虚拟使用说明动画进行匹配,并将匹配成功的虚拟使用说明动画确定为所述目标说明书对应的虚拟使用说明动画; AR展示模块,用于从所述服务端中下载所述虚拟使用说明动画,并通过AR技术确定目标说明书的位置及角度,在所述目标说明书上展示所述虚拟使用说明动画。 7.根据权利要求6所述的装置,其特征在于,所述特征信息包含二维码、商标、品牌名称和产品型号中的至少一种信息。 8.根据权利要求6所述的装置,其特征在于,还包括: 虚拟动画调整模块,用于在通过AR技术在所述目标说明书上展示所述虚拟使用说明动画之后,依据用户操作,调整使用所述虚拟使用说明动画的展示内容和/或展示进度。 9.根据权利要求6所述的装置,其特征在于,所述目标说明书为药品的服用说明书或物品的使用说明书。 10.基于AR技术的说明书展示装置,其特征在于,包括: 特征获取模块,用于获取客户端上报的目标说明书的特征信息;所述特征信息是通过摄像头扫描目标说明书,依据扫描结果提取得到;其中,所述扫描包括对所述目标说明书的完整扫描和扫描标识图案; 虚拟动画确定模块,用于将所述特征信息与预设的多个虚拟使用说明动画进行匹配,并将匹配成功的虚拟使用说明书动画确定为目标说明书对应的虚拟使用说明动画; 虚拟动画下发模块,用于将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术确定目标说明书的位置及角度,在所述目标说明书上展示所述虚拟使用说明动画。 11.一种设备,其特征在于,所述设备包括: 一个或多个处理器; 存储装置,用于存储一个或多个程序, 当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-4中任一所述的方法。 12.一种设备,其特征在于,所述设备包括: 一个或多个处理器; 存储装置,用于存储一个或多个程序, 当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求5所述的方法。

基于AR技术的说明书展示方法、装置及设备

技术领域

本发明涉及计算机技术领域,尤其涉及基于AR技术的说明书展示方法、装置及设备。

背景技术

说明书是人们日常生活中非常常见的东西,是人们接触一些不熟悉物品的指南和入口。但是很多情况下,说明书阅读起来不是那么容易理解,所以很多说明书用文字之外还有图片,用以辅助理解。

但是,目前说明书具有如下缺点:1)可读性差,由于需要人工解读,文本和图片如果不生动,不容易理解;2)趣味性差,文本材料过于枯燥。

发明内容

有鉴于此,本发明实施例提供基于AR技术的说明书展示方法、装置及设备,以提高说明书的可读性以及趣味性。

第一方面,本发明实施例提供了基于AR技术的说明书展示方法,包括:

提取目标说明书的特征信息;

将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

第二方面,本发明实施例提供了基于AR技术的说明书展示方法,包括:

获取客户端上报的目标说明书的特征信息;

依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

第三方面,本发明实施例提供了基于AR技术的说明书展示装置,包括:

特征提取模块,用于提取目标说明书的特征信息;

特征上报模块,用于将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

AR展示模块,用于从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

第四方面,本发明实施例提供了基于AR技术的说明书展示装置,包括:

特征获取模块,用于获取客户端上报的目标说明书的特征信息;

虚拟动画确定模块,用于依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

虚拟动画下发模块,用于将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

第五方面,本发明实施例还提供了一种设备,包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序,

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现时,执行如下操作:

提取目标说明书的特征信息;

将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

第六方面,本发明实施例还提供了一种设备,包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序,

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现时,执行如下操作:

获取客户端上报的目标说明书的特征信息;

依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

本发明实施例提供的技术方案,通过客户端提取目标说明书的特征信息,将提取的特征信息上报至服务端,服务端依据特征信息确定目标说明书对应的虚拟使用说明动画,客户端从服务端下载虚拟使用说明动画,并通过AR技术在目标说明书上展示虚拟使用说明动画。因而本发明实施例中说明书的展示方式不仅包含文字和图片,还包含说明书上的虚拟使用说明动画,提高了说明书的可读性以及趣味性,便于用户直观便捷的理解说明书。

附图说明

图1是本发明实施例一提供的一种基于AR技术的说明书展示方法的流程图;

图2是本发明实施例二提供的一种基于AR技术的说明书展示方法的流程图;

图3是本发明实施例二提供的一种基于AR技术的说明书展示方法的示意图;

图4是本发明实施例三提供的一种基于AR技术的说明书展示装置的结构图;

图5是本发明实施例四提供的一种基于AR技术的说明书展示装置的结构图;

图6是本发明实施例五提供的一种设备的结构图;

图7是本发明实施例六提供的一种设备的结构图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。

实施例一

图1是本发明实施例一提供的一种基于AR技术的说明书展示方法的流程图。本实施例的方法可以由基于AR技术的说明书展示装置来执行,该装置可通过硬件和/或软件的方式实现,且可以配置在客户端中,即本实施例提供的方法可以由客户端执行。本实施例的方法一般可适用于展示产品说明书的情形。参考图1,本实施例提供的基于AR技术的说明书展示方法具体可以包括如下:

S11、提取目标说明书的特征信息。

在本实施例中,目标说明书是需要展示的任一产品的说明书,如是用户当前阅读的说明书,示例性的,目标说明书可以为药品的服用说明书或物品的使用说明书。特征信息指的是目标说明书的标签,用于区分目标说明书与其他说明书,示例性的,特征信息可以包含二维码、商标、品牌名称和产品型号中的至少一种信息。

具体的,在客户端监测到说明书展示事件时,获取目标说明书,并提取目标说明书的特征信息。其中,可以在检测到用户点击客户端中预设的说明书展示按钮时,产生说明书展示事件。

S12、将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画。

在本实施例中,虚拟使用说明动画指的是用于展示产品使用说明的虚拟动画,以产品是药品为例,虚拟使用说明动画可以是展示药品服用剂量和药品服用时间的虚拟动画;以产品是积木类玩具为例,虚拟使用说明动画可以是展示积木的组装过程的虚拟动画。

具体的,客户端将提取的特征信息上报至服务端,服务端接收到客户端上报的特征信息后,将特征信息与服务端中预设的虚拟使用说明动画进行匹配,并将匹配成功的虚拟使用说明书动画确定为目标说明书对应的虚拟使用动画。

S13、从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

其中,增强现实(Augmented Reality,AR)是一种通过实时地计算摄影机影像的位置及角度并加上相应虚拟图像,将真实世界信息和虚拟世界信息“无缝”集成的技术。

具体的,服务端确定目标说明书对应的虚拟使用说明动画后,向客户端下发虚拟使用说明动画的下载路径,客户端依据接收的下载路径从服务端中下载虚拟使用说明动画,通过AR技术确定目标说明书的位置及角度,并在目标说明书上展示下载的虚拟使用说明动画。

本实施例提供的技术方案,通过客户端提取目标说明书的特征信息,将提取的特征信息上报至服务端,服务端依据特征信息确定目标说明书对应的虚拟使用说明动画,客户端从服务端下载虚拟使用说明动画,并通过AR技术在目标说明书上展示虚拟使用说明动画。因而本发明实施例中说明书的展示方式不仅包含文字和图片,还包含说明书上的虚拟使用说明动画,提高了说明书的可读性以及趣味性,便于用户直观便捷的理解说明书。

示例性的,所述提取目标说明书的特征信息,可以包括:通过摄像头扫描所述目标说明书;依据扫描结果,提取所述目标说明书的特征信息。

具体的,在客户端监测到说明书展示事件时,控制启动客户端所属用户终端中摄像头,并通过摄像头扫描目标说明书,对扫描结果作灰度化处理,提取目标说明书的特征信息。在扫描过程中,可以完整的扫描目标说明书的内容,也可以仅扫描目标说明书中的二维码或标识图案。其中,可以在检测到用户点击客户端中的说明书展示按钮时,产生说明书展示事件。

示例性的,通过AR技术在所述目标说明书上展示所述虚拟使用说明动画之后,还包括:依据用户操作,调整使用所述虚拟使用说明动画的展示内容和/或展示进度。

其中,目标说明书对应的虚拟使用说明动画可以不止一个,例如以目标说明书是电饭锅的使用说明书为例,对应的虚拟使用说明动画可以包括用前准备、蒸煮、冷饭加热、预约或煲汤等使用过程的虚拟使用说明动画。具体的,可以依据用户操作选择展示的虚拟使用说明动画,从而调整使用所述虚拟使用说明动画的展示内容,还可以依据用户操作调整虚拟使用说明动画的展示进度。仍以目标说明书是电饭锅的使用说明书为例,用户通过用前准备过程的虚拟使用说明动画完成准备工作后,可以通过点击下一步,观看蒸煮过程的虚拟使用说明动画。即,本实施例还能够依据用户需求调整使用所述虚拟使用说明动画的展示内容和/或展示进度。

实施例二

图2是本发明实施例二提供的一种基于AR技术的说明书展示方法的流程图。本实施例的方法可以由基于AR技术的说明书展示装置来执行,该装置可通过硬件和/或软件的方式实现,且可以配置在服务端中,即本实施例提供的方法可以由服务端执行。本实施例的方法一般可适用于展示产品说明书的情形。参考图2,本实施例提供的基于AR技术的说明书展示方法具体可以包括如下:

S21、获取客户端上报的目标说明书的特征信息。

在本实施例中,目标说明书是需要展示的任一产品的说明书,示例性的,目标说明书可以为药品的服用说明书或物品的使用说明书。特征信息指的是目标说明书的标签,用于区分目标说明书与其他说明书,示例性的,特征信息可以包含二维码、商标、品牌名称和产品型号中的至少一种信息。

具体的,客户端提取目标说明书的特征信息,并将特征信息上报服务端,服务端获取客户端上报的特征信息。

S22、依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画。

示例性的,服务端中预设有多个虚拟使用说明动画,服务端接收到客户端上报的特征信息后,将特征信息与服务端中预设的虚拟使用说明动画进行匹配,并将匹配成功的虚拟使用说明书动画确定为目标说明书对应的虚拟使用动画。

示例性的,S22可以包括:将所述特征信息与特征库中预置的候选特征信息进行匹配;依据匹配结果,确定目标产品;依据所述目标产品确定所述目标说明书对应的虚拟使用说明动画。

其中,候选特征信息可以二维码、商标、品牌名称和产品型号中的至少一种候选信息。具体的,将特征信息与候选特征信息进行匹配,得到匹配成功的候选特征信息,随后,可以依据预先创建的候选特征信息与产品之间的映射关系,确定目标产品,并且可以依据预先创建的产品与虚拟使用说明动画之间的映射关系,确定目标产品对应的虚拟使用说明动画,即确定目标说明书对应的虚拟使用说明动画。

S23、将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

具体的,服务端向客户端下发虚拟使用说明动画的下载路径,客户端依据接收的下载路径从服务端中下载虚拟使用说明动画,通过AR技术确定目标说明书的位置及角度,并在目标说明书上展示下载的虚拟使用说明动画。

参考图3,综上基于AR技术的说明书展示方法包括:客户端通过用户终端中摄像头扫描目标说明书,并提取目标说明书的特征信息,将特征信息上报服务端的特征库,服务端将所述特征信息与特征库中预置的候选特征信息进行匹配,识别目标产品,搜索目标产品的虚拟使用说明动画,用户终端下载并展示虚拟使用说明动画。其中,用户终端可以是诸如智能手机或平板电脑之类具有扫描功能的电子产品。

本实施例提供的技术方案,服务端依据客户端上报的特征信息确定目标说明书对应的虚拟使用说明动画,客户端从服务端下载虚拟使用说明动画,并通过AR技术在目标说明书上展示虚拟使用说明动画,即通过AR技术在说明书上展示虚拟使用说明动画,可以最大发挥说明书的作用,目标受众非常大,使用场景也会非常多。对用户来讲,新鲜的物品对他们不再是难以理解,也不需要向别人请教怎么用,直接可以通过虚拟动画,直观的了解产品。

实施例三

图4是本发明实施例三提供的一种基于AR技术的说明书展示装置的结构图。该装置一般可适用于展示产品说明书的情形,且配置在客户端中。参见图4,本实施例提供的基于AR技术的说明书展示装置的具体结构如下:

特征提取模块31,用于提取目标说明书的特征信息;

特征上报模块32,用于将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

AR展示模块33,用于从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

示例性的,所述特征提取模块31可以包括:

说明书扫描单元,用于通过摄像头扫描所述目标说明书;

特征提取单元,用于依据扫描结果,提取所述目标说明书的特征信息。

示例性的,所述特征信息包含二维码、商标、品牌名称和产品型号中的至少一种信息。

示例性的,上述基于AR技术的说明书展示装置还可以包括:

虚拟动画调整模块,用于在通过AR技术在所述目标说明书上展示所述虚拟使用说明动画之后,依据用户操作,调整使用所述虚拟使用说明动画的展示内容和/或展示进度。

示例性的,所述目标说明书为药品的服用说明书或物品的使用说明书。

本实施例提供的基于AR技术的说明书展示装置,与本发明任意实施例所提供的由客户端执行的基于AR技术的说明书展示方法属于同一发明构思,可执行本发明任意实施例所提供的由客户端执行的基于AR技术的说明书展示方法,具备由客户端执行的基于AR技术的说明书展示相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明任意实施例提供的由客户端执行的基于AR技术的说明书展示方法。

实施例四

图5是本发明实施例四提供的一种基于AR技术的说明书展示装置的结构图。该装置一般可适用于展示产品说明书的情形,且配置在服务端中。参见图5,本实施例提供的基于AR技术的说明书展示装置的具体结构如下:

特征获取模块41,用于获取客户端上报的目标说明书的特征信息;

虚拟动画确定模块42,用于依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

虚拟动画下发模块43,用于将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

示例性的,所述虚拟动画确定模块42可以包括:

特征匹配单元,用于将所述特征信息与特征库中预置的候选特征信息进行匹配;

产品确定单元,用于依据匹配结果,确定目标产品;

虚拟动画确定单元,用于依据所述目标产品确定所述目标说明书对应的虚拟使用说明动画。

本实施例提供的基于AR技术的说明书展示装置,与本发明任意实施例所提供的由服务端执行的基于AR技术的说明书展示方法属于同一发明构思,可执行本发明任意实施例所提供的由服务端执行的基于AR技术的说明书展示方法,具备由服务端执行的基于AR技术的说明书展示相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明任意实施例提供的由服务端执行的基于AR技术的说明书展示方法。

实施例五

如图6所示,为本申请实施例五提供的设备的硬件结构示意图,如图6所示,该电子设备包括:

一个或多个处理器510,图6中以一个处理器510为例;

存储器520;

所述电子设备还可以包括:输入装置530和输出装置540。

所述电子设备中的处理器510、存储器520、输入装置530和输出装置540可以通过总线或者其他方式连接,图6中以通过总线连接为例。

存储器520作为一种非暂态计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本申请实施例中的数据存储方法对应的程序指令/模块(例如,附图4所示的特征提取模块31、特征上报模块32和AR展示模块33)。处理器510通过运行存储在存储器520中的软件程序、指令以及模块,从而执行服务端的各种功能应用以及数据处理,即实现上述方法实施例的由客户端执行的基于AR技术的说明书展示方法。

存储器520可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器520可以包括高速随机存取存储器,还可以包括非暂态性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态性固态存储器件。在一些实施例中,存储器520可选包括相对于处理器510远程设置的存储器,这些远程存储器可以通过网络连接至终端设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入装置530可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置540可包括显示屏等显示设备。

也即:上述电子设备包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序,

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现时,进行如下操作:

提取目标说明书的特征信息;

将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

进一步的,所述提取目标说明书的特征信息,包括:

通过摄像头扫描所述目标说明书;

依据扫描结果,提取所述目标说明书的特征信息。

进一步的,所述特征信息包含二维码、商标、品牌名称和产品型号中的至少一种信息。

进一步的,所述通过AR技术在所述目标说明书上展示所述虚拟使用说明动画之后,还包括:

依据用户操作,调整使用所述虚拟使用说明动画的展示内容和/或展示进度。

进一步的,所述目标说明书为药品的服用说明书或物品的使用说明书。

实施例六

如图7所示,为本申请实施例六提供的设备的硬件结构示意图,如图7所示,该电子设备包括:

一个或多个处理器610,图7中以一个处理器610为例;

存储器620;

所述电子设备还可以包括:输入装置630和输出装置640。

所述电子设备中的处理器610、存储器620、输入装置630和输出装置640可以通过总线或者其他方式连接,图7中以通过总线连接为例。

存储器620作为一种非暂态计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本申请实施例中的数据存储方法对应的程序指令/模块(例如,附图5所示的特征获取模块41、虚拟动画确定模块42和虚拟动画下发模块43)。处理器610通过运行存储在存储器620中的软件程序、指令以及模块,从而执行服务端的各种功能应用以及数据处理,即实现上述方法实施例的由服务端执行的基于AR技术的说明书展示方法。

存储器620可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器620可以包括高速随机存取存储器,还可以包括非暂态性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态性固态存储器件。在一些实施例中,存储器620可选包括相对于处理器610远程设置的存储器,这些远程存储器可以通过网络连接至终端设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入装置630可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置640可包括显示屏等显示设备。

也即:上述电子设备包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序,

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现时,进行如下操作:

获取客户端上报的目标说明书的特征信息;

依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

进一步的,所述依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画,包括:

将所述特征信息与特征库中预置的候选特征信息进行匹配;

依据匹配结果,确定目标产品;

依据所述目标产品确定所述目标说明书对应的虚拟使用说明动画。

注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。

实施例一

图1是本发明实施例一提供的一种基于AR技术的说明书展示方法的流程图。本实施例的方法可以由基于AR技术的说明书展示装置来执行,该装置可通过硬件和/或软件的方式实现,且可以配置在客户端中,即本实施例提供的方法可以由客户端执行。本实施例的方法一般可适用于展示产品说明书的情形。参考图1,本实施例提供的基于AR技术的说明书展示方法具体可以包括如下:

S11、提取目标说明书的特征信息。

在本实施例中,目标说明书是需要展示的任一产品的说明书,如是用户当前阅读的说明书,示例性的,目标说明书可以为药品的服用说明书或物品的使用说明书。特征信息指的是目标说明书的标签,用于区分目标说明书与其他说明书,示例性的,特征信息可以包含二维码、商标、品牌名称和产品型号中的至少一种信息。

具体的,在客户端监测到说明书展示事件时,获取目标说明书,并提取目标说明书的特征信息。其中,可以在检测到用户点击客户端中预设的说明书展示按钮时,产生说明书展示事件。

S12、将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画。

在本实施例中,虚拟使用说明动画指的是用于展示产品使用说明的虚拟动画,以产品是药品为例,虚拟使用说明动画可以是展示药品服用剂量和药品服用时间的虚拟动画;以产品是积木类玩具为例,虚拟使用说明动画可以是展示积木的组装过程的虚拟动画。

具体的,客户端将提取的特征信息上报至服务端,服务端接收到客户端上报的特征信息后,将特征信息与服务端中预设的虚拟使用说明动画进行匹配,并将匹配成功的虚拟使用说明书动画确定为目标说明书对应的虚拟使用动画。

S13、从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

其中,增强现实(Augmented Reality,AR)是一种通过实时地计算摄影机影像的位置及角度并加上相应虚拟图像,将真实世界信息和虚拟世界信息“无缝”集成的技术。

具体的,服务端确定目标说明书对应的虚拟使用说明动画后,向客户端下发虚拟使用说明动画的下载路径,客户端依据接收的下载路径从服务端中下载虚拟使用说明动画,通过AR技术确定目标说明书的位置及角度,并在目标说明书上展示下载的虚拟使用说明动画。

本实施例提供的技术方案,通过客户端提取目标说明书的特征信息,将提取的特征信息上报至服务端,服务端依据特征信息确定目标说明书对应的虚拟使用说明动画,客户端从服务端下载虚拟使用说明动画,并通过AR技术在目标说明书上展示虚拟使用说明动画。因而本发明实施例中说明书的展示方式不仅包含文字和图片,还包含说明书上的虚拟使用说明动画,提高了说明书的可读性以及趣味性,便于用户直观便捷的理解说明书。

示例性的,所述提取目标说明书的特征信息,可以包括:通过摄像头扫描所述目标说明书;依据扫描结果,提取所述目标说明书的特征信息。

具体的,在客户端监测到说明书展示事件时,控制启动客户端所属用户终端中摄像头,并通过摄像头扫描目标说明书,对扫描结果作灰度化处理,提取目标说明书的特征信息。在扫描过程中,可以完整的扫描目标说明书的内容,也可以仅扫描目标说明书中的二维码或标识图案。其中,可以在检测到用户点击客户端中的说明书展示按钮时,产生说明书展示事件。

示例性的,通过AR技术在所述目标说明书上展示所述虚拟使用说明动画之后,还包括:依据用户操作,调整使用所述虚拟使用说明动画的展示内容和/或展示进度。

其中,目标说明书对应的虚拟使用说明动画可以不止一个,例如以目标说明书是电饭锅的使用说明书为例,对应的虚拟使用说明动画可以包括用前准备、蒸煮、冷饭加热、预约或煲汤等使用过程的虚拟使用说明动画。具体的,可以依据用户操作选择展示的虚拟使用说明动画,从而调整使用所述虚拟使用说明动画的展示内容,还可以依据用户操作调整虚拟使用说明动画的展示进度。仍以目标说明书是电饭锅的使用说明书为例,用户通过用前准备过程的虚拟使用说明动画完成准备工作后,可以通过点击下一步,观看蒸煮过程的虚拟使用说明动画。即,本实施例还能够依据用户需求调整使用所述虚拟使用说明动画的展示内容和/或展示进度。

实施例二

图2是本发明实施例二提供的一种基于AR技术的说明书展示方法的流程图。本实施例的方法可以由基于AR技术的说明书展示装置来执行,该装置可通过硬件和/或软件的方式实现,且可以配置在服务端中,即本实施例提供的方法可以由服务端执行。本实施例的方法一般可适用于展示产品说明书的情形。参考图2,本实施例提供的基于AR技术的说明书展示方法具体可以包括如下:

S21、获取客户端上报的目标说明书的特征信息。

在本实施例中,目标说明书是需要展示的任一产品的说明书,示例性的,目标说明书可以为药品的服用说明书或物品的使用说明书。特征信息指的是目标说明书的标签,用于区分目标说明书与其他说明书,示例性的,特征信息可以包含二维码、商标、品牌名称和产品型号中的至少一种信息。

具体的,客户端提取目标说明书的特征信息,并将特征信息上报服务端,服务端获取客户端上报的特征信息。

S22、依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画。

示例性的,服务端中预设有多个虚拟使用说明动画,服务端接收到客户端上报的特征信息后,将特征信息与服务端中预设的虚拟使用说明动画进行匹配,并将匹配成功的虚拟使用说明书动画确定为目标说明书对应的虚拟使用动画。

示例性的,S22可以包括:将所述特征信息与特征库中预置的候选特征信息进行匹配;依据匹配结果,确定目标产品;依据所述目标产品确定所述目标说明书对应的虚拟使用说明动画。

其中,候选特征信息可以二维码、商标、品牌名称和产品型号中的至少一种候选信息。具体的,将特征信息与候选特征信息进行匹配,得到匹配成功的候选特征信息,随后,可以依据预先创建的候选特征信息与产品之间的映射关系,确定目标产品,并且可以依据预先创建的产品与虚拟使用说明动画之间的映射关系,确定目标产品对应的虚拟使用说明动画,即确定目标说明书对应的虚拟使用说明动画。

S23、将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

具体的,服务端向客户端下发虚拟使用说明动画的下载路径,客户端依据接收的下载路径从服务端中下载虚拟使用说明动画,通过AR技术确定目标说明书的位置及角度,并在目标说明书上展示下载的虚拟使用说明动画。

参考图3,综上基于AR技术的说明书展示方法包括:客户端通过用户终端中摄像头扫描目标说明书,并提取目标说明书的特征信息,将特征信息上报服务端的特征库,服务端将所述特征信息与特征库中预置的候选特征信息进行匹配,识别目标产品,搜索目标产品的虚拟使用说明动画,用户终端下载并展示虚拟使用说明动画。其中,用户终端可以是诸如智能手机或平板电脑之类具有扫描功能的电子产品。

本实施例提供的技术方案,服务端依据客户端上报的特征信息确定目标说明书对应的虚拟使用说明动画,客户端从服务端下载虚拟使用说明动画,并通过AR技术在目标说明书上展示虚拟使用说明动画,即通过AR技术在说明书上展示虚拟使用说明动画,可以最大发挥说明书的作用,目标受众非常大,使用场景也会非常多。对用户来讲,新鲜的物品对他们不再是难以理解,也不需要向别人请教怎么用,直接可以通过虚拟动画,直观的了解产品。

实施例三

图4是本发明实施例三提供的一种基于AR技术的说明书展示装置的结构图。该装置一般可适用于展示产品说明书的情形,且配置在客户端中。参见图4,本实施例提供的基于AR技术的说明书展示装置的具体结构如下:

特征提取模块31,用于提取目标说明书的特征信息;

特征上报模块32,用于将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

AR展示模块33,用于从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

示例性的,所述特征提取模块31可以包括:

说明书扫描单元,用于通过摄像头扫描所述目标说明书;

特征提取单元,用于依据扫描结果,提取所述目标说明书的特征信息。

示例性的,所述特征信息包含二维码、商标、品牌名称和产品型号中的至少一种信息。

示例性的,上述基于AR技术的说明书展示装置还可以包括:

虚拟动画调整模块,用于在通过AR技术在所述目标说明书上展示所述虚拟使用说明动画之后,依据用户操作,调整使用所述虚拟使用说明动画的展示内容和/或展示进度。

示例性的,所述目标说明书为药品的服用说明书或物品的使用说明书。

本实施例提供的基于AR技术的说明书展示装置,与本发明任意实施例所提供的由客户端执行的基于AR技术的说明书展示方法属于同一发明构思,可执行本发明任意实施例所提供的由客户端执行的基于AR技术的说明书展示方法,具备由客户端执行的基于AR技术的说明书展示相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明任意实施例提供的由客户端执行的基于AR技术的说明书展示方法。

实施例四

图5是本发明实施例四提供的一种基于AR技术的说明书展示装置的结构图。该装置一般可适用于展示产品说明书的情形,且配置在服务端中。参见图5,本实施例提供的基于AR技术的说明书展示装置的具体结构如下:

特征获取模块41,用于获取客户端上报的目标说明书的特征信息;

虚拟动画确定模块42,用于依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

虚拟动画下发模块43,用于将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

示例性的,所述虚拟动画确定模块42可以包括:

特征匹配单元,用于将所述特征信息与特征库中预置的候选特征信息进行匹配;

产品确定单元,用于依据匹配结果,确定目标产品;

虚拟动画确定单元,用于依据所述目标产品确定所述目标说明书对应的虚拟使用说明动画。

本实施例提供的基于AR技术的说明书展示装置,与本发明任意实施例所提供的由服务端执行的基于AR技术的说明书展示方法属于同一发明构思,可执行本发明任意实施例所提供的由服务端执行的基于AR技术的说明书展示方法,具备由服务端执行的基于AR技术的说明书展示相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明任意实施例提供的由服务端执行的基于AR技术的说明书展示方法。

实施例五

如图6所示,为本申请实施例五提供的设备的硬件结构示意图,如图6所示,该电子设备包括:

一个或多个处理器510,图6中以一个处理器510为例;

存储器520;

所述电子设备还可以包括:输入装置530和输出装置540。

所述电子设备中的处理器510、存储器520、输入装置530和输出装置540可以通过总线或者其他方式连接,图6中以通过总线连接为例。

存储器520作为一种非暂态计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本申请实施例中的数据存储方法对应的程序指令/模块(例如,附图4所示的特征提取模块31、特征上报模块32和AR展示模块33)。处理器510通过运行存储在存储器520中的软件程序、指令以及模块,从而执行服务端的各种功能应用以及数据处理,即实现上述方法实施例的由客户端执行的基于AR技术的说明书展示方法。

存储器520可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器520可以包括高速随机存取存储器,还可以包括非暂态性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态性固态存储器件。在一些实施例中,存储器520可选包括相对于处理器510远程设置的存储器,这些远程存储器可以通过网络连接至终端设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入装置530可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置540可包括显示屏等显示设备。

也即:上述电子设备包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序,

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现时,进行如下操作:

提取目标说明书的特征信息;

将提取的特征信息上报至服务端,使所述服务端依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

从所述服务端中下载所述虚拟使用说明动画,并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

进一步的,所述提取目标说明书的特征信息,包括:

通过摄像头扫描所述目标说明书;

依据扫描结果,提取所述目标说明书的特征信息。

进一步的,所述特征信息包含二维码、商标、品牌名称和产品型号中的至少一种信息。

进一步的,所述通过AR技术在所述目标说明书上展示所述虚拟使用说明动画之后,还包括:

依据用户操作,调整使用所述虚拟使用说明动画的展示内容和/或展示进度。

进一步的,所述目标说明书为药品的服用说明书或物品的使用说明书。

实施例六

如图7所示,为本申请实施例六提供的设备的硬件结构示意图,如图7所示,该电子设备包括:

一个或多个处理器610,图7中以一个处理器610为例;

存储器620;

所述电子设备还可以包括:输入装置630和输出装置640。

所述电子设备中的处理器610、存储器620、输入装置630和输出装置640可以通过总线或者其他方式连接,图7中以通过总线连接为例。

存储器620作为一种非暂态计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本申请实施例中的数据存储方法对应的程序指令/模块(例如,附图5所示的特征获取模块41、虚拟动画确定模块42和虚拟动画下发模块43)。处理器610通过运行存储在存储器620中的软件程序、指令以及模块,从而执行服务端的各种功能应用以及数据处理,即实现上述方法实施例的由服务端执行的基于AR技术的说明书展示方法。

存储器620可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器620可以包括高速随机存取存储器,还可以包括非暂态性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态性固态存储器件。在一些实施例中,存储器620可选包括相对于处理器610远程设置的存储器,这些远程存储器可以通过网络连接至终端设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入装置630可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置640可包括显示屏等显示设备。

也即:上述电子设备包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序,

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现时,进行如下操作:

获取客户端上报的目标说明书的特征信息;

依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画;

将所述虚拟使用说明动画下发给所述客户端,使所述客户端接收并通过AR技术在所述目标说明书上展示所述虚拟使用说明动画。

进一步的,所述依据所述特征信息确定所述目标说明书对应的虚拟使用说明动画,包括:

将所述特征信息与特征库中预置的候选特征信息进行匹配;

依据匹配结果,确定目标产品;

依据所述目标产品确定所述目标说明书对应的虚拟使用说明动画。

注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

个性化你的检索平台
使用键盘键 进行切换