技术摘要：
本发明提供的基于人工智能的绘本阅读方法，其包含：步骤一：在绘本阅读模式下，采集得到绘本图像，对绘本图像进行视觉识别；步骤二：对绘本图像进行翻页检测，判断绘本是否处于翻页阅读状态；步骤三：若绘本处于非翻页阅读状态，对绘本图像进行指读检测，判断绘本是否  全部
背景技术：
图书是人类用来记录一切成就的主要工具，也是人类交融感情、取得知识、传承经 验的重要媒介，对人类文明的开展贡献至钜。图书是以传播文化为目的，用文字或其它信息 符号记录于一定形式的材料之上的著作物。现有技术中，在视觉识别领域，对于用户的阅读 状态，缺少细致的识别及分类技术，这就带来了效率低下，用户体验差等问题。 针对现有技术的现状，急需在实际的识别和阅读中，对用户的阅读状态进行区分， 针对不同的用户阅读状态，提供不同的辅助阅读服务，以使用户的阅读体验更加舒适。 因此，本发明提供了一种基于人工智能的绘本阅读方法及装置。
技术实现要素：
为解决上述问题，本发明提供了一种基于人工智能的绘本阅读方法，所述方法包 含以下步骤： 步骤一：在绘本阅读模式下，采集得到绘本图像，对所述绘本图像进行视觉识别； 步骤二：对所述绘本图像进行翻页检测，判断绘本是否处于翻页阅读状态； 步骤三：若绘本处于非翻页阅读状态，对所述绘本图像进行指读检测，判断绘本是 否处于指读阅读状态或执手阅读状态； 步骤四：在所述翻页阅读状态或所述指读阅读状态或所述执手阅读状态下，向用 户反馈多模态阅读数据。 根据本发明的一个实施例，所述步骤二中具体包含以下步骤： 对在预设时间段内采集的所述绘本图像进行检测分析，通过对比确定临近绘本图 像之间的相似度，得到相似度信息； 将所述相似度信息与第一阈值进行比较，若所述相似度信息小于所述第一阈值， 则判断绘本处于翻页阅读状态。 根据本发明的一个实施例，所述步骤三中具体包含以下步骤： 若所述相似度信息大于所述第一阈值，则判断绘本处于非翻页阅读状态； 在所述非翻页阅读状态下，检测所述绘本图像中是否存在手指指向轮廓； 若存在所述手指指向轮廓，判断绘本处于所述指读阅读状态。 根据本发明的一个实施例，所述步骤三中具体包含以下步骤：在所述非翻页阅读 状态下，若不存在所述手指指向轮廓但存在手部轮廓，判断绘本处于所述执手阅读状态。 根据本发明的一个实施例，所述步骤四中具体包含以下步骤：在所述指读阅读状 态下，实时捕捉所述手指指向轮廓所指向的绘本位置，向用户反馈所述绘本位置对应的所 述多模态阅读数据。 4 CN 111723653 A 说　明　书 2/9 页 根据本发明的一个实施例，所述方法还包括： 获取当前用户的身份特征信息，对当前用户的用户属性进行判断，确定当前用户 的类别，其中，用户的类别包含：儿童用户。 根据本发明的另一个方面，还提供了一种程序产品，其包含用于执行如上任一项 所述的方法步骤的一系列指令。 根据本发明的另一个方面，还提供了一种基于人工智能的绘本阅读装置，所述装 置包含： 视觉识别模块，其用于在绘本阅读模式下，采集得到绘本图像，对所述绘本图像进 行视觉识别； 翻页检测模块，其用于对所述绘本图像进行翻页检测，判断绘本是否处于翻页阅 读状态； 指读检测模块，其用于若绘本处于非翻页阅读状态，对所述绘本图像进行指读检 测，判断绘本是否处于指读阅读状态或执手阅读状态； 反馈输出模块，其用于在所述翻页阅读状态或所述指读阅读状态或所述执手阅读 状态下，向用户反馈多模态阅读数据。 根据本发明的另一个方面，还提供了一种儿童专用智能设备，用于执行如上任一 项所述的方法步骤的一系列指令。 根据本发明的另一个方面，还提供了一种基于人工智能的绘本阅读系统，所述系 统包含： 如上所述的儿童专用智能设备； 绘本； 云端服务器，其具备语义理解、视觉识别、认知计算以及情感计算，以决策所述儿 童专用智能设备输出多模态数据。 本发明提供的基于人工智能的绘本阅读方法及装置将用户阅读状态分为翻页阅 读状态、指读阅读状态以及执手阅读状态，在用户进行阅读时能够分辨不同的阅读状态，针 对性的提供相应的辅助阅读服务，改善了用户的阅读体验，减少了阅读的误判率，进一步提 升了阅读舒适度。 本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变 得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利 要求书以及附图中所特别指出的结构来实现和获得。 附图说明 附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实 施例共同用于解释本发明，并不构成对本发明的限制。在附图中： 图1显示了根据本发明的一个实施例的基于人工智能的绘本阅读方法流程图； 图2显示了根据本发明的一个实施例的基于人工智能的绘本阅读方法中阅读模式 判断流程图； 图3显示了根据本发明的一个实施例的基于人工智能的绘本阅读装置结构框图； 图4显示了根据本发明的一个实施例的儿童专用智能设备结构框图； 5 CN 111723653 A 说　明　书 3/9 页 图5显示了根据本发明的一个实施例的用户、儿童专用智能设备以及云端的三方 通信示意图；以及 图6显示了根据本发明的另一个实施例的基于人工智能的绘本阅读方法流程图。