技术摘要：
公开了一种烹饪系统。该烹饪系统包括微波炉和显示设备。微波炉配置为响应于接收到的用户命令，通过经由第一相机拍摄位于微波炉下方的炉灶来生成第一图像，或者通过经由第二相机拍摄微波炉的内部来生成第二图像。微波炉还配置为将第一图像和第二图像中的至少一个传送至  全部
背景技术：
近来，电子技术的发展导致了满足消费者需求的各种电子设备的发展。具体地，近 来，开发了一种作为安装在房屋中的炉灶上的微波炉的灶上件。 这里，炉灶可仅通过电灶或煤气灶来实现，该电灶或煤气灶通过至少一个加热器 加热烹饪容器中的烹饪对象，或者可实现为包括位于炉灶下方的烤箱的烤箱灶。 灶上件是安装在炉灶的上部方向上的微波炉，并且指的是使用微波的特性加热容 纳在烹饪容器中的烹饪对象的烹饪器具。 同时，由于用户需要在烹饪对象附近不断检查烹饪对象的过热或过度烹饪，因此 用户可能会感到高度疲劳。
技术实现要素：
技术问题 本公开包括可解决和/或解答上述需求的一个或多个示例性实施方式，并且本公 开的一个或多个示例性实施方式的目的是提供一种微波炉、显示设备和包括该微波炉和显 示设备的烹饪系统，该烹饪系统可识别烹饪对象的过热或过度烹饪而无需在烹饪对象附近 连续地检查烹饪对象。 解决方案 根据示例性实施方式，公开了一种烹饪系统。该烹饪系统包括：微波炉，其配置为 根据用户命令通过经由第一相机拍摄位于微波炉下方的炉灶来生成第一图像，或者通过经 由第二相机拍摄微波炉的内部来生成第二图像，并且将第一图像和第二图像中的至少一个 传送至显示设备；以及显示设备，其配置为从微波炉接收第一图像和第二图像中的至少一 个，并显示所接收的图像。 显示设备可响应于接收到用户输入而向微波炉传送用于控制微波炉和炉灶中的 至少一个的控制命令，并且其中，微波炉可从显示设备接收控制命令并且根据所接收的控 制命令来控制微波炉和炉灶中的至少一个的操作。 第一相机可从第一拍摄方向拍摄位于炉灶上的第一烹饪容器，以及第二相机可沿 第二拍摄方向拍摄位于微波炉的内部的第二烹饪容器，其中，微波炉可将沿第一拍摄方向 拍摄第一烹饪容器的第一图像和沿第二拍摄方向拍摄第二烹饪容器的第二图像修改为与 第三拍摄方向相对应的图像，并且第三拍摄方向可与烹饪容器的竖直方向相对应。 显示设备在显示内容的同时，当接收到用于显示第一图像和第二图像中的至少一 个图像的用户输入时，显示设备可从微波炉接收第一图像和第二图像中的至少一个图像， 5 CN 111615864 A 说　明　书 2/15 页 将所接收的图像与内容重叠并进行显示。 当接收到用于改变显示的图像的尺寸和位置中的至少一个的用户输入时，显示设 备可根据用户输入改变显示的图像的尺寸和位置中的至少一个。 微波炉可基于第一图像和第二图像来识别位于微波炉的内部的烹饪容器或位于 炉灶上的烹饪容器中的气泡产生程度，将指示所识别的气泡的程度的通知消息传送至显示 设备，其中，显示设备可显示从微波炉接收的通知消息。 微波炉可基于第一图像和第二图像来识别位于微波炉的内部的烹饪容器中或位 于炉灶上的烹饪容器中的烟雾产生程度，传送指示所识别的烟雾产生程度的通知消息，并 且当烟雾产生程度大于或等于预定阈值时，停止电子单元的驱动或者驱动微波炉罩，其中， 显示设备可显示从微波炉接收的通知消息。 微波炉可识别第一图像和第二图像中的至少一个图像的模糊程度，并从第一相机 和第二相机中识别出拍摄所识别的模糊程度大于或等于预设阈值的图像的相机，并操作设 置在所识别的相机附近的风扇。 根据示例性实施方式，微波炉包括：电子单元；第一相机；通信器；以及处理器，其 配置为根据用户命令控制通信器通过经由第一相机拍摄位于微波炉下方的炉灶来生成第 一图像，并将第一图像传送至显示设备。 微波炉还可包括第二相机，其中，处理器可控制通信器通过经由第二相机拍摄微 波炉的内部来生成第二图像，并将第二图像传送至显示设备。 处理器可从显示设备接收用于控制微波炉和炉灶中的至少一个的控制命令，并且 根据所接收的控制命令控制微波炉和炉灶中的至少一个的操作。 第一相机可设置在微波炉的特定位置处，以沿对角线方向拍摄位于炉灶上的烹饪 容器，以及第二相机设置在微波炉的特定位置处，以沿对角线方向拍摄位于微波炉的内部 的烹饪容器，其中，处理器可修改由第一相机和第二相机沿对角线方向拍摄烹饪容器的图 像，并将修改后的图像传送至显示设备，并且修改后的图像可与沿竖直方向拍摄烹饪容器 的图像相对应。 处理器可基于第一图像和第二图像来识别位于微波炉的内部的烹饪容器或位于 炉灶上的烹饪容器中的气泡产生程度，并且将指示所识别的气泡的程度的通知消息传送至 显示设备。 处理器可基于第一图像和第二图像来识别位于微波炉的内部的烹饪容器中或位 于炉灶上的烹饪容器中的烟雾产生程度，传送指示所识别的烟雾产生程度的通知消息，并 且当烟雾产生程度大于或等于预定阈值时，停止微波炉的电子单元的驱动或者驱动微波炉 的罩。 处理器可识别第一图像和第二图像中的至少一个图像的模糊程度，并从第一相机 和第二相机中识别出拍摄所识别的模糊度大于或等于预设阈值的图像的相机，并操作设置 在所识别的相机附近的风扇。 根据示例性实施方式，显示设备包括：显示器；通信器；以及处理器，其通过通信器 接收拍摄位于微波炉下方的炉灶的第一图像和拍摄微波炉的内部的第二图像中的至少一 个，并在显示器上显示接收到的图像。 处理器可响应于接收到用户输入而向微波炉传送用于控制微波炉和炉灶中的至 6 CN 111615864 A 说　明　书 3/15 页 少一个的控制命令。 处理器在显示内容的同时，当接收到用于显示第一图像和第二图像中的至少一个 图像的用户输入时，处理器可从微波炉接收第一图像和第二图像中的至少一个图像，将所 接收的图像与内容重叠并进行显示。 当接收到用于改变所显示的图像的尺寸和位置中的至少一个的用户输入时，处理 器可根据用户输入来改变所显示的图像的尺寸和位置中的至少一个。 一种控制方法，包括：根据用户命令通过经由第一相机拍摄位于微波炉下方的炉 灶来生成第一图像；以及将第一图像传送至显示设备。 微波炉的控制方法还可包括根据用户命令通过经由第二相机拍摄微波炉的内部 来生成第二图像，以及传送步骤可将第一图像和第二图像传送至显示设备。 根据示例性实施方式的显示设备的控制方法可包括接收通过拍摄位于微波炉下 方的炉灶生成的第一图像和通过拍摄微波炉的内部生成的第二图像中的至少一个，并显示 接收到的图像。 发明的有益效果 根据如上所述的本发明的各种实施方式，即使当用户离开厨房时，用户也能够连 续地检查烹饪对象，从而减少烹饪过程的疲劳。另外，由于微波炉和炉灶设备可在除了厨房 之外的空间进行远程控制，所以可增加用户便利性。 附图说明 图1示出了根据本公开的实施方式的烹饪系统； 图2示出了根据本公开的实施方式的微波炉的框图； 图3A至图3B示出了根据本公开的实施方式的微波炉中设置的相机； 图4示出了根据本公开的实施方式的显示设备上所显示的图像； 图5示出了根据本公开的实施方式的识别由微波炉从烹饪容器产生的气泡的示例 性实施方式； 图6示出了根据本公开的实施方式的由微波炉识别从烹饪容器产生的烟雾的示例 性实施方式； 图7示出了根据本公开的实施方式的通过微波炉防止相机上的蒸汽的示例性实施 方式； 图8示出了根据本公开的实施方式的通过微波炉去除异物的示例性实施方式； 图9示出了根据本公开的实施方式的显示设备的框图； 图10A至图10E示出了根据本公开的实施方式的由显示设备显示用于拍摄微波炉 的内部的图像和/或用于拍摄炉灶的图像的示例性实施方式； 图11示出了根据本公开的实施方式的由显示设备显示通过相机拍摄的图像以及 内容的示例性实施方式； 图12A至图12C示出了根据本公开的实施方式的编辑显示器上显示的由相机拍摄 的图像的示例性实施方式； 图13A至图13C示出了根据本公开的实施方式的将显示设备实施为用户终端设备 的示例性实施方式； 7 CN 111615864 A 说　明　书 4/15 页 图14A和图14B示出了根据本公开的实施方式的微波炉执行通信的方式； 图15示出了根据本公开的实施方式的微波炉的详细框图； 图16A和图16B示出了根据本公开的实施方式的微波炉的结构； 图17示出了描述根据本公开的实施方式的微波炉的操作的流程图；以及 图18示出了描述根据本公开的实施方式的显示设备的操作的流程图。 实施本发明的最佳方式 - 实施方式 下面讨论的图1至图18以及在本专利文件中用于描述本公开的原理的各种实施方 式仅是示例性的，并且不应以任何方式解释为限制本公开的范围。本领域技术人员将理解， 本公开的原理可在任何适当布置的系统或设备中实现。 下面将参照附图更详细地描述示例性实施方式。 在以下描述中，即使在不同的附图中，相同的参考标记也用于相同的元件。提供在 说明书中定义的内容，例如详细的结构和元件，以帮助全面理解示例性实施方式。然而，显 而易见的是可在没有这些具体定义的内容的情况下实践示例性实施方式。此外，公知的功 能或结构未作详细描述，因为它们会因不必要的细节而使描述不清楚。 另外，尽管下面参照附图和附图中描述的内容详细描述了本公开的实施方式，但 是本公开不受实施方式的限制或约束。 下面，参照附图更详细地描述本发明。 图1示出了根据本公开的实施方式的烹饪系统。 参照图1，根据示例性实施方式的烹饪系统可包括微波炉100和显示设备200。 如图1中所示，微波炉100可实施为灶上件(over-the-range，OTR)，其是安装在炉 灶上的微波炉，以及显示设备200可实施为智能TV。然而，这仅是示例性的，并且显示设备 200可实施为具有显示器的各种电子设备，诸如智能电话、平板电脑、PC、笔记本电脑等。 微波炉100和显示设备200可执行通信以收发各种数据。 具体地，微波炉100可与显示设备200通信以将第一图像和第二图像中的至少一个 传送至显示设备200。这里，第一图像可以是位于微波炉100下方的炉灶的图像，以及第二图 像可以是微波炉100的内部的图像。 微波炉100可包括第一相机和第二相机中的至少一个。这里，第一相机可以是用于 拍摄位于微波炉100下方的炉灶的相机，以及第二相机可以是用于拍摄微波炉100的内部的 相机。 显示设备200可显示从微波炉100接收的图像。这里，所接收的图像可以是第一图 像和/或第二图像。 因此，用户可通过显示设备200确认烹饪对象是否过热或过度烹饪，而无需在烹饪 对象附近连续地检查烹饪对象。 图2示出了根据本公开的实施方式的微波炉的框图。为了便于描述，将参照图3A至 图3B。 参照图2，根据本公开的实施方式的微波炉100包括第一相机110、通信器130和处 理器140，并且还可包括第二相机120。 8 CN 111615864 A 说　明　书 5/15 页 第一相机110可拍摄位于微波炉100下方的炉灶的照片。为此，第一相机110可设置 在可拍摄位于微波炉100下方的炉灶的位置处。 例如，参照图3A，第一相机110可设置在微波炉100的下表面的一个区域中。在图3A 中，第一相机110所处的区域仅是示例性的，并且第一相机110可位于各种位置处，诸如微波 炉100的下表面的中心区域，用于对位于微波炉100的下表面处的炉灶进行拍摄。 第二相机120可拍摄微波炉100的内部。为此，第二相机120可设置在可拍摄微波炉 100的内部的位置处。 例如，如图3B中所示，第二相机120可设置在微波炉100内部的天花板的一个区域 中。在图3B中，第二相机120所处的区域仅是示例，并且第二相机可设置在各种位置处，诸如 微波炉100内部的天花板的中心区域，用于拍摄微波炉100的内部。 通信器130可根据各种通信类型与各种类型的外部设备通信。 通信器130可与显示设备200通信，并可将第一图像和第二图像中的至少一个传送 至显示设备200。这里，第一图像是通过第一相机110的位于微波炉100下方的炉灶的图像， 以及第二图像是通过第二相机120的微波炉100的内部的图像。 通信器130可与显示设备200通信，以从显示设备200接收控制命令，从而控制微波 炉100和炉灶中的至少一个。这里，控制命令可以是用于控制微波炉100的电源打开/关闭、 炉灶的烹饪时间或电源打开/关闭、炉灶的加热器的加热温度控制等的命令。 另外，通信器130可与炉灶通信，以便向炉灶传送控制命令。这里，控制命令可以是 从上述显示设备200接收的控制命令。例如，控制命令可以是用于控制炉灶的电源打开/关 闭、炉灶的加热器的温度控制等的命令。 通信器130可包括无线通信芯片，诸如Wi-Fi芯片、蓝牙芯片等。 另外，微波炉100还可包括电子单元电场(未示出)。诸如磁控管和高压变压器的用 于振荡微波以烹饪微波炉100内的烹饪对象的各种电子部件可安装在电子单元中。 处理器140控制微波炉100的整体操作。为此，处理器140可包括中央处理单元 (CPU)、应用处理器(AP)或通信处理器(CP)中的一个或多个。 处理器140可控制通信器130将第一图像和第二图像中的至少一个传送至显示设 备200。这里，第一图像是通过第一相机110拍摄的位于微波炉100下方的炉灶的图像，以及 第二图像是通过第二相机120拍摄的微波炉100的内部的图像。 具体地，当从显示设备200接收到请求第一图像的信号时，处理器140可通过第一 相机生成第一图像，并将生成的第一图像传送至显示设备200。当从显示设备200接收到请 求第二图像的信号时，处理器140可通过第二相机生成第二图像，并将生成的第二图像传送 至显示设备200。 当从显示设备200接收到请求第一图像和第二图像的信号时，处理器140可通过第 一相机生成第一图像并从第二相机生成第二图像，并将生成的第一图像和第二图像传送至 显示设备200。 处理器140可从显示设备200接收控制命令，以控制微波炉100和炉灶中的至少一 个。这里，控制命令可以是用于控制微波炉100的电源打开/关闭、炉灶的烹饪时间或电源打 开/关闭、炉灶的加热器的加热温度控制等的命令。 当从显示设备200接收的控制命令是用于控制微波炉100的控制命令时，处理器 9 CN 111615864 A 说　明　书 6/15 页 140可根据接收的控制命令控制微波炉100的功能。例如，当控制命令是用于关闭微波炉100 的电源的命令时，处理器140可基于控制命令关闭微波炉100的电源。 另外，如果从显示设备200接收到的控制命令是用于控制炉灶的控制命令，则处理 器140可将接收到的控制命令传送至炉灶。例如，如果控制命令是用于关闭炉灶的命令，则 处理器140可将接收到的控制命令传送至炉灶。此后，炉灶可基于从微波炉100接收的控制 命令来控制炉灶的功能。在本实施方式中，炉灶可基于接收到的控制命令来使炉灶断电。 如上所述，通过经由显示设备200显示由微波炉100拍摄的微波炉100的内部的图 像或由微波炉100拍摄的炉灶的图像，用户可连续地检查烹饪对象附近的烹饪对象，而无需 一直检查烹饪对象。 另外，用户可远程地控制微波炉100和炉灶中的至少一个，而不必移动至烹饪对象 附近，并且因此，可增加用户便利性。 图4示出了根据本公开的实施方式的显示设备上所显示的图像。 如图3A中所示，根据本公开的实施方式的微波炉100的第一相机110可设置在微波 炉100的下表面的一个区域中。即，第一相机110可设置在微波炉100的特定位置处，以沿对 角线方向拍摄放置在炉灶上的烹饪容器。 另外，如图3B中所示，根据本公开的实施方式的微波炉100的第二相机120可设置 在微波炉100内部的天花板中的一个中。即，第二相机120可设置在微波炉100的特定位置， 以沿对角线方向拍摄位于微波炉100内部的烹饪容器。 因此，可保护相机的镜头免受从烹饪产生的蒸汽等的影响。 同时，根据本公开的实施方式的微波炉100可修改沿对角线方向拍摄的图像410， 并将修改后的图像410传送至显示设备200。 这里，修改后的图像可对应于如图4中所示的沿竖直方向拍摄烹饪容器的图像 420。 为此，处理器140可利用预先存储的微波炉100的内部图像和炉灶的图像，或者可 使用轮廓检测算法。 具体地，处理器140可将预先存储的炉灶的图像与通过第一相机110拍摄的第一图 像进行比较，并且在第一图像中识别与炉灶匹配的矩形形状的图像。处理器140可通过将第 一图像修改为与沿垂直于矩形形状的炉灶的方向拍摄的图像相对应，来将第一图像修改为 与沿竖直方向拍摄的图像相对应。 类似地，处理器140可将微波炉100的预先存储的图像与通过第二相机120拍摄的 第二图像进行比较，并在第二图像中识别与微波炉100中的圆盘匹配的图像。处理器140可 通过将第二图像修改为与沿垂直于圆盘的方向拍摄的图像相对应，来将第二图像修改为与 沿竖直方向拍摄的图像相对应。 另外，处理器140可在第一图像上识别炉灶的边缘，或者通过轮廓算法在第二图像 上识别圆盘，并且然后，如上所述，可修改第一图像和第二图像以对应于从竖直方向到烹饪 容器拍摄的图像。 因此，用户具有通过显示设备200确认烹饪容器中容纳的整个烹饪对象的效果。 在仅将烹饪容器放置在炉灶的多个加热器的一部分上的情况下，处理器140可生 成不包括上面未安装烹饪容器的加热器的图像。 10 CN 111615864 A 说　明　书 7/15 页 为此目的，处理器140可将预先存储的加热器图像与由第一相机110拍摄的图像进 行比较，以识别与预先存储的加热器图像匹配的区域。这里，匹配区域是未放置烹饪容器的 区域，以及非匹配区域是放置了烹饪容器的区域。 此后，处理器140修剪所识别的区域，从而生成不包括未放置烹饪容器的加热器的 图像。 图5示出了根据本公开的实施方式的识别由微波炉从烹饪容器产生的气泡的示例 性实施方式。 处理器140可获取通过相机拍摄的图像(S510)。这里，图像可以是通过第一相机 110拍摄位于微波炉100的下侧的炉灶的第一图像和通过第二相机120拍摄微波炉110内部 的第二图像。 处理器140可运行水沸腾验证算法(S520)。这里，水沸腾验证算法可以是气泡产生 检测算法。具体地，当通过气泡产生检测算法识别出图像中已产生了具有预定阈值或更大 阈值的气泡时，处理器140可识别出(S530)水正在沸腾。 如果确认水正在沸腾，则处理器140可向显示设备200传送指示气泡出现程度的通 知消息，即，指示水正在沸腾的通知消息(S540)。 因此，用户无需在烹饪容器附近连续地检查烹饪对象就可识别烹饪容器的沸水。 通过水沸腾算法识别水正在沸腾仅是实施方式，并且可通过各种方法识别水沸 腾。例如，当指示包括在图像中的像素的RGB值的变化等于或大于A的信息存储在微波炉100 中时，处理器140可识别出：如果特定像素的RGB值的变化等于或大于A，则水正在沸腾。 处理器140还可使用人工智能技术来识别沸水。人工智能技术是实现人类水平智 能的计算机机器自行学习和确定的技术，并且识别率随着其使用而提高。处理器140可通过 使用自分类/学习输入数据的特性的算法的深度学习来识别用户。 具体地，处理器140可学习：当使用相机拍摄的图像中的水蒸气的产生程度是第一 水平，并且当水蒸气的出现程度是产生比第一水平中更多的蒸汽的第二水平时，已产生气 泡，并且如果蒸气产生的水平是第三水平时，则可学习产生了很多气泡。在重复这样的学习 之后，当水蒸气的产生程度处于第三水平时，处理器140可识别出水正在沸腾。 另一方面，如果识别出炉灶上的烹饪容器的水沸腾，则处理器140可控制微波炉 100以加热微波炉100内部的烹饪容器中容纳的烹饪对象。具体地，当识别出炉灶上的烹饪 容器的水沸腾时，处理器140可控制微波炉100以将微波炉100内部的烹饪容器中容纳的烹 饪对象加热预定时间。这里，预定时间可由用户不同地设置，诸如一分钟和三分钟等。 这是因为当炉灶上的烹饪容器的沸水产生时，炉灶上的烹饪对象被完全烹饪。此 时，微波炉100中的烹饪对象也开始进行加热，以便在与炉灶上的烹饪对象的烹饪完成时间 相似的时间点处完成微波炉100内部的烹饪对象的烹饪。 图6示出了根据本公开的实施方式的由微波炉识别从烹饪容器产生的烟雾的示例 性实施方式。 处理器140可获取通过相机拍摄的图像(S610)。这里，图像可以是通过第一相机拍 摄微波炉100的内部的第一图像和通过第二相机120拍摄位于微波炉100下侧的炉灶的第二 图像。 然后，处理器140可运行烟雾检测算法(S620)。这里，烟雾检测算法可以是基于包 11 CN 111615864 A 说　明　书 8/15 页 括在图像中的像素的RGB值的变化来确定是否产生烟雾的算法。具体地，当图像中存在具有 相同的R、G或B值的像素时，处理器140可识别出产生了烟雾，并且如果具有相同的R、G和B的 像素大于预定数量，则可识别出产生了大量烟雾。 如果识别出产生了烟雾，则处理器140可向显示设备200传送指示所识别的烟雾的 出现程度的通知消息(S640)。 另外，如果识别出烟雾产生程度高于预定阈值，则处理器140可操作微波炉罩。这 里，罩可与微波炉100结合设置。 此外，如果烟雾产生程度大于或等于预定阈值且持续预设时间段，则处理器140可 终止对应于所检测的烟雾图像的设备的操作。例如，如果在第一图像中识别出连续地产生 烟雾，则可终止炉灶的加热器的操作，并且如果在第二图像中识别出连续地产生烟雾，则可 终止微波炉100的操作。 因此，用户可识别出从烹饪容器产生了烟雾，而无需在烹饪容器附近连续地检查 烹饪对象。 此外，如果烟雾产生程度大于或等于预定阈值且持续预设时间段，则处理器140可 终止与所检测的烟雾图像相对应的设备的操作。例如，如果识别出第一图像是通过继续产 生烟雾而生成的，则终止炉灶的加热器的操作，以及如果识别出第二图像是连续生成的，则 终止微波炉100的操作。因此，用户无需在烹饪容器附近连续地检查烹饪对象就可识别烹饪 容器中出现烟雾。另外，即使用户没有意识到烟雾的出现，也能够通过在产生大量烟雾时自 动操作罩或者终止加热器的操作来防止由于烟雾产生而造成的损坏。 通过烟雾检测算法识别烹饪容器中烟雾的产生和程度仅是一个实施方式，并且烟 雾的产生和产生程度可通过各种方法来识别。例如，烟雾可由烟雾检测传感器(未示出)检 测。另外，可使用如上所述的人工智能技术来识别烟雾。 图7示出了根据本公开的实施方式的通过微波炉防止相机上的蒸汽的示例性实施 方式。 处理器140可获取通过相机拍摄的图像(S710)。这里，图像可以是通过第一相机 110拍摄位于微波炉100的下侧的炉灶的第一图像，或者是通过第二相机120拍摄微波炉100 的内部的第二图像。 另外，处理器140可识别第一相机和第二相机中的至少一个是否雾化(S720)。具体 地，处理器可识别第一图像和第二图像中的至少一个的模糊程度，并经由雾化相机识别拍 摄的图像的模糊水平等于或大于预定阈值的相机(S730)。 当识别出用于拍摄具有等于或高于预定阈值的模糊程度的图像的相机时，处理器 140可驱动设置在所识别的相机附近的鼓风机(S740)。这里，鼓风机可以是风扇。根据鼓风 机的操作，能够从相机去除雾气。 如果识别出不存在雾化相机，则处理器140可停止鼓风机的操作(S750)。 因此，根据示例性实施方式的微波炉100可提供清楚地拍摄对象的图像。 图8示出了根据本公开的实施方式的通过微波炉去除异物的示例性实施方式。 处理器140可获得由相机拍摄的图像(S810)。这里，图像可以是通过第一相机110 拍摄位于微波炉100的下侧的炉灶的第一图像，或者是通过第二相机120拍摄微波炉100的 内部的第二图像。 12 CN 111615864 A 说　明　书 9/15 页 然后，处理器140可运行异物确认算法(S820)。具体地，如果通过相机当前拍摄的 图像和之前刚刚拍摄的图像的像素值变化大于预设值，则处理器140可识别出相机被异物 污染(S830)。具体地，当像素值变化等于或大于预定值的像素集中在图像的特定区域中时， 处理器140可识别出异物附着于相机。 处理器140可检查识别出的异物是否持续了预设时间或更长(S840)。这是为了区 分异物和烹饪容器，或者异物和烹饪对象。如果识别出的异物留存了预设时间段，则处理器 140可向显示设备传送指示异物存在的通知消息(S850)。 图9示出了根据本公开的实施方式的显示设备的框图。 参照图9，根据本公开的实施方式的显示设备200可包括显示器210、通信器220和 处理器230。 显示器210可显示各种图像。这里，图像是包括静止图像和运动图像的概念。 具体地，显示器210可显示广播图像和多媒体内容图像。另外，显示器210可显示拍 摄位于微波炉100的下侧的炉灶的第一图像和拍摄微波炉100的内部的第二图像之中的至 少一个图像。 另外，显示器210可显示拍摄位于微波炉100的下侧的炉灶的第一图像和拍摄微波 炉100的内部的第二图像中的至少一个，连同广播视频和多媒体内容等。 另外，显示器210可显示用于接收用于控制微波炉100和炉灶中的至少一个的控制 命令的UI。 显示器210可实施为各种类型的显示器，诸如液晶显示面板(LCD)、发光二极管 (LED)、有机发光二极管(OLED)、硅上液晶(LCoS)和数字光处理(DLP)。另外，在显示器210内 部，可包括驱动电路，该驱动电路可实施为诸如硅TFT、低温多晶硅(LTPS)TFT、有机TFT (OTFT)、背光单元等。 通信器220可根据各种类型的通信方法与各种类型的外部设备执行通信。 通信器220可与微波炉100通信以从微波炉100接收第一图像和第二图像中的至少 一个。这里，第一图像是通过第一相机110的位于微波炉100下方的炉灶的图像，以及第二图 像是由微波炉100通过第二相机120捕获的图像。 通信器220可与微波炉100通信，并传送控制命令以控制来自微波炉100的第一图 像和第二图像中的至少一个。这里，控制命令可以是设置电源打开/关闭、烹饪时间、炉灶的 电源打开/关闭或者控制炉灶的加热器的温度的命令。 另外，通信器220可与炉灶通信并且将控制命令直接传送至炉灶。这里，控制命令 可以是用于控制炉灶的电源打开/关闭、炉灶的加热器的温度控制等的命令。 为此，通信器220可包括无线通信芯片，诸如Wi-Fi芯片和蓝牙芯片。 处理器230控制显示设备200的整体操作。为此，处理器230可包括中央处理单元 (CPU)、应用处理器(AP)或通信处理器(CP)中的一个或多个。 处理器230可通过通信器220从微波炉100接收第一图像和第二图像中的至少一 个。这里，第一图像可以是位于微波炉100下方的炉灶的图像，以及第二图像可以是微波炉 100的内部的图像。 具体地，处理器230可基于用户输入向微波炉100传送请求第一图像的信号，并且 可从微波炉100接收第一图像。处理器230可基于用户输入向微波炉100传送请求第二图像 13 CN 111615864 A 说　明　书 10/15 页 的信号，并且可从微波炉100接收第二图像。 处理器230还可基于用户输入向微波炉100传送第一图像和第二图像，并且从微波 炉100接收第一图像和第二图像。 处理器230然后可基于用户输入从微波炉100发送用于控制微波炉100和炉灶中的 至少一个的控制命令。这里，控制命令可以是用于控制微波炉100的电源打开/关闭、设置炉 灶的烹饪时段或电源打开/关闭、以及控制炉灶的加热器的加热温度的命令。 处理器230还可直接向炉灶发送控制命令，以基于用户输入来控制炉灶。这里，控 制命令可以是用于控制炉灶的电源打开/关闭、炉灶的加热温度等的命令。 因此，通过由显示设备200显示拍摄的微波炉100的内部的图像或炉灶的图像，即 使在厨房外部的区域中，用户也可连续地检查烹饪对象。 此外，由于可在显示设备200附近控制炉灶的灶上件或加热器，而不必在烹饪对象 附近控制炉灶的灶上件或加热器，因此可增加用户便利性。 图10A至图10E示出了根据本公开的实施方式的通过显示设备显示用于拍摄微波 炉的内部的图像和/或用于拍摄炉灶的图像的示例性实施方式。 在下文中，为了便于说明，假设微波炉100实施为灶上件(OTR)。 如图10A中所示，处理器230可显示各种应用菜单。例如，处理器230可显示各种应 用菜单，诸如视频应用、照片应用、SNS应用等，包括OTR相机应用。 此后，当根据用户输入选择OTR相机应用时，处理器230可显示指示正在执行与OTR 的通信连接的消息，如图10B中所示。这里，用户输入可以以各种方式执行，诸如触摸显示设 备200的显示器上的OTR相机应用的操作或经由远程控制设备选择OTR相机应用的操作。为 此，显示设备200还可包括远程控制接收器。 如图10C中所示，如果用户通过设置在OTR中的按钮输入命令以激活OTR的通信部 分，则处理器230可执行与OTR的通信连接。这考虑到了安全性问题。具体地，其旨在防止另 一房屋中的显示设备与用户房屋中的OTR进行通信连接来操作OTR的相机。 同时，仅当显示设备200和OTR最初通信连接时，才可执行激活OTR的通信器。即，处 理器230通过这样的操作执行与OTR的通信连接，并且当根据用户输入选择OTR相机应用时， 可立即执行与OTR的通信连接。 在图10C中，示出了通过设置在OTR中的按钮来激活OTR的通信器，但是这仅是实施 方式。OTR的通信器可经由远程控制设备来激活。 此后，如图10D中所示，处理器230可显示请求选择OTR的相机的UI。这里，相机1的 UI是用于选择用于拍摄位于微波炉100下方的炉灶的第一相机的UI，以及相机2的UI是用于 选择用于拍摄微波炉100的内部的第二相机的UI，并且相机1和相机2的UI可以是用于选择 第一相机和第二相机两者的UI。 然后，当通过显示的UI选择相机时，处理器230可显示由选择的相机拍摄的图像。 具体地，当相机1的UI时，处理器230可通过第一相机显示位于微波炉100下方的炉 灶的图像，以及当选择相机2的UI时，可显示通过第二图像拍摄的微波炉100的内部的图像。 当选择相机1和相机2的UI时，可显示通过第一相机拍摄的位于微波炉100下方的炉灶的图 像和通过第二相机拍摄的微波炉100的内部的图像。 例如，当选择相机1的UI时，如图10E中所示，处理器230可显示位于微波炉100下方 14 CN 111615864 A 说　明　书 11/15 页 的炉灶的图像。 图11示出了根据本公开的实施方式的由显示设备显示通过相机拍摄的图像以及 内容的示例性实施方式。 处理器230可在显示器210上显示诸如广播图像和多媒体内容图像的各种内容。 当在显示内容的同时接收到用于显示第一图像和第二图像中的至少一个的用户 输入时，处理器230可从OTR接收第一图像和第二图像中的至少一个，并且可将所接收的图 像重叠并显示在内容上。这里，重叠的程度可根据用户设置而不同地设置。 例如，如果在显示广播图像的同时选择了远程控制设备的OTR按钮，则处理器230 可显示请求选择第一相机和第二相机中的至少一个的UI。 当选择第一相机和第二相机中的第一相机时，处理器230可将请求由第一相机拍 摄的图像的信号传送至OTR，并将由第一相机拍摄的图像传送至OTR，并从OTR接收和显示由 第一相机拍摄的图像。 类似地，当选择第二相机时，处理器230可将请求由第二相机拍摄的图像的信号传 送至OTR，从OTR接收并显示由第二相机拍摄的图像，以及当选择第一相机和第二相机时，处 理器230可将请求由第一相机和第二相机拍摄的图像的信号传送至OTR，并将由第一相机和 第二相机拍摄的图像传送至OTR；并可从OTR接收和显示由第一相机和第二相机拍摄的图 像。 同时，通过按压上述远程控制设备的OTR按钮的操作来接收用户输入仅是实施方 式，并且可通过触摸显示设备200的显示器210的操作来接收用户输入。 图12A至图12C示出了根据本公开的实施方式的编辑显示在显示设备上的由相机 拍摄的图像的示例性实施方式。 处理器230可根据用户输入编辑显示器210上显示的由相机拍摄的图像。 具体地，当接收到用于改变显示器210上显示的由相机拍摄的图像的尺寸和位置 中的至少一个的用户输入时，处理器230可根据用户输入改变所显示的图像的尺寸和位置 中的至少一个。 例如，参照图12A，当输入在触摸之后将由相机拍摄的图像的一部分拖动到另一区 域的操作时，处理器230可根据拖动操作来移动拍摄的图像。 参照图12B，如果触摸由相机拍摄的图像的边缘区域以及然后输入将该边缘区域 拖动到另一区域的操作，则处理器230可根据拖动操作改变拍摄的图像的尺寸。 参照图12C，当输入双触摸由相机拍摄的图像的边界区域的操作时，处理器230可 将拍摄的图像的尺寸改变成与显示器210的整个屏幕尺寸相对应。 同时，触摸和拖动操作、双触摸操作等可以以各种方式执行。例如，可通过设置在 远程控制设备中的触摸板来执行触摸-拖动操作、双触摸操作等，并且可通过显示设备200 的显示器210来执行触摸-拖动操作、双触摸操作等。 此外，可对第一图像和第二图像中的每个执行图像的编辑。具体地，当在显示了第 一图像和第二图像的状态下选择第一图像和第二图像中的一个并且对所选择的图像输入 拖动操作时，处理器230可仅将所选择的图像移动至另一位置或者在放大图像之后显示所 选择的图像。 图13A至图13C示出了根据本公开的实施方式的将显示设备实施为用户终端设备 15 CN 111615864 A 说　明　书 12/15 页 的示例性实施方式。 如图13A中所示，处理器230可显示各种应用菜单。例如，处理器230可显示各种应 用菜单，包括OTR相机应用，诸如冰箱应用、TV应用、洗衣机应用等。 此后，当根据用户输入选择OTR相机应用时，处理器230可显示指示正在执行与OTR 的通信连接的消息，如图13B中所示。这里，用户输入可通过用户触摸显示设备200的显示器 上的OTR相机应用的操作来接收。 此时，如果用户通过设置在OTR中的按钮输入命令以激活OTR的通信部分，则处理 器230可执行与OTR的通信连接，如图13C中所示。这考虑到了安全性问题。具体地，其旨在防 止另一用户的用户终端与用户房屋中的OTR进行通信连接和操作OTR的相机。 同时，仅当显示设备200和OTR最初通信连接时，才可执行激活OTR的通信器。即，处 理器230可通过这样的操作执行与OTR的通信连接，并且当根据用户输入选择OTR相机应用 时，可立即执行与OTR的通信连接。 在图13C中，通过设置在OTR中的按钮来激活OTR的通信器，但是这仅是实施方式。 OTR的通信器可经由远程控制设备来激活。 如图13D中所示，处理器230可显示请求选择OTR的相机的UI。这里，相机1的UI是用 于选择用于拍摄位于微波炉100下方的炉灶的第一相机的UI，以及用于相机2的UI是用于选 择用于拍摄微波炉100的内部的第二相机，以及相机1和相机2的UI可以是用于选择第一相 机和第二相机两者的UI。 当通过显示的UI选择相机时，处理器230可显示由选择的相机拍摄的图像。 具体地，当选择相机1的UI时，处理器230显示通过第一相机拍摄的位于微波炉100 下方的炉灶的图像。当选择相机2的UI时，处理器230可显示通过第一相机拍摄微波炉100的 内部的图像和通过第二相机拍摄位于微波炉100下方的炉灶的图像。 例如，当选择相机1的UI时，如图13E中所示，处理器230可显示拍摄位于微波炉100 下方的炉灶的图像。 图14A和图14B示出了根据本公开的实施方式的微波炉执行通信的方式。 参照图14A，根据本公开的实施方式的微波炉100可执行与显示设备200的通信。这 里，显示设备200可以是用户终端设备和图像提供设备中的至少一个。 参照图14A的虚线，微波炉100可使用Wi-Fi通信连接到无线路由器，并可执行与经 由Wi-Fi通信连接到无线路由器的显示设备200的通信。 以上所述仅是示例性的，并且如图14A的实线所示，微波炉100可执行与显示设备 200的直接通信，而无需通过无线路由器。 此外，微波炉100可经由无线路由器与服务器通信。因此，可从服务器向微波炉100 提供附加服务，诸如微波炉100的升级服务。 然而，这仅是实施方式，并且可从与服务器执行通信的用户终端设备向微波炉100 提供由服务器提供的服务。为此，用户终端设备可将用于微波炉100的附加服务的文件接收 至服务器，并且经由Wi-Fi通信将其传送至微波炉100。 参照图14B，根据本公开的一个实施方式的微波炉100可与炉灶设备执行通信。在 这种情况下，炉灶设备可以以与如图14A中的微波炉100执行通信相同的方式与显示设备 200和服务器通信。 16 CN 111615864 A 说　明　书 13/15 页 炉灶设备可通过有线或无线通信方法将从诸如显示设备200和服务器的外部设备 接收的信号传送至微波炉100，并且相反地，将从微波炉100接收的信号传送至诸如显示设 备200和服务器的外部设备。这里，无线通信方法可以是诸如Wi-Fi方法和蓝牙方法的各种 方法。 图15示出了根据本公开的实施方式的微波炉的详细框图。 参照图15，根据本公开的实施方式的微波炉100'可包括第一相机110、第二相机 120、通信器130、处理器140、存储装置150、传感器155、显示器160、扬声器165、发光单元 170、第一风扇175、第二风扇180和通风口185。以下，将省略与上述描述重叠的部分的描述。 存储装置150可存储与微波炉100'的部件和用于控制微波炉100'的部件的整体操 作的操作系统(OS)相关的命令或数据。 因此，处理器140可使用存储在存储装置150中的各种命令或数据来控制微波炉 100'的多个硬件或软件部件，以及将从其它部件中的至少一个接收的命令或数据加载到非 易失性存储器，并且将各种数据存储在非易失性存储器中。具体地，根据本发明的实施方 式，存储装置150可存储由第一相机生成的图像和由第二相机生成的图像中的至少一个。 处理器140控制微波炉100'的整体操作。 [0200] 具体地，处理器140包括RAM  141、ROM  142、CPU  143、第一接口144-1至第n接口 144-n和总线145。这里，RAM  141、ROM  142、CPU  143、第一接口144-1至第n接口145-n等可经 由总线145彼此连接。 [0201] 第一接口144-1至第n接口145-n连接到上述各种部件。接口中的一个可以是经由 网络连接至外部设备的网络接口。 [0202] CPU  143访问存储装置150，并使用存储在存储装置150中的O/S执行启动。CPU  143 可使用存储在存储装置150中的各种程序、内容和数据来执行各种操作。 [0203] RAM  141存储用于启动系统等的命令集。当输入打开命令并供应电源时，CPU  143 根据存储在ROM  142中的命令将存储在存储装置150中的O/S复制到RAM  141，执行O/S以启 动系统。当完成启动时，CPU  143将存储在存储装置150中的各种程序复制到RAM  141，执行 复制到RAM  141的程序，并执行各种操作。 [0204] 传感器155可包括温度感测传感器和烟雾感测传感器中的至少一个。这里，温度感 测传感器可包括用于感测微波炉100'内部的温度的传感器和用于感测炉灶上的烹饪容器 的温度的传感器。烟雾感测传感器可感测在微波炉100'内部的烹饪容器或者在炉灶上的烹 饪容器中产生的烟雾。 [0205] 显示器160可显示各种屏幕。例如，显示器160可显示指示微波炉100'正在与显示 设备200通信的UI，并且可显示微波炉100'的内部的图像。此外，显示器160可显示炉灶上的 烹饪容器的图像。 [0206] 此外，显示器160可实施为触摸屏以接收用户输入。这里，用户输入可包括用于在 第一图像和第二图像中的至少一个显示在显示器160上的同时将第一图像和第二图像中的 至少一个传送至显示设备200的用户输入。 [0207] 扬声器165可输出声音。在一个实施方式中，当产生超过预定阈值的烟雾等时，扬 声器165可输出指示正在产生烟雾的警报声音。 [0208] 发光单元170可设置在相机附近。例如，发光单元170可分别设置在第一相机和第 17 CN 111615864 A 说　明　书 14/15 页 二相机的左侧和右侧中的至少一侧上。当通过相机拍摄图像时，当相机周围的亮度等于或 小于预设阈值时，可打开发光单元170。 [0209] 第一风扇175可设置在第一相机110附近，以及第二风扇180可设置在第二相机附 近。这里，每个风扇均可去除附近的相机上的蒸汽。 [0210] 通风口185可抽吸从烹饪对象产生的蒸汽或气味中的至少一种。 [0211] 尽管图15中未示出，但是根据示例性实施方式的微波炉100'还可包括用于加热微 波炉100'内部的烹饪容器的电磁波生成单元和用于将烹饪期间产生的烟雾和吸入的烟雾 排放到外部的管道。 [0212] 图16A和图16B示出了根据本公开的实施方式的微波炉的结构。 [0213] 图16A是微波炉100的仰视图。参照图16A，通风口185和第一相机110可设置在微波 炉100的下表面上。这里，通风口是用于抽吸在烹饪对象中产生的蒸汽、烟雾或气味的设备， 并且微波炉100可通过通风口185抽吸蒸汽、烟雾或气味。 [0214] 如图16A中所示，通风口185设置在微波炉100的下表面的中心处，并且第一相机 110可设置在微波炉100的下表面中的通风孔185的后部区域中。然而，这仅是示例，并且第 一相机110可设置在可拍摄微波炉100的炉灶的各种位置处。 [0215] 例如，第一相机110可设置在微波炉100的下表面的中心处。在这种情况下，通风口 185可设置在第一相机110的侧部区域中的至少一个中，即，设置第一相机110的前区域、后 区域、左区域和右区域中。 [0216] 图16B是示出微波炉100的左侧或右侧的视图。 [0217] 参照图16B，用于拍摄微波炉100的内部的第一相机110可设置在微波炉100的上表 面中的一个中。在图16B中，第一相机110所处的区域仅是示例性的，并且第一相机可设置在 可拍摄微波炉100的内部的各种位置处，诸如微波炉100的上表面的中心等。 [0218] 如图16B中所示，用于拍摄位于微波炉100下方的炉灶的第二相机120可设置在微 波炉100的下表面中的一个中。 [0219] 图17示出了描述根据本公开的实施方式的微波炉的操作的流程图。 [0220] 微波炉可根据用户命令通过经由第一相机拍摄微波炉的内部来生成第一图像，或 者通过经由第二相机显示位于微波炉下方的炉灶来生成第二图像(S1710)。这里，用户命令 可输入至与微波炉执行通信的显示设备。具体地，当用于显示第一图像和第二图像中的至 少一个图像的命令输入至显示设备时，微波炉可从显示设备接收请求第一图像和第二图像 中的至少一个图像的信号，并且基于所接收的信号生成第一图像和第二图像中的至少一 个。然而，以上仅是示例性的，并且微波炉可具有单独的按钮，并且可根据输入至按钮的用 户命令生成第一图像和第二图像中的至少一个。 [0221] 此后，微波炉可将第一图像和第二图像中的至少一个传送至显示设备(S1720)。因 此，显示设备可显示第一图像和第二图像中的至少一个，并且即使在厨房外部的区域中，用 户也可连续地检查烹饪对象。 [0222] 图18示出了描述根据本公开的实施方式的显示设备的操作的流程图。 [0223] 显示设备可从微波炉接收通过拍摄微波炉的内部而生成的第一图像和通过拍摄 位于微波炉下方的炉灶而生成的第二图像中的至少一个(S1810)。 [0224] 具体地，显示设备可基于用户输入向微波炉传送请求第一图像的信号，并且可从 18 CN 111615864 A 说　明　书 15/15 页 微波炉接收第一图像。同样，显示设备可基于用户输入向微波炉传送请求第二图像的信号， 并且从微波炉接收第二图像。另外，显示设备可基于用户输入将第一图像和第二图像传送 至微波炉，并且从微波炉接收第一图像和第二图像。另外，显示设备可显示接收到的图像 (S1810)。 [0225] 因此，通过由显示设备200显示拍摄的微波炉100的内部的图像或炉灶的图像，即 使用户在厨房外部的区域中，用户也可连续地检查烹饪对象。 [0226] 同时，根据本发明的上述各种实施方式的方法可以以能够安装在现有微波炉中的 软件或应用的形式来实现。另外，根据本发明的上述各种实施方式的方法可通过对现有微 波炉的软件升级或硬件升级来实现。另外，可通过设置在微波炉中的嵌入式服务器或微波 炉外部的服务器来执行本发明的上述各种实施方式。同时，可提供一种非暂时性计算机可 读介质，该介质中存储有用于顺序地执行根据本发明的控制微波炉的方法的程序。 [0227] 非暂时性计算机可记录介质不是配置为临时存储数据的诸如寄存器、高速缓存或 存储器的介质，而是配置为半永久地存储数据的装置可读介质。具体地，上述各种应用或程 序可存储在诸如光盘(CD)、数字多功能盘(DVD)、硬盘、蓝光光盘、通用串行总线(USB)、存储 卡或只读存储器(ROM)的非暂时性装置可读介质中，并且可设置在其中。 [0228] 上述示例性实施方式和有益效果仅是示例性的，并且不应解释为限制本发明构 思。示例性实施方式可容易地应用于其它类型的设备或装置。此外，示例性实施方式的描述 旨在是说明性的，而不是限制本发明构思的范围，并且许多替代、修改和变型对于本领域技 术人员将是显而易见的。 [0229] 尽管已经用各种实施方式描述了本公开，但是可向本领域技术人员建议各种改变 和修改。本公开旨在包括落入所附权利要求的范围内的这些改变和修改。 [0230] 工业实用性 [0231] - [0232] 顺序表自由文本 [0233] - 19 CN 111615864 A 说　明　书　附　图 1/21 页 图1 图2 20 CN 111615864 A 说　明　书　附　图 2/21 页 图3a 图3b 21 CN 111615864 A 说　明　书　附　图 3/21 页 图4 22 CN 111615864 A 说　明　书　附　图 4/21 页 图5 23 CN 111615864 A 说　明　书　附　图 5/21 页 图6 图7 24 CN 111615864 A 说　明　书　附　图 6/21 页 图8 图9 25 CN 111615864 A 说　明　书　附　图 7/21 页 图10a 图10b 图10c 26 CN 111615864 A 说　明　书　附　图 8/21 页 图10d 图10e 27 CN 111615864 A 说　明　书　附　图 9/21 页 图11 28 CN 111615864 A 说　明　书　附　图 10/21 页 图12a 29 CN 111615864 A 说　明　书　附　图 11/21 页 图12b 30 CN 111615864 A 说　明　书　附　图 12/21 页 图12c 31 CN 111615864 A 说　明　书　附　图 13/21 页 图13a 32 CN 111615864 A 说　明　书　附　图 14/21 页 图13b 图13c 33 CN 111615864 A 说　明　书　附　图 15/21 页 图13d 34 CN 111615864 A 说　明　书　附　图 16/21 页 图13e 35 CN 111615864 A 说　明　书　附　图 17/21 页 图14a 图14b 36 CN 111615864 A 说　明　书　附　图 18/21 页 图15 37 CN 111615864 A 说　明　书　附　图 19/21 页 图16a 38 CN 111615864 A 说　明　书　附　图 20/21 页 图16b 图17 39 CN 111615864 A 说　明　书　附　图 21/21 页 图18 40