[0001] 本公开涉及烹调辅助方法以及烹调辅助系统。

[0002] 已提出一种对内容物从锅等烹调器具溢出这一情况进行检测的方法。例如，公开了如下方法：不使用燃气或火而仅利用电力来工作的也被称为IH(Induction Heating：感应加热)烹调器的电磁烹调器具备进行重量检测的单元，根据利用电磁烹调器进行加热的烹调器具的重心位置以及重量的变化来检测烹调器具中的溢出。

[0003] 现有技术文献

[0004] 专利文献

[0005] 专利文献1：日本特开2013-72637号公报

[0006] 专利文献2：日本特开2007-303804号公报

[0061] (得到本公开的一技术方案的经过)

[0062] 已提出一种对内容物从锅等烹调器具溢出这一情况进行检测的方法(例如，参照专利文献1)。

[0063] 在专利文献1中公开了如下方法：不使用燃气或火而仅利用电力来工作的电磁烹调器具备进行重量检测的单元，根据利用电磁烹调器进行加热的烹调器具的重心位置以及重量的变化来检测烹调器具中的溢出。

[0064] 然而，在专利文献1所公开的技术中，存在在烹调器具中的溢出发生后才能进行应对这一问题。因此，对电磁烹调器中溢出的内容物等的擦拭清理也很麻烦。

[0065] 与此相对，例如在专利文献2中公开了如下方法：使用检测烹调器具的温度的红外线传感器来在发生溢出前检测利用电磁烹调器进行加热的烹调器具中的溢出。

[0066] 然而，在专利文献2所公开的技术中，存在如下问题：根据红外线传感器的设置位置与放置烹调器具的位置的位置关系，只能取得烹调器具的一侧的表面的温度信息。因此，在烹调器具为不锈钢制的锅的情况下，无法通过红外线传感器取得内容物的温度信息。另外，在专利文献2所公开的技术中，也存在如下问题：由于检测烹调器具的传感器与检测烹调器具的温度的红外线传感器是分别设置的，所以这些传感器的设置以及设定复杂，导入并不现实。

[0067] 鉴于以上的问题点，本发明人想到了以下的公开的各技术方案。

[0068] (1)本公开的一技术方案所涉及的烹调辅助方法是经由网络与拍摄包括加热烹调中的烹调器具的区域的热图像的热图像摄像头和能够向用户通知信息的通知装置连接，辅助用户的烹调的烹调辅助系统的烹调辅助方法，包括：经由所述网络从安装成能够从所述烹调器具的斜上方拍摄热图像的所述热图像摄像头取得每预定时间的包括所述烹调器具的区域的热图像，根据所取得的所述热图像，算出表示所述烹调器具中的内容物的水位的变化的值，判定所算出的表示所述水位的变化的值是否为预定的阈值以上，在判定为所算出的表示所述水位的变化的值为预定的阈值以上的情况下，判定为在加热烹调中的所述烹调器具中有可能发生所述内容物的溢出，对所述通知装置发送表示向所述用户通知有可能发生所述溢出之意的信息的通知信息。

[0069] 根据该技术方案，不论烹调器具的材质如何都能够事先检测并防止源于烹调器具的溢出的发生。

[0070] (2)也可以是，在上述技术方案中，所述烹调辅助系统还经由所述网络与能够进行使用了所述烹调器具的加热烹调的加热烹调装置连接，所述烹调辅助方法还包括：进而在判定为所算出的表示所述水位的变化的值为预定的阈值以上的情况下，对所述加热烹调装置发送表示减弱该加热烹调装置的输出的指示的控制信号。

[0071] (3)在上述技术方案中，所述控制信号也可以表示使所述加热烹调装置的加热工作停止的指示。

[0072] (4)在上述技术方案中，也可以算出表示每预定时间的所述烹调器具的所述热图像中的作为预定温度以上的区域的预定温度区域的面积的变化的值来作为表示所述水位的变化的值。

[0073] (5)也可以是，在上述技术方案中，还包括：基于所述热图像，判定在加热烹调中的所述烹调器具是否安装有盖，在判定为没有安装所述盖的情况下，判定表示所述水位的变化的值是否为预定的阈值以上，在判定为安装有所述盖的情况下，基于所述热图像来检测所述烹调器具的所述盖的缘端部，算出所述缘端部的温度变化的值来作为表示所述水位的变化的值，判定所述缘端部的温度变化的值是否为预定的阈值以上。

[0074] (6)也可以是，在上述技术方案中，算出表示每预定时间的所述烹调器具的所述热图像中的存在于所述缘端部的附近的、预定温度以上的区域的面积的变化的值来作为所述缘端部的温度变化的值。

[0075] (7)也可以是，在上述技术方案中，还包括：确认在所取得的所述热图像的所述区域中烹调器具区域以外的背景区域是否存在人温度区域，所述烹调器具区域是包括所述烹调器具的预定区域，所述人温度区域是表示人的温度区域，在确认为在所述背景区域存在所述人温度区域的情况下，将表示所述水位的变化的值初始化。

[0076] (8)也可以是，在上述技术方案中，所述通知装置能够由所述用户携带并且具备所述用户能够视觉识别的显示部，所述烹调辅助方法包括：在判定为所算出的表示所述水位的变化的值为预定的阈值以上的情况下，以电子邮件的方式对所述通知装置发送所述通知信息。

[0077] (9)本公开的一技术方案所涉及的烹调辅助系统是经由网络与拍摄包括加热烹调中的烹调器具的区域的热图像的热图像摄像头和能够向用户通知信息的通知装置连接，辅助用户的烹调的烹调辅助系统，具备：数据取得部，其经由所述网络从安装成能够从所述烹调器具的斜上方拍摄热图像的所述热图像摄像头取得每预定时间的包括所述烹调器具的区域的热图像；变化量算出部，其根据所取得的所述热图像，算出表示所述烹调器具中的内容物的水位的变化的值；溢出判定部，其判定所算出的表示所述水位的变化的值是否为预定的阈值以上，在判定为所算出的表示所述水位的变化的值为预定的阈值以上的情况下，判定为在加热烹调中的所述烹调器具中有可能发生所述内容物的溢出；以及通知部，其在所述溢出判定部判定为有可能发生所述内容物的溢出的情况下，对所述通知装置发送表示向所述用户通知有可能发生所述溢出之意的信息的通知信息。

[0078] 此外，这些概括的或者具体的技术方案既可以通过系统、方法、集成电路、计算机程序或者计算机可读取的CD-ROM等记录介质来实现，也可以通过系统、方法、集成电路、计算机程序或者记录介质的任意组合来实现。

[0079] 以下，参照附图对本公开的一技术方案所涉及的烹调辅助方法等进行具体的说明。此外，以下所说明的实施方式均是表示本公开的一具体例的实施方式。以下的实施方式所示出的数值、形状、材料、构成要素、构成要素的配置位置等是一例，其主旨并非限定本公开。另外，对于以下的实施方式的构成要素中的没有在表示最上位概念的独立权利要求中记载的构成要素，将其作为任意的构成要素进行说明。

[0080] (实施方式1)

[0081] [整体构成]

[0082] 以下，参照附图对实施方式1的烹调辅助系统进行说明。

[0083] 图1是表示实施方式1的整体构成的一例的概念图。图2是表示图1所示的热图像摄像头2与烹调器具5的位置关系的概念图。

[0084] 如图1所示，烹调辅助系统1经由网络7连接于热图像摄像头2、加热烹调装置3以及通知装置6，对使用了烹调器具5的用户的烹调进行辅助。

[0085] 加热烹调装置3是能够进行使用了烹调器具5的加热烹调的装置。加热烹调装置3例如是通过不使用燃气或火而仅利用电力进行工作而对烹调器具5进行加热，从而对烹调器具5的内容物进行加热烹调的IH烹调器。此外，加热烹调装置3不限于IH烹调器，在后面进行叙述，若能够按照来自烹调辅助系统1的控制信号使加热烹调停止，则也可以是使用燃气和/或火来进行使用了烹调器具5的加热烹调的烹调器。

[0086] 烹调器具5例如是锅等通过加热烹调装置3对其内容物进行加热烹调的器具。

[0087] 热图像摄像头2安装成能够从烹调器具5的斜上方拍摄热图像，拍摄包括正在对内容物进行加热烹调的烹调器具5的区域的热图像。如图2所示，在本实施方式中，热图像摄像头2通过设置于加热烹调装置3的上方的例如排油烟机4等，安装成能够从烹调器具5的斜上方拍摄热图像，拍摄每预定时间的包括烹调器具5的区域的热图像。

[0088] 通知装置6是能够向用户通知信息的装置。在本实施方式中，通知装置6例如是智能手机、便携电话等用户能够携带并且具备用户能够视觉识别的显示部的装置。此外，通知装置6不限于用户能够携带并且具备用户能够视觉识别的显示部的装置，也可以是能够通过发出声音来向用户通知警告等信息的发声装置。

[0089] 网络7例如是bluetooth(注册商标)、wifi等无线通信网络、无线、有线的LAN等网络。

[0090] [烹调辅助系统1的构成]

[0091] 图3是表示本实施方式的烹调辅助系统1的构成的一例的框图。

[0092] 如图3所示，烹调辅助系统1具备溢出检测部10、通知部20以及加热控制部30。

[0093] 通知部20在由溢出检测部10检测到有发生溢出的(溢出发生的)可能性的情况下，对通知装置6发送表示向用户通知有可能发生溢出之意的信息的通知信息。在本实施方式中，例如，通知部20将有可能发生溢出之意例如以电子邮件的方式对通知装置6发送通知信息。

[0094] 加热控制部30在由溢出检测部10检测到溢出发生的可能性的情况下，对加热烹调装置3发送表示减弱加热烹调装置3的输出的指示的控制信号。在此，控制信号例如也可以表示使加热烹调装置的加热工作停止的指示。

[0095] [溢出检测部10的构成]

[0096] 如图3所示，溢出检测部10具备数据取得部11、高温部分检测部12、烹调器具检测部13、存储部14、变化量算出部15以及溢出判定部16，基于从热图像摄像头2取得的热图像来检测烹调器具5中的内容物发生溢出的可能性。

[0097] 数据取得部11从热图像摄像头2取得每预定时间的包括烹调器具5的区域的热图像。

[0098] 烹调器具检测部13根据数据取得部11取得的热图像来检测烹调器具5是否存在。在本实施方式中，烹调器具检测部13进行将数据取得部11取得的热图像二值化并且平滑化的图像处理，通过在进行了图像处理的热图像中进行对烹调器具5的边缘(缘)的检测处理来检测烹调器具5是否存在。在检测处理成功了的情况下，烹调器具检测部13将数据取得部
11取得的热图像中的烹调器具5的位置信息、和与该烹调器具5对应的能够从热图像取得的温度信息存储于存储部14。

[0099] 高温部分检测部12根据数据取得部11取得的热图像来检测烹调器具5的高温部分。在本实施方式中，高温部分检测部12检测数据取得部11取得的热图像中的例如70℃以上的高温区域，并将检测出的高温区域作为温度信息存储于存储部14。

[0100] 存储部14例如由SD卡和/或闪存构成，存储上述的温度信息(高温区域的热图像)和/或数据取得部11取得的热图像中的烹调器具5的位置信息。

[0101] 变化量算出部15根据数据取得部11取得的热图像来算出表示烹调器具5中的内容物的水位的变化的值。在此，变化量算出部15例如算出表示每预定时间的烹调器具5的热图像中的预定温度以上的区域即预定温度区域的面积的变化的值，作为表示水位的变化的值。在本实施方式中，变化量算出部15根据由烹调器具检测部13检测出的热图像中的烹调器具5中的例如70℃以上的高温区域来检测烹调器具51以及烹调器具5的内容物的水位。另外，变化量算出部15算出所检测出的烹调器具5的内容物的水位(高温区域的上边缘)与由烹调器具检测部13检测出的烹调器具5的边缘(上边缘)之间的差量距离。变化量算出部15将表示所检测出的内容物的水位的信息(高温区域的上边缘)和所算出的差量距离存储于存储部14。在存储部14中存储有表示在预定时间前检测出的内容物的水位的信息的情况下，变化量算出部15算出所检测出的内容物的水位的增加率。在此，变化量算出部15算出表示每预定时间的烹调器具5的热图像中的例如70℃以上的区域即高温区域的面积的变化的增加率，作为内容物的水位的增加率。

[0102] 此外，变化量算出部15也可以算出表示烹调器具5的内容物的热图像的高温区域相对于表示烹调器具5的热图像的区域的比例，作为表示烹调器具5中的内容物的水位的变化的值。

[0103] 溢出判定部16判定变化量算出部15算出的表示水位的变化的值是否为预定的阈值以上。溢出判定部16在判定为变化量算出部15算出的表示水位的变化的值为预定的阈值以上的情况下，判定为在加热烹调中的烹调器具5中有可能发生内容物的溢出。在本实施方式中，溢出判定部16判定变化量算出部15算出的增加率是否为预定的阈值(以下，称为第1阈值)以上。溢出判定部16在判定为变化量算出部15算出的增加率为第1阈值以上时，判定为在加热烹调中的烹调器具5中有可能发生内容物的溢出。

[0104] 此外，也可以是，溢出判定部16在判定为变化量算出部15算出的增加率为第1阈值以上时，进一步判定所算出的增加率是否为第2阈值以上。也可以是，溢出判定部16在判定为所算出的增加率为第2阈值以上的情况下，例如判定数秒以内在加热烹调中的烹调器具5中会实际发生内容物的溢出这一溢出发生。另外，也可以是，溢出判定部16在判定为所算出的增加率小于第2阈值的情况下，例如判定数十秒至数分钟以内在加热烹调中的烹调器具5中有可能发生内容物的溢出这一溢出预测。

[0105] 此外，如上所述，变化量算出部15也可以算出表示烹调器具5的内容物的热图像的高温区域相对于表示烹调器具5的热图像的区域的比例，作为表示烹调器具5中的内容物的水位的变化的值。在该情况下，溢出判定部16也可以在表示加热烹调中的烹调器具5的内容物的热图像的高温区域为表示烹调器具5的热图像的区域的50％～80％时，判定溢出预测。并且，溢出判定部16也可以在表示加热烹调中的烹调器具5的内容物的热图像的高温区域超过了表示烹调器具5的热图像的区域的80％时，判定溢出发生。

[0106] [烹调辅助系统1的工作]

[0107] 接下来，对像上述那样构成的烹调辅助系统1的工作进行说明。

[0108] 图4是表示实施方式1的烹调辅助系统1的工作的一例的流程图。

[0109] 首先，烹调辅助系统1进行经由网络7从热图像摄像头2取得每预定时间的包括烹调器具5的区域的热图像的热图像取得处理(S1)。

[0110] 接下来，烹调辅助系统1基于在S1取得的热图像来进行检测烹调器具5的烹调器具检测处理(S3)。在此，使用图5对烹调器具检测处理的详情进行说明。图5是表示图4中的S3的详细工作的一例的流程图。

[0111] 如图5所示，烹调辅助系统1首先对所取得的热图像进行二值化处理(S32)，并且进行平滑化处理(S33)。此外，因为二值化处理以及平滑化处理的图像处理是已知的，所以省略此处的说明。接下来，烹调辅助系统1对在S32以及S33进行了图像处理的热图像进行对烹调器具5的边缘(缘)的检测处理(S34)。在此，烹调器具5例如是锅的话其边缘例如是圆形。即，能够利用圆形、椭圆、直线等烹调器具5的边(edge)的特征来检测烹调器具5的边缘。此外，即使烹调器具5为多个也能够利用边的特征来分别进行检测。接下来，烹调辅助系统1在对烹调器具5的边缘的检测处理成功了的情况下(S35：是)，将检测处理成功了的烹调器具5(相应的烹调器具5)在所取得的热图像中的位置信息和与相应的烹调器具5对应的能够从热图像取得的温度信息存储于存储部14(S36)。在此，存储于存储部14的温度信息也可以是与相应的烹调器具5对应的位置的热图像。此外，烹调辅助系统1在对烹调器具5的边缘的检测处理失败了的情况下(S35：否)，返回S1从热图像取得处理起重新进行处理。

[0112] 接下来，烹调辅助系统1进行溢出判定处理(S5)。在此，使用图6对溢出判定处理的详情进行说明。图6是表示图4中的S5的详细工作的一例的流程图。图7是表示实施方式1的烹调器具中的高温部分的一例的图。图8A以及图8B是表示比较例的烹调器具中的高温部分的一例的图。在图7～图8B中，烹调器具51以及烹调器具52是烹调器具5的一例，分别表示不锈钢制的锅以及珐琅制的锅。

[0113] 如图6所示，烹调辅助系统1首先基于在S1取得的热图像，根据烹调器具5中的高温部分来检测内容物的水位(S51)。烹调辅助系统1例如能够根据如图7所示的在S3中检测出的热图像中的烹调器具51以及烹调器具52中(锅中)的例如70℃以上的高温区域(图中的影线(hatching)部分)来检测烹调器具51以及烹调器具52的内容物的水位。由于热图像摄像头2安装成能够从烹调器具51、52的斜上方拍摄热图像，拍摄包括加热烹调中的烹调器具51以及52的区域的热图像，所以能够根据70℃以上的高温区域的周缘来检测烹调器具51以及烹调器具52的内容物的水位。另一方面，例如，如图8A所示，在从侧面拍摄烹调器具51以及烹调器具52而得到的比较例的热图像中，能够根据作为珐琅制的锅的烹调器具52来识别70℃以上的高温区域(图中的影线部分)，所以能够检测内容物的水位。但是，无法根据作为不锈钢制的锅的烹调器具51来识别70℃以上的高温区域，所以无法检测内容物的水位。另外，例如，如图8B所示，在从上面拍摄烹调器具51以及烹调器具52而得到的比较例的热图像中，能够根据烹调器具51以及烹调器具52来识别70℃以上的高温区域(图中的影线部分)。但是，由于高温区域的周缘与烹调器具51以及烹调器具52的边缘没有高度差，所以无法准确地检测这些内容物的水位。

[0114] 接下来，烹调辅助系统1算出在S51检测出的烹调器具5的内容物的水位与烹调器具5的边缘(上边缘)之间的差量距离(S52)。在本实施方式中，烹调辅助系统1算出表示在S51检测出的烹调器具5的内容物的水位的70℃以上的高温区域的周缘与在S3检测并存储于存储部14的烹调器具5的位置信息所表示的烹调器具5的边缘之间的差量距离。

[0115] 接下来，烹调辅助系统1确认存储部14中是否存储有表示在预定时间前检测出的内容物的水位的信息(S53)。在此，表示在预定时间前检测出的内容物的水位的信息例如是表示70℃以上的高温区域的周缘的热图像。此外，烹调辅助系统1在确认了存储部14中没有存储表示在预定时间前检测出的内容物的水位的信息的情况下(S53：否)，将表示在S51检测出的内容物的水位的信息和在S52算出的差量距离存储于存储部14(S55)。

[0116] 在S53中，烹调辅助系统1在确认了存储部14中存储有表示在预定时间前检测出的内容物的水位的信息的情况下(S53：是)，算出在S51检测出的内容物的水位的增加率(S54)。在此，在S51检测出的内容物的水位的增加率与表示烹调器具5中的内容物的水位的变化的值对应，并根据表示每预定时间的烹调器具5的热图像中的例如70℃以上的高温区域的面积的变化的增加率而算出。

[0117] 接下来，烹调辅助系统1判定在S54算出的增加率是否为第1阈值(预定的阈值)以上(S56)。此外，当在S54算出的增加率小于第1阈值时(S56：否)，前进至S55，将表示在S51检测出的内容物的水位的信息和在S52算出的差量距离存储于存储部14。

[0118] 接下来，在S56中，烹调辅助系统1在判定为在S54算出的增加率为第1阈值以上时(S56：是)，判定为在加热烹调中的烹调器具5中有可能发生内容物的溢出，进一步判定在S54算出的增加率是否为第2阈值以上(S57)。

[0119] 烹调辅助系统1在判定为在S54算出的增加率为第2阈值以上的情况下(S57：是)，判定溢出发生(S58)。在此，如上所述，溢出发生例如是指数秒以内在加热烹调中的烹调器具5中会发生内容物的溢出。另一方面，烹调辅助系统1在判定为在S54算出的增加率小于第2阈值的情况下(S57：否)，判定溢出预测(S59)。此外，如上所述，溢出预测例如是指数十秒至数分钟以内在加热烹调中的烹调器具5中有可能(可能性)发生内容物的溢出。

[0120] 以下，返回图4继续进行说明。

[0121] 接下来，烹调辅助系统1在由S5判定有可能发生溢出的情况下，进行对通知装置6发送通知信息的通知处理，所述通知信息表示向用户通知有可能发生溢出之意的信息(S7)。

[0122] 接下来，烹调辅助系统1在由S5判定有可能发生溢出的情况下，进行对加热烹调装置3发送表示减弱加热烹调装置3的输出的指示的控制信号的加热控制处理(S9)。在此，使用图9对加热控制处理的详情进行说明。图9是表示图4中的S9的详细工作的一例的流程图。

[0123] 如图9所示，烹调辅助系统1首先确认在S5的溢出判定处理中是否判定为溢出发生(S91)。

[0124] 在S91中，烹调辅助系统1在确认了判定为溢出发生的情况下(S91：是)，使加热烹调装置3的加热工作停止(S92)，向加热烹调装置3的用户通知会发生溢出之意(S93)。在本实施方式中，烹调辅助系统1对加热烹调装置3发送表示使加热烹调装置3的加热工作停止的指示的控制信号，从而使加热烹调装置3的加热工作停止。另外，烹调辅助系统1通过对通知装置6发送表示向用户通知会发生溢出之意的信息的通知信息，从而向用户通知会发生溢出之意。此外，可以先进行S92和S93中的任一个。

[0125] 在S91中，烹调辅助系统1在确认了没有判定为溢出发生的情况下(S91：否)，确认在S5的溢出判定处理中是否判定为溢出预测(S94)。在S94中，烹调辅助系统1在确认了判定为溢出预测的情况下(S94：是)，控制加热烹调装置3的火力(S95)，向加热烹调装置3的用户通知溢出预测(S96)。在本实施方式中，烹调辅助系统1对加热烹调装置3发送表示减弱加热烹调装置3的输出的指示的控制信号，从而控制加热烹调装置3的火力。另外，烹调辅助系统1通过对通知装置6发送表示向用户通知溢出预测的信息的通知信息，从而向用户通知溢出预测。此外，可以先进行S95和S96中的任一个。另外，在S94中，烹调辅助系统1在确认了没有判定为溢出预测的情况下(S94：否)，前进至S1，从热图像取得处理起重新进行处理。

[0126] [实施方式1的效果等]

[0127] 如上所述，根据本实施方式的烹调辅助系统以及烹调辅助方法，通过使用从烹调器具5的斜上方拍摄到的热图像，不论烹调器具5的材质如何都能够事先检测并防止烹调器具5中的内容物发生溢出。

[0128] 作为比较例，例如，在使用从侧面拍摄烹调器具5而得到的热图像的情况下，当烹调器具5为不锈钢制的锅等热传导率低的器具时，无法根据热图像取得温度信息，所以无法检测内容物的水位而进行溢出判定。进而，即使烹调器具5是珐琅制的锅等热传导率高的器具，在从热图像摄像头2观察，在加热烹调装置3并排地排列了多个烹调器具5的情况下，也无法根据热图像取得多个烹调器具5各自的温度信息，因此，无法检测内容物的水位。

[0129] 另外，例如，在使用从正上方(上方)拍摄烹调器具5而得到的热图像的情况下，即使烹调器具5为不锈钢制的锅等热传导率低的器具，也能够检测内容物的温度信息。但是，在内容物的温度低的初期拍摄时，难以区分所取得的热图像中的加热烹调装置3和烹调器具5，因此，烹调器具5的边缘的检测精度变差，无法准确地取得烹调器具5的内容物的温度信息。进而，在使用从正上方(上方)拍摄烹调器具5而得到的热图像的情况下，难以区分内容物的上边缘与烹调器具5的边缘，因此，无法根据热图像来精度良好地检测内容物的水位。因此，在使用从正上方(上方)拍摄烹调器具5而得到的热图像的情况下，无法精度良好地进行溢出判定。

[0130] 与此相对，根据本实施方式的烹调辅助系统以及烹调辅助方法，由于使用从斜上方(斜上角度)拍摄烹调器具5而得到的热图像，所以不论烹调器具5的材质如何都容易区分内容物的上边缘与烹调器具5的边缘。因此，由于容易更准确地检测内容物的水位，也容易算出内容物的水位的变化量(水位的移动)，所以能够精度良好地进行溢出判定。由此，不论烹调器具5的材质如何都能够事先检测并防止烹调器具5中的内容物的溢出的发生。

[0131] (实施方式2)

[0132] 在实施方式1中，对例如锅等烹调器具5没有被盖上盖的情况下的烹调辅助方法以及烹调辅助系统进行了说明，但不限于此。在实施方式2中，对考虑了对烹调器具5盖上盖的情况的烹调辅助方法以及烹调辅助系统进行说明。以下，省略对与实施方式1相同的点的说明，以与实施方式1不同的点为中心进行说明。

[0133] [烹调辅助系统1A的构成]

[0134] 图10是表示实施方式2的烹调辅助系统1A的构成的一例的框图。对与图3同样的要素标注同一附图标记，并且省略详细的说明。

[0135] 如图10所示，烹调辅助系统1A具备溢出检测部10A、通知部20以及加热控制部30。图10所示的烹调辅助系统1A相对于实施方式1的烹调辅助系统1而言，溢出检测部10A的构成不同。其他的构成与实施方式1是同样的，所以省略此处的说明。

[0136] [溢出检测部10A的构成]

[0137] 如图10所示，溢出检测部10A具备数据取得部11、高温部分检测部12、烹调器具检测部13、存储部14、变化量算出部15A、溢出判定部16A以及盖判定部17，基于从热图像摄像头2取得的热图像来检测烹调器具5中的内容物发生溢出的可能性。更具体而言，图10所示的溢出检测部10A相对于实施方式1的溢出检测部10而言追加了盖判定部17，并且变化量算出部15A以及溢出判定部16A的构成不同。

[0138] 盖判定部17基于热图像来判定在加热烹调中的烹调器具5是否安装有盖。盖判定部17在判定为在加热烹调中的烹调器具5安装有盖的情况下，进一步基于热图像来检测烹调器具5的盖的缘端部。

[0139] 变化量算出部15A，在盖判定部17判定为在加热烹调中的烹调器具5安装有盖的情况下，算出由盖判定部17检测出的缘端部的温度变化的值，作为表示烹调器具5的内容物的水位的变化的值。在此，变化量算出部15A，算出表示每预定时间的在烹调器具5的热图像中的存在于缘端部的附近的、预定温度以上的区域的面积的变化的值，作为缘端部的温度变化的值。

[0140] 溢出判定部16A判定变化量算出部15A算出的表示水位的变化的值是否为预定的阈值以上。更具体而言，在由盖判定部17判定为在加热烹调中的烹调器具5安装有盖的情况下，溢出判定部16A判定由变化量算出部15A算出的缘端部的温度变化的值是否为预定的阈值(第4阈值)以上。溢出判定部16A在判定为变化量算出部15A算出的缘端部的温度变化的值为预定的阈值(第4阈值)以上的情况下，判定为在加热烹调中的烹调器具5中有可能发生内容物的溢出。

[0141] [烹调辅助系统1A的工作]

[0142] 接下来，对像上述那样构成的烹调辅助系统1A的工作进行说明。

[0143] 图11是表示实施方式2的烹调辅助系统1A的工作的一例的流程图。对与图4同样的要素标注同一附图标记，并且省略详细的说明。

[0144] 首先，烹调辅助系统1A进行经由网络7从热图像摄像头2取得每预定时间的包括烹调器具5的区域的热图像的热图像取得处理(S1)。

[0145] 接下来，烹调辅助系统1A进行基于在S1取得的热图像来检测烹调器具5的烹调器具检测处理(S3)。

[0146] 接下来，烹调辅助系统1A基于在S1取得的热图像来进行对烹调器具5的盖检测处理(S4)。在此，使用图12对盖检测处理的详情进行说明。图12是表示图11中的S4的详细工作的一例的流程图。

[0147] 如图12所示，烹调辅助系统1A首先从存储部14取得在S3存储的烹调器具5的位置信息和温度信息(S41)。烹调辅助系统1A在经过预定时间后(S42：是)取得烹调器具5的最新的温度信息(S43)。在本实施方式中，烹调器具5的最新的温度信息是高温部分检测部12检测并存储于存储部14的最新的高温区域的热图像。接下来，烹调辅助系统1A算出上次温度与最新温度之差即变化量(S44)。更具体而言，烹调辅助系统1A根据在S41以及S43取得的烹调器具5的预定时间前的高温区域的热图像(上次的温度信息)和烹调器具5的预定时间后的高温区域的热图像(最新的温度信息)，算出上次的温度信息与最新的温度信息之差即变化量。接下来，烹调辅助系统1A判定所算出的变化量是否为阈值(第3阈值)以上(S45)。在S45中，烹调辅助系统1A在判定为在S44算出的变化量为第3阈值以上时(S45：是)，做出无盖判定即判定为没有对烹调器具5盖上盖(盖子)(S46)。另一方面，在判定为在S44算出的变化量小于第3阈值时(S45：否)，做出有盖判定即判定为对烹调器具5盖上了盖(盖子)(S47)。最后，烹调辅助系统1A将S45的判定结果即烹调器具5的盖信息存储于存储部14(S48)。

[0148] 接下来，烹调辅助系统1A进行溢出判定处理(S5A)。在此，使用图13对烹调辅助系统1A进行的溢出判定处理的详情进行说明。图13是表示图11中的S5A的详细工作的一例的流程图。

[0149] 如图13所示，烹调辅助系统1A首先从存储部14取得在S4存储的烹调器具5的盖信息(S501)，判定是否对烹调器具5盖上了盖(S502)。

[0150] 在S502(S502)中烹调辅助系统1A判定为没有对烹调器具5盖上盖的情况下(S502：否)，前进至图6所示的S51，进行利用图6所示的S51～S59说明的溢出判定处理。

[0151] 另一方面，在S502(S502)中烹调辅助系统1A判定为对烹调器具5盖上了盖的情况下(S502：是)，将烹调器具5的边缘的温度信息存储于存储部14(S503)。在本实施方式中，烹调辅助系统1A基于从存储部14取得的烹调器具5的位置信息来确定热图像中的烹调器具5的边缘(缘端部)的位置。然后，烹调辅助系统1A从取自存储部14的温度信息(热图像)中提取烹调器具5的该边缘的位置处的温度信息(热图像)，作为烹调器具5的边缘的温度信息(热图像)而存储于存储部14。此外，烹调器具5的该边缘(缘端部)的位置是包括该边缘的该边缘附近的位置即可，也可以是包括该边缘的所述边缘的外侧、内侧以及从所述边缘稍微离开的外侧。

[0152] 接下来，烹调辅助系统1A确认存储部14中是否存储有预定时间前的该边缘的温度信息(S504)。此外，在S504中烹调辅助系统1A确认为存储部14中没有存储预定时间前的该边缘的温度信息的情况下(S504：否)，前进至图11所示的S1，从热图像取得处理起重新进行处理。

[0153] 另一方面，在S504中烹调辅助系统1A确认为存储部14中存储有预定时间前的该边缘的温度信息的情况下(S504：是)，算出该边缘的从上次温度起的变化量(S505)。更具体而言，烹调辅助系统1A根据预定时间前的该边缘的热图像(上次温度)和预定时间后的该边缘的热图像(最新温度)来算出上次温度与最新温度之差即变化量。

[0154] 接下来，烹调辅助系统1A判定所算出的变化量是否为阈值(第4阈值)以上(S506)。当判定为在S505算出的变化量小于第4阈值时(S506：否)，前进至图11所示的S1，从热图像取得处理起重新进行处理。

[0155] 另一方面，在S506中烹调辅助系统1A判定为在S505算出的变化量为第4阈值以上时(S506：是)，判定溢出发生(S507)。如上所述，该溢出发生例如是指数秒以内在加热烹调中的烹调器具5中会发生内容物的溢出这一情况。此外，也可以是，烹调辅助系统1A在该边缘(缘端部)的位置附近的热图像中发现了75℃以上的温度区域的情况下，判定为在S505算出的变化量为第4阈值以上。另外，也可以是，在取决于烹调器具5的材质而在该边缘(缘端部)的位置附近的热图像中75℃以上的温度区域的形状发生了变化(变得不为圆形)的情况下，判定为在S505算出的变化量为第4阈值以上。

[0156] 在此，使用图14和图15对能够像这样判定的理由进行说明。

[0157] 图14以及图15是表示实施方式2中的在对烹调器具盖上盖的情况下到发生溢出为止的情形的一例的热图像图。在图14以及图15中，烹调器具51以及烹调器具52与上述同样是烹调器具5的一例，分别表示不锈钢制的锅以及珐琅制的锅。另外，对烹调器具51盖上了盖51a，对烹调器具52盖上了盖52a。

[0158] 例如，如图14的(a)所示，在沸腾前对烹调器具51盖上了盖51a时，在热图像中没有出现70℃以上的高温区域。另一方面，如图14的(b)所示，在有可能发生溢出时，在盖51a的边缘(缘端部)的附近的一部分出现了70℃以上的高温区域(图中的影线部分)。此外，该高温区域与来自烹调器具51与盖51a的间隙的气泡溢出对应。之后，如图14的(c)、(d)所示，边缘的一部分的70℃以上的高温区域(图中的影线部分)变大，气泡溢出的程度变大并实际发生溢出。这样，由于溢出发生并发展下去，所以在盖51a的边缘的附近发现了75℃以上的温度区域的情况下，能够判定溢出发生。

[0159] 此外，对于图15所示的珐琅制的锅即盖上了盖52a的烹调器具52而言也可以说是同样的情况。但是，在烹调器具为珐琅制的情况下，根据热图像可知烹调器具5的温度变化。更具体而言，例如如图15的(a)所示，在沸腾前对烹调器具52盖上了盖52a时，在热图像中没有出现70℃以上的高温区域。另一方面，如图15的(b)所示，在蒸汽产生时刻，由于烹调器具
52内的蒸汽，盖52a的一部分被加热，在盖52a的一部分出现70℃以上的高温区域(图中的影线部分)。并且，如图15的(c)所示，在有可能发生溢出时，在整个盖52a出现了70℃以上的高温区域(图中的影线部分)。这是因为，烹调器具52内的内容物的水位上升至盖52a附近，处于即将发生溢出之前。之后，如图15的(d)所示，遍及整个盖52a的70℃以上的高温区域(图中的影线部分)的形状发生变化，实际发生了溢出。之所以发生这样的热图像上的形状的变化是因为，来自烹调器具52与盖52a的间隙的气泡溢出的程度变大而将盖52a顶上去，内容物的一部分从烹调器具52溢出。这样，由于发生溢出，所以不限于在盖52a的边缘的位置附近发现了75℃以上的温度区域的情况，在该边缘的位置附近的预定温度以上的区域的形状发生了变化(变得不为圆形)的情况下也能够判定溢出发生。

[0160] [实施方式2的效果等]

[0161] 如上所述，在对例如不锈钢制的锅等热传导率低的烹调器具5盖上了盖子时，无法根据热图像直接检测内容物的水位来进行溢出判定。但是，根据本实施方式的烹调辅助系统以及烹调辅助方法，通过检测表示在盖子的边缘(缘端部分)出现的气泡溢出的热图像的高温部分和/或在整个盖子出现的热图像的高温部分的变形来作为内容物的水位，能够进行溢出判定。由此，不论烹调器具5的材质如何都能够事先检测并防止烹调器具5中的内容物的溢出的发生。

[0162] (实施方式3)

[0163] 在实施方式1以及2中对到烹调器具5的溢出发生为止不人为干预的情况下的烹调辅助方法以及烹调辅助系统进行了说明，但不限于此。在实施方式3中，对考虑了用户(人)搅拌内容物、打开盖并干预烹调器具5的情况的烹调辅助方法以及烹调辅助系统进行说明。以下，省略对与实施方式1以及2相同的点的说明，以与实施方式1以及2不同的点为中心进行说明。

[0164] [烹调辅助系统1B的构成]

[0165] 图16是表示实施方式3的烹调辅助系统1B的构成的一例的框图。对与图3以及图10同样的要素标注同一附图标记，并且省略详细的说明。

[0166] 如图16所示，烹调辅助系统1B具备溢出检测部10B、通知部20以及加热控制部30。图16所示的烹调辅助系统1B相对于实施方式2的烹调辅助系统1A而言溢出检测部10B的构成不同。其他的构成与实施方式2是同样的，所以省略此处的说明。

[0167] [溢出检测部10B的构成]

[0168] 如图16所示，溢出检测部10B具备数据取得部11、高温部分检测部12、烹调器具检测部13、存储部14、变化量算出部15A、溢出判定部16B、盖判定部17以及有无人检测部18，基于从热图像摄像头2取得的热图像来检测烹调器具5中的内容物发生溢出的可能性。更具体而言，图16所示的溢出检测部10B相对于实施方式2的溢出检测部10A而言追加了有无人检测部18，并且溢出判定部16B的构成不同。

[0169] 有无人检测部18确认在数据取得部11所取得的热图像的该区域中，在包括烹调器具5的预定区域即烹调器具区域以外的背景区域是否存在表示人的温度区域即人温度区域。这样一来，有无人检测部18检测在数据取得部11取得的热图像的背景区域中有无人。

[0170] 溢出判定部16B判定变化量算出部15A算出的表示水位的变化的值是否为预定的阈值以上。更具体而言，在有无人检测部18确认为在背景区域存在人温度区域的情况下，溢出判定部16B将表示烹调器具5中的内容物的水位的变化的值初始化。此外，在有无人检测部18无法确认为在背景区域存在人温度区域的情况下，即，确认了在背景区域没有人的情况下的溢出判定部16B的工作与在实施方式2说明的溢出判定部16A是同样的，所以省略此处的说明。

[0171] [烹调辅助系统1B的工作]

[0172] 接下来，对像上述那样构成的烹调辅助系统1B的工作进行说明。

[0173] 图17是表示实施方式3的烹调辅助系统1B的工作的一例的流程图。对与图4以及图11同样的要素标注同一附图标记，并且省略详细的说明。

[0174] 首先，烹调辅助系统1B进行热图像取得处理(S1B)。更具体而言，烹调辅助系统1B经由网络7从热图像摄像头2取得每预定时间的包括烹调器具5的区域的热图像(S11)，进行按区域区分的热图像生成处理(S12)。在此，使用图18以及图19对各区域热图像生成处理的详情进行说明。图18是表示图17中的S12的详细工作的一例的流程图。图19是用于说明在图17中的S12生成的按区域区分的热图像的图。如图18所示，烹调辅助系统1B首先将在S11取得的每预定时间的包括烹调器具5的区域的热图像分离成包括烹调器具5的预定区域即烹调器具区域和烹调器具区域以外的背景区域(S121)。在图19所示的例子中，烹调辅助系统
1B将在S11取得的包括烹调器具5(未图示)的区域的热图像200分离成烹调器具区域201和背景区域202。接下来，烹调辅助系统1B算出烹调器具区域内和背景区域内的平均温度(S122)。接下来，烹调辅助系统1B制作烹调器具区域的热图像和背景区域的热图像(S123)。
此外，S122与S123的处理的顺序也可以相反。

[0175] 接下来，烹调辅助系统1B使用在S1B制作而成的背景区域的热图像来进行人检测处理(S2B)。在此，使用图20对人检测处理的详情进行说明。图20是表示图17中的S2B的详细工作的一例的流程图。如图20所示，烹调辅助系统1B首先取得在S12制作而成的每预定时间的背景区域的热图像(S201)。接下来，烹调辅助系统1B确认在所取得的背景区域的热图像中是否存在接近人的体温的温度区域，即表示人的温度区域(S202)。

[0176] 在S202中，烹调辅助系统1B在所取得的背景区域的热图像中没有表示人的温度区域的情况下(S202：否)，前进至S3的处理。另一方面，在S202中，烹调辅助系统1B在确认了所取得的背景区域的热图像中存在表示人的温度区域的情况下(S202：是)，进一步确认是否是溢出预测的判定后(S203)。

[0177] 在S203中，烹调辅助系统1B在确认了不是溢出预测的判定后的情况下(S203：否)，返回S1B进行热图像取得处理。另一方面，在S203中，烹调辅助系统1B在确认了是溢出预测的判定后的情况下(S203：是)，将用于溢出判定的信息初始化(S204)，并且返回S1B重新进行热图像取得处理。在本实施方式中，在S204中，烹调辅助系统1B将存储于存储部14中的表示烹调器具5中的内容物的水位的变化的值初始化。也可以是，例如在存储部14中存储有烹调器具5中的预定时间前的高温部分的热图像来作为表示在预定时间前检测出的烹调器具5中的内容物的水位的信息的情况下，删除该预定时间前的高温部分的热图像。另外，也可以是，例如在存储部14中存储有烹调器具5的内容物的水位的增加率来作为表示烹调器具5中的内容物的水位的变化的值的情况下，将该增加率设为0。另外，也可以是，在存储部14中存储有预定时间前的该边缘的温度信息(热图像)来作为表示烹调器具5中的内容物的水位的变化的值的情况下，删除预定时间前的该边缘的温度信息。

[0178] 以下，返回图17继续进行说明。

[0179] 接下来，烹调辅助系统1B基于在S1B制作而成的背景区域的热图像进行检测烹调器具5的烹调器具检测处理(S3B)。在此，使用图21对S3B的烹调器具检测处理的详情进行说明。图21是表示图17中的S3B的详细工作的一例的流程图。如图21所示，烹调辅助系统1B首先取得在S1B中制作而成的烹调器具区域的热图像(S301)。接下来，对在S301取得的烹调器具区域的热图像进行二值化处理(S302)，并且进行平滑化处理(S303)。此外，S302和S303的处理与在实施方式1说明的图5的S32和S33是同样的。另外，S303～306的处理也与在实施方式1说明的图5的S33～S36是同样的，所以省略此处的说明。

[0180] 接下来，烹调辅助系统1B基于在S1B中制作而成的烹调器具区域的热图像进行对烹调器具5的盖检测处理(S4)。S4～S9的处理如在实施方式2说明的那样，所以省略以后的说明。

[0181] [实施方式2的效果等]

[0182] 如上所述，根据本实施方式的烹调辅助系统以及烹调辅助方法，在考虑了用户(人)搅拌内容物、打开盖而干预烹调器具5的情况的基础上，不论烹调器具5的材质如何都能够事先检测并防止烹调器具5中的内容物的溢出的发生。

[0183] 此外，在上述的实施方式中，将热图像摄像头2拍摄到的热图像中的包括烹调器具5的预定区域作为烹调器具区域、将烹调器具区域以外的区域作为背景区域进行了说明，但不限于此。关于背景区域，也可以将热图像中的表示加热烹调装置3的区域设为烹调器具区域、将表示加热烹调装置3的区域以外的区域设为背景区域。

[0184] 以上，基于实施方式对本公开的一个或多个技术方案所涉及的烹调辅助方法以及烹调辅助系统进行了说明，但本公开不限定于该实施方式。只要不脱离本公开的主旨，将本领域技术人员想到的各种变形应用于本实施方式和/或者将不同实施方式中的构成要素组合构成的方式也可以包含在本公开的一个或多个技术方案的范围内。例如，如下的情况也包括在本公开中。

[0185] (1)在上述的实施方式1～3中，对烹调辅助系统以及烹调辅助方法从热图像摄像头2取得每预定时间的包括烹调器具5的区域的热图像来判定发生溢出的可能性进行了说明，但不限于此。

[0186] 例如，也可以是，若烹调器具5中的内容物开始沸腾，则以比上述的预定时间短的时间间隔来取得包括烹调器具5的区域的热图像来判定发生溢出的可能性。由此，能够进一步提高对溢出发生的判定精度。

[0187] (2)另外，也认为，根据烹调器具5的种类、材质，内容物的温度的变化和/或内容物的水位的变化的模式不同。因此，也可以使用学习数据来判定发生溢出的可能性，所述学习数据预先学习了烹调器具5的内容物的温度和/或水位的变化的模式与烹调器具5的加热状态的对应。尤其是，在对烹调器具5盖上了盖的情况下，即将发生溢出之前的，附着于盖的缘端的气泡的大小和/或移动是不一样的。因此，通过预先学习烹调器具5的内容物的温度和/或水位的变化的模式与烹调器具5的加热状态的对应，可以预见到对溢出发生的判定精度的提高。

[0188] 此外，学习数据可以存储于配置于本地(local)即烹调辅助系统的特定的装置内。另外，也可以从配置于与本地的装置不同的场所的云服务器等取得学习数据。

[0189] 另外，在使用学习数据的情况下，认为，也可以不限于热图像而使用通常的图像来判定发生溢出的可能性。这是因为，能够预先学习烹调器具5的内容物的温度和/或水位的变化的模式与通常的图像中的烹调器具5的加热状态的对应。

[0190] (3)上述的各装置具体而言是由微处理器、ROM、RAM、硬盘单元、显示单元、键盘、鼠标等构成的计算机系统。所述RAM或者硬盘单元中存储有计算机程序。通过所述微处理器按照所述计算机程序工作，各装置实现其功能。在此，计算机程序是为了实现预定的功能而将表示对计算机的指令的多个命令码进行组合而构成的。

[0191] (4)构成上述的各装置的构成要素的一部分或者全部可以由1个系统LSI(Large Scale Integration：大规模集成电路)构成。系统LSI是在1个芯片上集成多个构成部而制造出的超多功能LSI，具体而言，是包括微处理器、ROM、RAM等而构成的计算机系统。所述RAM中存储有计算机程序。通过所述微处理器按照所述计算机程序工作，系统LSI实现其功能。

[0192] (5)构成上述的各装置的构成要素的一部分或者全部也可以由能够相对于各装置拆装的IC卡或单个模块构成。所述IC卡或所述模块是由微处理器、ROM、RAM等构成的计算机系统。所述IC卡或所述模块也可以包括上述的超多功能LSI。通过微处理器按照计算机程序工作，所述IC卡或者所述模块实现其功能。该IC卡或该模块也可以具有防篡改性能。

[0193] (6)本公开可以是在上述内容中示出的方法。另外，也可以是通过计算机实现这些方法的计算机程序，还可以是由所述计算机程序构成的数字信号。

[0194] 另外，本公开也可以将所述计算机程序或所述数字信号记录于计算机可读取的记录介质，例如，软盘(Floppy Disk)、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray(注册商标)Disc：蓝光盘)、半导体存储器等。另外，也可以是记录于这些记录介质的所述数字信号。

[0195] 另外，本公开也可以经由电气通信线路、无线或有线通信线路、以互联网为代表的网络、数据广播等来传送所述计算机程序或所述数字信号。

[0196] 另外，也可以是，本公开是具备微处理器和存储器的计算机系统，所述存储器存储有上述计算机程序，所述微处理器按照所述计算机程序工作。

[0197] 另外，也可以是，通过将所述程序或所述数字信号记录于所述记录介质并进行转移、或者通过经由所述网络等转移所述程序或所述数字信号，从而通过独立的其他计算机系统实施所述程序或所述数字信号。

[0198] (7)也可以分别组合上述实施方式。