技术领域
[0001] 本公开涉及相机控制领域,尤其涉及一种相机控制方法、装置及介质系统。
相关背景技术
[0002] 对相机进行控制是现在拍照过程中的一个操作需求,其目的是在不影响或提升相机拍照质量的前提下,尽可能的利用工具(自拍杆、三脚架等)或者自动化识别方法(手势识别、动作识别、微笑识别)控制相机操作,以达到拍摄者的一起合影、捕捉精彩瞬间等需求。
[0003] 目前关于相机控制的方法如下方法:
[0004] (1)基于传统手机拍照界面的拍摄方法。这种方法同质化高,并且在横持手机时,需要使用右手拇指控制后置拍摄。拇指做动作时候,其控制的“拇指对掌肌”同时也是支撑手机的肌肉,在拍摄时两块肌肉联动会引入手机取景的偏移,在精细地方会引入模糊。此外,与屏幕接触也会引入手机震动,在精细地方会引入模糊。
[0005] (2)基于自拍杆、三脚架或者遥控的远程控制相机的方法。这种方法基于硬件的实现需要增加设备,有附加成本。并且,拍照时不能直接看到拍照效果,且主体物(通常是人)需要与相机预定义的采集背景范围一致。
[0006] (3)基于手势、笑容等人体特征对相机控制的方法。这种方法中,手掌在采集图像中占有主体位置,并且采集场景很受限,通常采集场景是距离镜头很近的人。
具体实施方式
[0071] 这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
[0072] 以使用手机上的相机拍照为例,在用户双手横持手机拍照时,现有设计都是右手拇指按屏幕对应位置实现变焦、拍照功能,采用这种方式时,拇指在运动过程中会调动掌心肌肉,这块肌肉是支撑手机的部分,会引入手机抖动。另外,在手指触摸屏幕拍照时刻会使手机受到瞬间冲击,进而相机抖动,容易引入照片模糊。在使用自拍杆等工具进行拍摄时,会额外增加硬件成本。
[0073] 本公开提出了一种基于手指动作控制相机操作的方法。在该方法中,通过相机的镜头捕捉到多个图像帧,图像帧中包含手指图像;获取按照捕捉各图像帧的时间顺序排列的各图像帧中的手指位置;基于手指位置确定相机操作并执行该相机操作。即,通过手指在镜头前移动来控制相机的操作。采用该方法,通过手指在相机镜头前的移动就可以实现对相机操作的控制,有效地减少了手指在屏幕上操作给相机带来的震动的影响。
[0074] 本公开的方法适用配置有相机的电子产品,例如手机、PAD、穿戴式设备等。
[0075] 本公开提供了一种相机控制方法。图1是根据一示例性实施例示出的一种相机控制方法的流程图,包括以下步骤:
[0076] 步骤101,通过相机的镜头捕捉到多个图像帧,所述图像帧中包含手指图像;
[0077] 步骤102,获取按照捕捉各图像帧的时间顺序排列的各图像帧中的手指位置;
[0078] 步骤103,基于所述手指位置确定相机操作;
[0079] 步骤104,执行所述相机操作。
[0080] 在步骤101中,打开相机镜头,相机镜头捕捉其前面的图像帧。可以设置为每秒生成10帧图像帧。通过图像识别技术可以判断图像帧中是否出现手指。当图像帧中出现手指时,则认为用户将通过手指控制相机操作,则执行后续的步骤。
[0081] 步骤102中,获取各图像帧中的手指位置,并且是按照镜头捕捉到各图像帧的时间顺序排列的手指位置。当手指在镜头前移动时,通过镜头捕捉的图像帧,可以获取手指移动过程中的各个时刻所处的位置。例如,当每秒生成10个图像帧时,每秒生成10个手指位置,这10个手指位置分别对应于不同的时刻,即生成图像帧的时刻。另外,这里按照顺序排列的手指位置可以通过这些手指位置及其对应的时刻来获得;也可以直接按照手指位置生成的时间顺序来排列这些手指位置。
[0082] 步骤103和104中,通过获取的手指位置信息,基于预先设置的规则,判断该手指动作对应的相机操作,并指示相机执行相应的相机操作。
[0083] 采用该方法,不需要手指触碰屏幕就可以实现对相机的控制,有效地减少了手指在屏幕上操作给相机带来的震动的影响。
[0084] 在可选实施方式中,所述基于所述手指位置确定相机操作,包括:
[0085] 获取N项连续的手指位置和/或获取M项连续的手指位置;
[0086] 基于获取的连续的手指位置确定所述相机操作;
[0087] 其中,N和M均为大于等2的正整数,且N>M。
[0088] 通常的相机操作包括焦距调整和拍照。在本公开中,通过不同的方式来判断手指动作表示拍照还是焦距调整。焦距调整时,手指的移动距离较短,而拍照时手指的移动距离较长。因此,在从手指位置信息中获取连续几项位置时,判断拍照所需的位置的项数大于判断焦距调整所需的位置的项数。
[0089] 在可选实施方式中,当获取所述N项连续的手指位置时,所述基于获取的连续的手指位置确定所述相机操作,包括:
[0090] 获取N项连续的预设位置;
[0091] 基于所述N项连续的预设位置,分别获取所述N项连续的手指位置中各手指位置与对应的预设位置之间的第一距离;
[0092] 获取N个所述第一距离的平均距离,判断所述平均距离是否小于设定第一距离,当所述平均距离小于所述设定第一距离时,确定所述相机操作为拍照操作。
[0093] 例如,当N=15时,获取15项连续的预设位置(预先设置的)。分别计算通过捕捉的图像帧得到的各项手指位置与对应预设位置之间的距离,即计算第1项手指位置与第1项预设位置之间的距离,计算第2项手指位置与第2项预设位置之间的距离,…,计算第15项手指位置与第15项预设位置之间的距离。然后计算这15个距离的平均距离,即第一距离的平均距离,当该第一距离的平均距离小于设定第一距离时,即可以确定手指动作对应的相机操作为拍照操作。
[0094] 这里,手指在图像帧的图像中占有一个区域的位置,通过确定该区域的中心点的位置来确定手指的位置,手指位置间距即为手指所占区域的中心点之间的间距。
[0095] 设定第一距离可以根据具体的应用场景(包括具体的镜头)来设置。例如设置为0.1-0.5,这里0.1和0.5表示该设定第一距离占图像帧中图像短边长度的占比。
[0096] 在该实施方式中,在判断手指位置是否符合拍照操作的位置条件时,计算各图像帧中手指的位置与设定位置相比较的位置偏差的平均值。位置偏差的平均值越小,则各图像帧中手指位置与预设位置的偏差越小,即各图像帧中手指的位置越接近于预设位置,此时,确定为拍照操作。
[0097] 需要说明的是,手指的移动不限于上下移动,也可以是左右移动。不管是采用上下移动的控制模式,还是采用左右移动的控制模式,都是通过上述原理来确定相机操作。
[0098] 在可选实施方式中,当获取所述M项连续的手指位置时,所述基于获取的连续的手指位置确定所述相机操作,包括:
[0099] 获取所述M项连续的手指位置中每相邻两项手指位置之间的第二距离;
[0100] 判断所述第二距离是否小于设定第三距离且大于设定第二距离,当所述第二距离小于设定第三距离且大于设定第二距离时,确定所述相机操作为焦距缩放操作。
[0101] 例如,当M=5时,获取5项连续的手指位置。分别计算各项手指位置之间的距离,即计算第1项手指位置与第2项手指位置之间的距离,计算第2项手指位置与第3项手指位置之间的距离,…,计算第4项手指位置与第5项手指位置之间的距离。然后判断这4个距离是否小于设定第三距离且大于设定第二距离,如果是,则确定手指位置对应的相机操作为焦距调整操作。这种情况下,还需要进一步判断手指位置对应的是放大焦距操作还是缩小焦距操作。
[0102] 第二距离设置为稍微大于零的数值(如果设置为零的话,则会带来判断误差),表示手指在移动;第三距离设置为较小的数值,表示手指移动速度较慢。这里设定第二距离、设定第三距离可以根据具体的应用场景(包括具体的镜头)来设置。例如设定第二距离设置为0.01,设定第三距离设置为0.02。这里0.01、0.02分别表示该设定第二距离、设定第三距离占图像帧中图像短边长度的占比。
[0103] 在该实施方式中,在判断手指位置是否符合变焦操作的位置条件时,确定相邻手指位置间距离是否在设定第二距离和设定第三距离之间,如果在,就将相机操作确定为变焦操作。这里要求相邻手指位置间距离在设定第二距离和设定第三距离之间,即是相当于手指处于移动状态但是移动速度较慢的情况。
[0104] 在可选实施方式中,当确定所述相机操作为焦距缩放操作时,所述基于所述M项连续的手指位置确定所述相机操作,还包括:
[0105] 获取所述M项连续的手指位置的变化方向,并基于所述变化方向确定所述相机操作为焦距放大操作或焦距缩小操作。
[0106] 这里确定焦距放大操作或焦距缩小操作通过具体的例子来描述。例如,当M=5时,获取5项连续手指位置的变化方向,基于该变化方向确定手指位置对应的是放大焦距操作还是缩小焦距操作。例如,手指上下移动的场景中,预先确定手指上移指示焦距放大,手指下移指示焦距缩小。基于5项连续的手指位置,可以确定手指是上移还是下移,从而确定对应的相机操作是焦距放大还是焦距缩小。再例如,手指左右移动的场景中,预先确定手指右移指示焦距放大,手指左移指示焦距缩小。基于5项连续的手指位置,可以确定手指是右移还是左移,从而确定对应的相机操作是焦距放大还是焦距缩小。
[0107] 这里基于M项连续的手指位置来确定手指移动方向,例如可以通过下述方式实现:
[0108] 当手指上下移动时,计算相邻手指位置在竖直方向上的距离向量,当距离向量为正值时,表示手指向上移动,当距离向量为负值时,表示手指向下移动。距离向量的计算可以通过手指位置坐标通过常规向量计算方法来计算。
[0109] 当手指左右移动时,计算相邻手指位置在水平方向上的距离向量,当距离向量为正值时,表示手指向右移动,当距离向量为负值时,表示手指向左移动。距离向量的计算可以通过手指位置坐标通过常规向量计算方法来计算。
[0110] 在可选实施方式中,当获取所述N项连续的手指位置和所述M项连续的手指位置时,所述基于获取的连续的手指位置确定所述相机操作,包括:
[0111] 基于所述N项连续的手指位置确定所述相机操作是否为拍照操作;
[0112] 当确定不为拍照操作时,基于所述M项连续的手指位置确定所述相机操作是否为焦距缩放操作。
[0113] 在本公开的方法中,可以先获取N项连续的手指位置,判断手指位置是否对应拍照操作,如果不是,则再获取M项连续的手指位置,判断手指位置是否对应焦距调整操作。也可以先获取M项连续的手指位置,判断手指位置是否对应焦距调整操作,如果不是,则再获取N项连续的手指位置,判断手指位置是否对应拍照操作。还可以同时获取N项连续的手指位置和M项连续的手指位置,来判断手指位置是否对应拍照操作或焦距调整操作。
[0114] 在该实施方式中,同时获取N项连续的手指位置和M项连续的手指位置时,先基于N项连续的手指位置判断是否符合拍照操作的位置条件,如不符合,则再基于M项连续的手指位置判断是否符合变焦操作的位置条件。这是因为,在一般情况下,人们指示拍照操作的情况多于焦距调整操作的情况,因此优先判断拍照操作。
[0115] 下面详细描述根据本公开的相机控制方法的具体实施例,其中N取值为15,M取值为5。如图2所示,该实施例包括下述步骤:
[0116] 步骤201,打开相机,通过镜头捕捉多个图像帧,图像帧中包含手指图像,其中每秒生成10帧图像帧。
[0117] 步骤202,获取各图像帧中手指区域的中心点位置,存储该中心点位置及其对应的生成图像帧的时刻,生成手指位置列表。
[0118] 步骤203,从手指位置列表中抽取最后15项连续的手指位置和最后5项连续的手指位置。
[0119] 步骤204,基于15项连续的手指位置,确定手指位置对应的相机操作是否为拍照操作。
[0120] 步骤205,确定不为拍照操作时,基于5项连续的手指位置,确定手指位置对应的相机操作是否为焦距调整操作。
[0121] 步骤206,当确定为焦距调整操作时,基于手指位置移动方向判断是焦距放大操作还是焦距缩小操作。
[0122] 步骤207,确定为焦距放大操作,并执行相应的操作。
[0123] 本方案中,通过判断连续图像帧中手指位置是否符合预设条件,来确定相应的相机操作。不同相机操作对应的手指位置特点体现出了手指移动的快慢。当手指移动较快时,指示相机执行拍照操作;当手指移动较慢时,指示相机执行焦距调整操作。
[0124] 本公开还提供了一种相机装置,如图3所示,所述装置包括:
[0125] 捕捉模块301,被设置为通过相机的镜头捕捉到多个图像帧,所述图像帧中包含手指图像;
[0126] 获取模块302,被设置为获取按照捕捉各图像帧的时间顺序排列的各图像帧中的手指位置;
[0127] 确定模块303,被设置为基于所述手指位置确定相机操作;
[0128] 执行模块304,被设置为执行所述相机操作。
[0129] 在可选实施方式中,所述确定模块303还被设置为通过下述方式确定相机操作:
[0130] 获取N项连续的手指位置和/或获取M项连续的手指位置;
[0131] 基于获取的连续的手指位置确定所述相机操作;
[0132] 其中,N和M均为大于等2的正整数,且N>M。
[0133] 在可选实施方式中,所述确定模块303还被设置为当获取所述N项连续的手指位置时,通过下述方式确定所述相机操作:
[0134] 获取N项连续的预设位置;
[0135] 基于所述N项连续的预设位置,分别获取所述N项连续的手指位置中各手指位置与对应的预设位置之间的第一距离;
[0136] 获取N个所述第一距离的平均距离,判断所述平均距离是否小于设定第一距离,当所述平均距离小于所述设定第一距离时,确定所述相机操作为拍照操作。
[0137] 在可选实施方式中,所述确定模块303还被设置为当获取所述M项连续的手指位置时,通过下述方式确定所述相机操作:
[0138] 获取所述M项连续的手指位置中每相邻两项手指位置之间的第二距离;
[0139] 判断所述第二距离是否小于设定第三距离且大于设定第二距离,当所述第二距离小于设定第三距离且大于设定第二距离时,确定所述相机操作为焦距缩放操作。
[0140] 在可选实施方式中,所述确定模块303还被设置为当确定所述相机操作为焦距缩放操作时,通过下述方式确定所述相机操作:
[0141] 获取所述M项连续的手指位置的变化方向,并基于所述变化方向确定所述相机操作为焦距放大操作或焦距缩小操作。
[0142] 在可选实施方式中,所述确定模块303还被设置为当获取所述N项连续的手指位置和所述M项连续的手指位置时,通过下述方式确定所述相机操作:
[0143] 基于所述N项连续的手指位置确定所述相机操作是否为拍照操作;
[0144] 当确定不为拍照操作时,基于所述M项连续的手指位置确定所述相机操作是否为焦距缩放操作。
[0145] 关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
[0146] 本公开提出了一种基于手指动作控制相机操作的方法。在该方法中,通过相机的镜头捕捉到多个图像帧,图像帧中包含手指图像;获取按照捕捉各图像帧的时间顺序排列的各图像帧中的手指位置;基于手指位置确定相机操作并执行该相机操作。即,通过手指在镜头前移动来控制相机的操作。采用该方法,通过手指在相机镜头前的移动就可以实现对相机操作的控制,有效地减少了手指在屏幕上操作给相机带来的震动的影响。
[0147] 图4是根据一示例性实施例示出的一种相机控制装置400的框图。
[0148] 参照图4,装置400可以包括以下一个或多个组件:处理组件402,存储器404,电力组件406,多媒体组件408,音频组件410,输入/输出(I/O)的接口412,传感器组件414,以及通信组件416。
[0149] 处理组件402通常控制装置400的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件402可以包括一个或多个处理器420来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件402可以包括一个或多个模块,便于处理组件402和其他组件之间的交互。例如,处理组件402可以包括多媒体模块,以方便多媒体组件408和处理组件402之间的交互。
[0150] 存储器404被配置为存储各种类型的数据以支持在设备400的操作。这些数据的示例包括用于在装置400上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器404可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
[0151] 电力组件406为装置400的各种组件提供电力。电力组件406可以包括电源管理系统,一个或多个电源,及其他与为装置400生成、管理和分配电力相关联的组件。
[0152] 多媒体组件408包括在所述装置400和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件408包括一个前置摄像头和/或后置摄像头。当设备400处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
[0153] 音频组件410被配置为输出和/或输入音频信号。例如,音频组件410包括一个麦克风(MIC),当装置400处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器404或经由通信组件416发送。在一些实施例中,音频组件410还包括一个扬声器,用于输出音频信号。
[0154] I/O接口412为处理组件402和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
[0155] 传感器组件414包括一个或多个传感器,用于为装置400提供各个方面的状态评估。例如,传感器组件414可以检测到设备400的打开/关闭状态,组件的相对定位,例如所述组件为装置400的显示器和小键盘,传感器组件414还可以检测装置400或装置400一个组件的位置改变,用户与装置400接触的存在或不存在,装置400方位或加速/减速和装置400的温度变化。传感器组件414可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件414还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件414还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
[0156] 通信组件416被配置为便于装置400和其他设备之间有线或无线方式的通信。装置400可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件416经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。
在一个示例性实施例中,所述通信组件416还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
[0157] 在示例性实施例中,装置400可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
[0158] 在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器404,上述指令可由装置400的处理器420执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
[0159] 一种非临时性计算机可读存储介质,当所述存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行一种车门控制方法,所述方法包括:通过相机的镜头捕捉到多个图像帧,所述图像帧中包含手指图像;获取按照捕捉各图像帧的时间顺序排列的各图像帧中的手指位置;基于所述手指位置确定相机操作;执行所述相机操作。
[0160] 图5是根据一示例性实施例示出的一种用于车门控制装置500的框图。例如,装置500可以被提供为一服务器。参照图5,装置500包括处理组件522,其进一步包括一个或多个处理器,以及由存储器532所代表的存储器资源,用于存储可由处理组件522的执行的指令,例如应用程序。存储器532中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件522被配置为执行指令,以执行上述方法:通过相机的镜头捕捉到多个图像帧,所述图像帧中包含手指图像;获取按照捕捉各图像帧的时间顺序排列的各图像帧中的手指位置;基于所述手指位置确定相机操作;执行所述相机操作。
[0161] 装置500还可以包括一个电源组件526被配置为执行装置500的电源管理,一个有线或无线网络接口550被配置为将装置500连接到网络,和一个输入输出(I/O)接口558。装置500可以操作基于存储在存储器532的操作系统,例如Windows ServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM或类似。
[0162] 本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
[0163] 应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。