包含人与宠物互动内容的电子相册制作方法、装置及设备与流程
利用数字相册软件如iPhoto或Google相册制作电子相册,方便分享和备份。 #生活技巧# #手工DIY技巧# #照片相册制作#
本发明涉及图像处理,尤其涉及一种包含人与宠物互动内容的电子相册制作方法、装置及设备。
背景技术:
1、随着人民生活水平的不断提高以及对宠物消费观的转变,越来越多的人开始养起了宠物,其中,宠物的种类多以犬类、猫类为主,人均宠物拥有率在逐步提升。宠物主人在饲养宠物的过程中也非常乐意婴幼儿去和宠物进行互动,他们希望能够留住婴幼儿与宠物相处的美好瞬间,并制作成电子相册,然后在各种社交软件上同其他用户分享相册中的精美照片。目前的电子相册通常是系统按照日期自动排列生成的,用户不能根据照片质量进行挑选,自动生成的相册常因为质量过低、不符合用户的喜好而被舍弃。
2、现有中国专利cn113420708a提供一种宠物看护方法、装置、电子设备及存储介质,公开了以下特征:基于所述宠物对象在所述目标图像中的位置信息、所述目标图像的质量、所述宠物对象的位置变换、姿态变化及表情变化,确定宠物对应的状态信息,基于宠物对应的状态信息进行至少一种美化处理操作后,生成所述宠物相册。上述特征仅仅基于宠物的状态信息和图像质量来生成电子相册对宠物进行看护,未考虑婴幼儿的状态信息、婴幼儿与宠物的互动信息,不能满足用户记录婴幼儿与宠物相处的美好瞬间的需求。
3、为此,如何在婴幼儿与宠物互动时,帮助用户记录婴幼儿与宠物相处的美好瞬间是亟待解决的问题。
技术实现思路
1、有鉴于此,本发明提供了一种包含人与宠物互动内容的电子相册制作方法、装置及设备,用以解决现有技术中在婴幼儿与宠物互动时,用户无法记录婴幼儿与宠物相处的美好瞬间的问题。
2、本发明采用的技术方案是:
3、第一方面,本发明提供了一种包含人与宠物互动内容的电子相册制作方法,其特征在于,所述方法包括:
4、s1:获取婴幼儿看护场景下实时的视频流,将所述视频流分解为多帧图像;
5、s2:利用预设的目标检测模型对各帧图像进行检测,依据检测结果,提取多帧包括婴幼儿和宠物的第一目标图像;
6、s3:依据预设的互动评分规则,对各所述第一目标图像中婴幼儿与宠物的互动情况进行评分,并依据评分结果,提取出各帧高质量图像生成电子相册。
7、优选地,所述s3包括:
8、s31:将各所述第一目标图像输入预设的基于自监督学习的单目深度估计模型中,对婴幼儿与宠物之间是否互动进行判断;
9、s32:提取出判断结果为婴幼儿与宠物之间发生互动的第二目标图像,利用所述互动评分规则,对各所述第二目标图像中的宠物特征、婴幼儿特征和图像质量特征分别进行评分;
10、s33:将各帧评分高于预设阈值的图像提取出来,记作高质量图像,并对所述高质量图像进行预设调整,生成电子相册。
11、优选地,所述s31包括:
12、s311:获取利用预设的目标位置检测模型,对各所述第一目标图像进行检测,并识别出各所述第一目标图像中的婴幼儿位置信息和宠物位置信息;
13、s312:依据所述婴幼儿位置信息和宠物位置信息,得出婴幼儿最小外接矩形框的第一中心点位置信息和宠物最小外接矩形框的第二中心点位置信息;
14、s313:将所述第一中心点位置信息和第二中心点位置信息输入基于monodepth结构的深度估计模型中,得出婴幼儿与宠物之间的相对位置信息;
15、s314:依据所述相对位置信息,对婴幼儿与宠物之间是否发生互动进行判断。
16、优选地,所述s313包括:
17、s3141:若依据所述相对位置信息,判断所述第一中心点与第二中心点之间距离小于预设阈值,则认为婴幼儿与宠物之间发生了互动;
18、s3142:若依据所述相对位置信息,判断所述第一中心点与第二中心点之间距离不小于预设阈值,则认为婴幼儿与宠物之间未发生互动。
19、优选地,所述s32包括:
20、s321:将各所述第二目标图像输入预设的宠物动作检测模型中,提取出第二目标图像中的宠物肢体关键点信息,并统计所述宠物肢体关键点数量;
21、s322:依据所述宠物肢体关键点信息和关键点数量,对各所述第二目标图像中的宠物特征进行评分,输出第一分数;
22、s323:将各所述第二目标图像进一步输入预设的人脸检测模型中,提取出第二目标图像中的婴幼儿脸部关键点信息;
23、s324:依据所述婴幼儿脸部关键点信息,对婴幼儿脸部的遮挡情况和婴幼儿的表情进行判断,并依据判断结果,对各所述第二目标图像中的婴幼儿特征进行评分,输出第二分数;
24、s325:对各所述第二目标图像的清晰度和光线强度进行评分,输出第三分数。
25、优选地,所述s33包括:
26、s331:获取预设的评分权重;
27、s332:依据所述评分权重,对所述第一分数、第二分数和第三分数进行加权处理,并求和得出总分数;
28、s333:依据所述总分数,提取总分数高于预设阈值的图像作为高质量图像;
29、s334:对所述高质量图像进行预设调整,生成电子相册。
30、优选地,所述s334包括:
31、s3341:获取用户输入的多帧替换图像;
32、s3342:比较各所述高质量图像与各所述替换图像分别在宠物特征、婴幼儿特征和图像质量特征之间的差异;
33、s3343:依据所述差异,调整所述评分权重,并依据调整后的评分权重,生成新的高质量图像;
34、s3344:将各所述新的高质量图像输出,生成所述电子相册。
35、第二方面,本发明提供了一种包含人与宠物互动内容的电子相册制作装置,所述装置包括:
36、图像获取模块,用于获取婴幼儿看护场景下实时的视频流,将所述视频流分解为多帧图像;
37、目标检测模块,用于利用预设的目标检测模型对各帧图像进行检测,依据检测结果,提取多帧包括婴幼儿和宠物的第一目标图像;
38、互动评分模块,用于依据预设的互动评分规则,对各所述第一目标图像中婴幼儿与宠物的互动情况进行评分,并依据评分结果,提取出各帧高质量图像生成电子相册。
39、第三方面,本发明实施例还提供了一种电子设备,包括:至少一个处理器、至少一个存储器以及存储在存储器中的计算机程序指令,当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。
40、第四方面,本发明实施例还提供了一种存储介质,其上存储有计算机程序指令,当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。
41、综上所述,本发明的有益效果如下:
42、本发明提供的包含人与宠物互动内容的电子相册制作方法、装置及设备,获取婴幼儿看护场景下实时的视频流,将所述视频流分解为多帧图像;利用预设的目标检测模型对各帧图像进行检测,依据检测结果,提取多帧包括婴幼儿和宠物的第一目标图像;依据预设的互动评分规则,对各所述第一目标图像中婴幼儿与宠物的互动情况进行评分,并依据评分结果,提取出各帧高质量图像生成电子相册。本发明先通过预设的目标检测模型,判断实时视频中是否出现了婴幼儿和宠物,避免了未出现评分目标时设备的误启动导致的资源浪费;同时依据预设的评分规则,对互动情况评分,生成高质量图像并制作成电子相册,满足了在婴幼儿与宠物互动时,用户记录婴幼儿与宠物之间美好时光的需求。
网址:包含人与宠物互动内容的电子相册制作方法、装置及设备与流程 https://klqsh.com/news/view/120719
相关内容
用于洗衣液推荐的方法及装置、设备与流程箱内书籍分类装置的制作方法
一种宠物陪伴机器人的制作方法
宠物喷剂喷雾配方配比及生产流程
故障应急处理装置的制作方法
一种移动式应急污水处理装置的制造方法
宠物互动新方式,人宠健康双赢
Google Home智能家居控制全攻略:从设备准备到场景设置
宠物主人之间宠物养护经验互动分享.docx
宠物互助新玩法:揭秘宠物间的温馨互动与挑战