本发明涉及图片处理,具体涉及一种图片中人体增肌美体处理方法及系统。
背景技术:
::1、用户在日常图片编辑中,会有肌肉重塑的需求,例如生成较为真实的马甲线、乳沟、胸肌、腹肌、锁骨等身材肌肉部位的效果。2、为了实现以上需求,当前行业主要利用以下两种方式进行肌肉重塑:3、第一种是先制作较为逼真的肌肉纹理贴图,然后采用正片叠底或者其他图片混合技术,让贴图和用户的原图产生混合。这种方式没有人体遮罩识别和定位效果,需要用户手动把贴图移动到具体的皮肤位置,再进行后期手动参数调整,操作复杂。且因为纹理是默认提供的,贴图和用户人体适配度较低,效果较不真实。4、第二种采用的是稳定扩散模型,它能够有效地模拟和生成较为逼真的效果。目前,稳定扩散模型主要使用的是开源且插件丰富的stablediffusion来生成效果。stablediffusion支持多种微调参数,结合stablediffusion的重绘功能和人体皮肤遮罩识别技术,可以自动定位识别到对应的用户需要调整的皮肤区域,然后自动生成与人体贴合的肌肉,不再需要用户进行繁琐的操作,人体贴合度更高,效果也比图片融合更加真实。然而,由于stablediffusion的生成效果受限于本身底模的数据集,容易造成较多问题,主要问题包括:皮肤模糊且缺乏皮肤纹理,肌肉形状不自然,肌肉容易错位,且stablediffusion生成的肌肉大部分偏向于男性肌肉,或者呈现过分夸张的健美运动员效果,在人体贴合程度方面也不如人意。5、为了解决该技术问题,现有技术尝试生成高质量的增肌美体效果的数据集。然而,在公开数据集中,这种特定数据的占比非常少,因为需求的效果比较苛刻,所以没有自动化的筛图工具进行筛图,人工筛选需要很大的人力成本;特定需求的数据在公开数据集中的分辨率较低。比如,在腹部增肌的场景中,期望腹部的分辨率比较高,但这种数据量是非常少的。综上所述,高质量的增肌美体效果的数据集获取方式极为困难,公开数据集在质量和数量上都远远达不到模型训练需求。技术实现思路1、为此,本发明提供一种图片中人体增肌美体处理方法及系统,旨在解决现有的图片编辑功能不能满足用户针对肌肉重塑的高质量需求,而高质量数据样本集获取困难的技术问题。2、为实现以上目的,本发明采用如下技术方案:3、依据本发明第一方面,本发明提供一种图片中人体增肌美体处理方法,所述方法包括:4、获取增肌美体效果图;5、定位所述增肌美体效果图中的关键点,将所述增肌美体效果图中的关键点与标准姿势图中的关键点进行对齐,得到关键点对齐后的增肌美体效果图;6、针对所述关键点对齐后的增肌美体效果图进行指定的目标区域的图像分割,得到目标区域图像;7、对所述目标区域图像进行像素反转,得到所述目标区域图像对应的重绘遮罩;8、获取多种目标姿势的原始人体图片,基于所述目标区域图像对应的重绘遮罩生成对应目标姿势的增肌美体效果图;9、对多种目标姿势的增肌美体效果图进行图片扩展,得到图片样本集;10、利用所述图片样本集进行模型训练,得到增肌美体模型,利用所述增肌美体模型对用户输入的目标图片进行针对目标区域的美体增肌处理,得到处理后的增肌美体图片。11、可选地,所述获取增肌美体效果图,包括:12、根据人体的形态需求和/或肤质需求进行人工做图,得到所述增肌美体效果图。13、可选地,所述定位所述增肌美体效果图中的关键点,将所述增肌美体效果图中的关键点与标准姿势图中的关键点进行对齐,得到关键点对齐后的增肌美体效果图,包括:14、利用openpose关键点识别模型分别定位所述增肌美体效果图和所述标准姿势图中的颈部关键点、左臀部关键点、右臀部关键点;15、分别将所述增肌美体效果图的颈部关键点、左臀部关键点以及右臀部关键点对齐到所述标准姿势图的颈部关键点、左臀部关键点以及右臀部关键点上,得到关键点对齐后的增肌美体效果图。16、可选地,所述目标区域包括腹部区域、手臂区域、锁骨区域以及胸部区域中至少之一;17、所述基于所述目标区域图像对应的重绘遮罩生成对应目标姿势的增肌美体效果图,包括:18、将所述原始人体图片的关键点与所述标准姿势图中的关键点进行对齐,得到关键点对齐后的目标原始人体图片;19、利用openpose关键点识别模型识别所述目标原始人体图片的人体关键点,基于所述人体关键点绘制得到人体姿势引导图;20、基于所述目标区域图像对应的重绘遮罩,利用stablediffusion重绘技术对所述人体姿势引导图补充所述增肌美体效果图除目标区域图像的其他区域图像,得到与所述原始人体图片目标姿势相同的增肌美体效果图。21、可选地,所述对多种目标姿势的增肌美体效果图进行图片扩展,得到批量的图片样本集,包括:22、针对多种目标姿势的增肌美体效果图,修改图片参数,得到不同图片参数对应的增肌美体效果图;其中,所述图片参数包括图片场景、人体衣物以及人脸身份中至少之一;23、和/或,24、针对多种目标姿势的增肌美体效果图,调整所述重绘遮罩的遮挡程度,基于调整后的重绘遮罩,利用stablediffusion重绘技术生成不同遮挡程度对应的增肌美体效果图。25、可选地,所述调整所述重绘遮罩的遮挡程度,包括:26、获取所述目标区域图像的上边缘坐标y1和下边缘坐标y2;27、在所述目标区域图像的上下边缘区间[y1,y2]内随机选取新的上边缘坐标y1_new和新的下边缘坐标y2_new;28、对所述目标区域图像在y坐标小于上边缘坐标y1_new和y坐标大于下边缘坐标y2_new的区域进行像素反转,得到遮挡程度调整后的重绘遮罩。29、可选地,所述利用所述图片样本集进行模型训练之前,所述方法还包括:30、对所述图片样本集中的增肌美体效果图进行程度增强,得到数据量更大的图片样本集;31、其中,所述程度增强包括三维旋转、左右翻转、肤色调整、亮度调整以及对比度调整中至少之一。32、可选地,所述利用所述图片样本集进行模型训练,得到增肌美体模型,包括:33、基于所述图片样本集,利用lora微调技术进行模型训练,得到符合数据集分布的lora模型,作为增肌美体模型。34、可选地,所述利用所述增肌美体模型对用户输入的目标图片进行针对目标区域的美体增肌处理,得到处理后的增肌美体图片,包括:35、对用户输入的目标图片进行目标区域的图像分割,得到所述目标图片对应的目标重绘遮罩区域;36、利用所述增肌美体模型对所述目标重绘遮罩区域进行美体增肌重绘,得到所述目标图片对应的增肌美体图片。37、依据本发明第二方面,本发明提供一种图片中人体增肌美体处理系统,其特征在于,所述系统包括:38、图像获取模块,用于获取增肌美体效果图;39、图像对齐模块,用于定位所述增肌美体效果图中的关键点,将所述增肌美体效果图中的关键点与标准姿势图中的关键点进行对齐,得到关键点对齐后的增肌美体效果图;40、图像分割模块,用于针对所述关键点对齐后的增肌美体效果图进行指定的目标区域的图像分割,得到目标区域图像;41、像素反转模块,用于对所述目标区域图像进行像素反转,得到所述目标区域图像对应的重绘遮罩;42、姿势调整模块,用于获取多种目标姿势的原始人体图片,基于所述目标区域图像对应的重绘遮罩生成对应目标姿势的增肌美体效果图;43、图片扩展模块,用于对多种目标姿势的增肌美体效果图进行图片扩展,得到图片样本集;44、模型运用模块,用于利用所述图片样本集进行模型训练,得到增肌美体模型,利用所述增肌美体模型对用户输入的目标图片进行针对目标区域的美体增肌处理,得到处理后的增肌美体图片。45、本发明采用以上技术方案,至少具备以下有益效果:46、通过本发明方案,获取增肌美体效果图;定位所述增肌美体效果图中的关键点,将所述增肌美体效果图中的关键点与标准姿势图中的关键点进行对齐,得到关键点对齐后的增肌美体效果图;针对所述关键点对齐后的增肌美体效果图进行指定的目标区域的图像分割,得到目标区域图像;对所述目标区域图像进行像素反转,得到所述目标区域图像对应的重绘遮罩;获取多种目标姿势的原始人体图片,基于所述目标区域图像对应的重绘遮罩生成对应目标姿势的增肌美体效果图;对多种目标姿势的增肌美体效果图进行图片扩展,得到图片样本集;利用所述图片样本集进行模型训练,得到增肌美体模型,利用所述增肌美体模型对用户输入的目标图片进行针对目标区域的美体增肌处理,得到处理后的增肌美体图片。由此,使得用户在进行图片肌肉重塑编辑时,皮肤质感更细腻真实,肌肉布局和线条更符合用户审美,人体贴合度更高,更能满足用户的需求。应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。当前第1页12当前第1页12
技术特征:1.一种图片中人体增肌美体处理方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述获取增肌美体效果图,包括:
3.根据权利要求1所述的方法,其特征在于,所述定位所述增肌美体效果图中的关键点,将所述增肌美体效果图中的关键点与标准姿势图中的关键点进行对齐,得到关键点对齐后的增肌美体效果图,包括:
4.根据权利要求1所述的方法,其特征在于,所述目标区域包括腹部区域、手臂区域、锁骨区域以及胸部区域中至少之一;
5.根据权利要求1所述的方法,其特征在于,所述对多种目标姿势的增肌美体效果图进行图片扩展,得到批量的图片样本集,包括:
6.根据权利要求5所述的方法,其特征在于,所述调整所述重绘遮罩的遮挡程度,包括:
7.根据权利要求1~6任一项所述的方法,其特征在于,所述利用所述图片样本集进行模型训练之前,所述方法还包括:
8.根据权利要求1所述的方法,其特征在于,所述利用所述图片样本集进行模型训练,得到增肌美体模型,包括:
9.根据权利要求1所述的方法,其特征在于,所述利用所述增肌美体模型对用户输入的目标图片进行针对目标区域的美体增肌处理,得到处理后的增肌美体图片,包括:
10.一种图片中人体增肌美体处理系统,其特征在于,所述系统包括:
技术总结本发明提供了一种图片中人体增肌美体处理方法及系统,其中方法包括:获取增肌美体效果图;针对关键点对齐后的增肌美体效果图进行指定的目标区域的图像分割和像素反转,得到目标区域图像对应的重绘遮罩;获取多种目标姿势的原始人体图片,基于目标区域图像对应的重绘遮罩生成对应目标姿势的增肌美体效果图;对多种目标姿势的增肌美体效果图进行图片扩展,得到图片样本集;利用图片样本集进行模型训练,得到增肌美体模型,对用户输入的目标图片进行针对目标区域的美体增肌处理,得到处理后的增肌美体图片。通过本发明,使得用户在进行图片肌肉重塑编辑时,皮肤质感更细腻真实,肌肉布局和线条更符合用户审美,人体贴合度更高,更能满足用户的需求。
技术研发人员:林青山
受保护的技术使用者:像素和鸣科技有限公司
技术研发日:技术公布日:2024/12/17