python人物视频背景替换实现虚拟空间穿梭

2024-10-20 16:53:41

引言

近期网上这位卖蜂蜜的小伙鬼畜挺火的，大家质疑背景造假，这里我就带着大家实现“背景造假”（PS:原视频小伙是在真实场景拍摄的）

准备工作

在实现该功能之前，我们需要准备好python==3.7 然后执行：

pip install mediapipe

方案一： PC端可以选择外界摄像头或者连接网络摄像头，最好挑选一个纯属的背景板作为视频画面背景（这样有利于任务分割）；

方案二：网上下载有人物活动的视频，然后用下载的视频替代连接摄像头。

到这里我们基础物件已经搭建好了，本实验代码选择方案二，对下载视频分析，其shape=（740,640,3）。接下来我将带领大家实现三个版本的背景替换

纯RGB背景替换

基础板：将人物提取出来，替换成设定好的纯色背景（可以通过RGB设定）。其基本流程如下：

1. 输入视频

2. 获取视频帧

3. 提取帧内人物图像

4. 设定背景RGB值

5. 创建同视频帧同shape的RGB图像

6. 结合背景图与人物图

7. 输出结合图

示例demo：

import cv2
import mediapipe as mp
import numpy as np
mp_drawing = mp.solutions.drawing_utils
mp_selfie_segmentation = mp.solutions.selfie_segmentation
BG_COLOR = (0, 0, 225) # red
cap = cv2.VideoCapture('111.mp4')
with mp_selfie_segmentation.SelfieSegmentation(
    model_selection=0) as selfie_segmentation:
  bg_image = None
  while cap.isOpened():
    success, image = cap.read()
    if not success:
      break
    image = cv2.cvtColor(cv2.flip(image, 1), cv2.COLOR_BGR2RGB)
    image.flags.writeable = False
    results = selfie_segmentation.process(image)
    image.flags.writeable = True
    image = cv2.cvtColor(image, cv2.COLOR_RGB2BGR)
    condition = np.stack(
      (results.segmentation_mask,) * 3, axis=-1) > 0.8
    if bg_image is None:
      bg_image = np.zeros(image.shape, dtype=np.uint8)
      bg_image[:] = BG_COLOR
      print(bg_image.shape)
    output_image = np.where(condition, image, bg_image)
    cv2.imshow('MediaPipe Selfie Segmentation', output_image)
    if cv2.waitKey(5) & 0xFF == 27:
      break
cap.release()

原视频节选帧&替换背景帧：

自定义图像背景板替换

由于我们已知图像的shape，我们可以在网上挑选自己喜欢的背景图，然后调整背景图的shape，使其与视频图像保持一致。整体流程图下：

1. 下载选择喜欢的背景图像

2. 调整下载图像的shape=(740,604,3)

3. 读取视频

4. 获取视频帧

5. 获取视频帧内人物图像

6. 结合背景图和人物图像

7. 输出视频画面

修改图像大小并进行50%缩放后的背景图：

背景图结合人物图：

这里我的背景图选择的有些单调，也不是那么适合，望读者见谅！代码部分修改：

bg_image = cv2.imread("BBB.jpg")

以上就是python实现人物视频背景替换的详细内容，更多关于python视频背景替换的资料请关注我们其它相关文章！

Python教程教你如何去除背景

目录 1)推荐网站 2)代码实现导语: 你不知道Python也能去除“背景”嘛? 修饰图片中的头发是设计师最烦人的任务之一!要修得完美,不破坏原图,需要注意的小细节实在太多了.如果还要去除背景,会更让人头大.幸运的是,今天小编为此专门定制了这一期的内容, 今天我们就一起来学习一下吧!不仅会推荐几款小编觉得好用的抠图网站,还会给大家写一写代码 1)推荐网站今天推荐三个自动抠图网站.3秒去除图片背景国外网站:REMOVE.BG,全自动,全免费——www.remove.bg/zh/,5秒内全自
Python绘制圣诞树+落叶+雪花+背景音乐+浪漫弹窗五合一版圣诞树

目录一.背景故事二.五合一版圣诞树制作过程 1.基础圣诞树 2.落叶效果 3.雪花特效 4.背景音乐 5.浪漫弹窗 6.署名制作三.源码分享一.背景故事圣诞节风波马上不就到圣诞节了嘛,我看到朋友圈里很多小伙伴再纷纷炫耀自己收到的专属圣诞树,也有小伙伴私信我,说还没有自己的圣诞树!!! 作为我的粉丝朋友们,我不允许大家还没有专属于自己的圣诞树!我要让大家收到最特别最美丽的圣诞树,于是-冒着-期末挂科-的风险-我重拾了自己失传已久的海龟画图: 海龟画图全解-值得你一看!(这篇文章写了很久
如何利用python turtle绘图自定义画布背景颜色

目录 python turtle自定义画布背景色 python turtle设置背景图片总结 python turtle自定义画布背景色 turtle是python一个简单好用的绘图包,它可以通过设计坐标来实时控制绘图. 安装很简单,一行命令: pip install turtle 这里只介绍如何设置画布背景颜色.它一般是在绘图的最开始进行设置的,可以使用screensize(width, height, bg)函数,其中的三个参数分别是画布的宽.高.背景颜色.宽高的单位是像素,如果用小数表示
python给视频添加背景音乐并改变音量的具体方法

用到给视频添加背景音乐,并改变音量.记录一下,与碰到同样问题的朋友共享. import subprocess inmp4='E:/PycharmProjects/untitled2/hecheng/191030_232_xs.mp4' inmp3='E:/PycharmProjects/untitled2/hecheng/bg.mp3' inmp32='E:/PycharmProjects/untitled2/hecheng/bg2.mp3' outmp3='E:/PycharmProjects
Python实现将多张图片合成视频并加入背景音乐

实现的思路:将准备好的图片通过opencv读取出来,并将其设置好帧数等参数后合成为无声视频. 最后通过moviepy编辑视频将背景音乐加入到视频中. 开始之前还是需要说明一下非标准库的来源,因为有些库的名称和需要导入模块的名称不一定就是一样的. import os # python标准库,不需要安装,用于系统文件操作相关 import cv2 # python非标准库,pip install opencv-python 多媒体处理 from PIL import Image # python非标
python人物视频背景替换实现虚拟空间穿梭

目录引言准备工作纯RGB背景替换自定义图像背景板替换引言近期网上这位卖蜂蜜的小伙鬼畜挺火的,大家质疑背景造假,这里我就带着大家实现“背景造假”(PS:原视频小伙是在真实场景拍摄的) 准备工作在实现该功能之前,我们需要准备好python==3.7 然后执行: pip install mediapipe 方案一: PC端可以选择外界摄像头或者连接网络摄像头,最好挑选一个纯属的背景板作为视频画面背景(这样有利于任务分割): 方案二: 网上下载有人物活动的视频,然后用下载的视频替代连接摄像
利用OpenCV实现绿幕视频背景替换

目录前言一.图像预处理二.HSV色彩空间转换 1. cvtColor色彩空间转换 2. inRange抠图三.背景替换四.源码总结前言本文将使用OpenCV C++ 进行绿幕视频背景替换. 一.图像预处理背景绿幕视频首先,我们需要使用resize API将背景图尺寸修改与视频尺寸大小.这样才能进行后续的像素赋值操作. Mat bg = imread("background.jpg"); //背景图 VideoCapture capture; //读取待处理的绿幕视
Opencv实现绿幕视频背景替换功能

基于hsv颜色空间的实时背景替换: #include<opencv2\opencv.hpp> using namespace cv; Mat replace_and_blend(Mat &frame, Mat&mask); Mat background,frame, hsv, mask,result; int main(int arc, char** argv) { background = imread("2.jpg"); namedWindow(&quo
Python 照片人物背景替换的实现方法

目录前言项目说明项目结构数据准备替换背景图代码代码说明验证一下效果总结前言本文的github仓库地址为: 替换照片人物背景项目(模型文件过大,不在仓库中) 由于模型文件过大,没放在仓库中,本文下面有模型下载地址. 项目说明项目结构我们先看一下项目的结构,如图: 其中,model文件夹放的是模型文件,模型文件的下载地址为:模型下载地址下载该模型放到model文件夹下. 依赖文件-requirements.txt,说明一下,pytorch的安装需要使用官网给出的,避免显卡驱
Python 音视频剪辑快速入门教程

目录一.引言二.Moviepy 简介三.Moviepy 安装四.音视频的加载和保存五.音视频数据的访问六.音视频变换 1.Clip 的 fl 方法 2.Clip 的 fl_time 方法 3.剪辑颜色变换 4.剪辑大小变换 5.剪辑内容变换七.剪辑合成 1.概述 2.将多个剪辑拼接 3.多个剪辑同屏播放 4.将一系列图像构造成视频 5.其他几种生成视频方法简介八.小结一.引言在这个短视频和自媒体大行其道的年代,音视频剪辑成为了大佬们的必备工具,现在有很多音视频剪辑的软件,如剪
Python基于纹理背景和聚类算法实现图像分割详解

目录一.基于纹理背景的图像分割二.基于K-Means聚类算法的区域分割三.总结一.基于纹理背景的图像分割该部分主要讲解基于图像纹理信息(颜色).边界信息(反差)和背景信息的图像分割算法.在OpenCV中,GrabCut算法能够有效地利用纹理信息和边界信息分割背景,提取图像目标物体.该算法是微软研究院基于图像分割和抠图的课题,它能有效地将目标图像分割提取,如图1所示[1]. GrabCut算法原型如下所示: mask, bgdModel, fgdModel = grabCut(img,
python图片指定区域替换img.paste函数的使用

今天用到了img.paste函数,就写篇笔记记录一下,方便回顾. 做人脸检测,产生负样本的时候想把图片中人连部分用背景的某一部分替换掉,然后再随机裁剪产生负样本,这样比随机裁剪的时候避开人脸区域应该实现起来更简单些` from PIL import Image import matplotlib.pyplot as plt img= Image.open(r'E:\Img\img_align_celeba\000002.jpg') img2=Image.open(r'E:\Img\img_ali
Python实现视频下载功能

最近一两年短视频业务风生水起,各个视频网站都有各自特色的短视频内容.如果有这样一个程序,可以把各大视频网站的热门用户最新发布的视频都下载下来,不仅方便自己观看,还可以将没有版权的视频发布在个人社交网站上,增加自己的人气,岂不美哉? parker就是这样一个项目(项目地址:https://github.com/LiuRoy/parker),它采用celery框架定时爬取用户视频列表,将最新发布的视频通过you-get异步下载,可以很方便地实现分布式部署.因为各个网站的页面布局和接口更新比较频繁,为
python+ffmpeg视频并发直播压力测试

通过python与ffmpeg结合使用,可生成进行视频点播.直播的压力测试脚本.可支持不同类型的视频流,比如rtmp或者hls形式. 通过如下方式执行脚本:python multiRealPlay.py [rtmp|http] [thread counts] [interval Time] [rtmp | http]:视频播放的不同形式 [thread counts]:并发线程数 [interval Time]:启动每个线程的间隔时间代码: #!/usr/bin/python # -*- co
Python读取视频的两种方法（imageio和cv2）

用python读取视频有两种主要方法,大家可依据自己的需求进行使用. 方法一: 使用imageio库,没有安装的可用pip安装或自己下载,安装好后重启终端即可调用. import pylab import imageio #视频的绝对路径 filename = '/path/to/your/video.mp4' #可以选择解码工具 vid = imageio.get_reader(filename, 'ffmpeg') for im in enumerate(vid): #image的类型是ma

python人物视频背景替换实现虚拟空间穿梭

目录

引言

准备工作

纯RGB背景替换

自定义图像背景板替换

相关推荐

随机推荐