2022年 11月 5日

使用python的视频处理

本文探讨的是使用python对视频进行如下操作:

  1. 将待处理的视频分割成帧
  2. 对每一帧进行处理
  3. 对处理后的帧合并
  4. 得到最终的视频

为了方便接下去的实验过程,读者必须具备如下的工具:

1、依赖包python-opencv

2、借助工具ffmpeg

  1. import cv2
  2. import subprocess
  3. #在使用时使用以上代码引入模块

分割视频的代码如下:

  1. import os
  2. import cv2
  3. import subprocess
  4. os.chdir(r'C:\Users\Bryce gu\Desktop\movie')
  5. v_path='test.mp4'
  6. image_save='./pic'
  7. cap=cv2.VideoCapture(v_path)
  8. frame_count=cap.get(cv2.CAP_PROP_FRAME_COUNT)
  9. for i in range(int(frame_count)):
  10. _,img=cap.read()
  11. img=cv2.cvtColor(img,cv2.cv2.COLOR_BGR2GRAY) #cv2.COLOR_RGB2HSV cv2.COLOR_BGR2GRAY
  12. cv2.imwrite('./pic/image{}.jpg'.format(i),img)
  13. # In[8]:
  14. print(dir(cv2))

实验结果如图所示(注意要放在一个既定文件夹里):

可见,将一个完整的短视频分割成了各个帧。


ffmpeg是一个非常牛的软件!具备了以下的诸多功能:

  1. 基本信息查询命令
  2. 录制命令
  3. 分解、复用命令
  4. 处理原始数据命令
  5. 裁剪与合并命令
  6. 图片、视频互转命令
  7. 直播相关命令
  8. 各种滤镜命令

  1. 1.视频裁剪滤镜(播放器大小裁剪): 
  2. ffmpeg -i killer.mp4 -vf crop=in_w-200:in_h-200 -c:v libx264 -c:a copy out.mp4
  3. 2.视频裁剪(按时间裁剪): 
  4. ffmpeg -i my.mp4 -ss 00:43:20 -t 00:02:10 -acodec copy -vcodec copy sha.mp4
  5. 3.视频拼接: 
  6. ffmpeg -f concat -i input.txt concat_out.mp4
  7. (input.txt内部是文件列表,格式是: file 'fileName’
  8. 4.视频转图片命令: 
  9. ffmpeg -i 1.ts -r 1 -f image2 result-image/image-%3d.jpeg
  10. 5.图片转视频:
  11. ffmpeg -i image-%3d .jpeg -out.mp4
  12. ffmpeg录屏命令
  13. ffmpeg -f avfoundation -i 1 -r 30 out.yuv
  14. -f: 指定使用avfoundation采集数据
  15. -i: 指定从哪儿采集数据,它是一个文件索引号
  16. -r:指定帧率
  17. 播放录屏的命令: ffplay -s 2880X1800 -pix_fmt uyvy422 out.yuv
  18. -s: 指定分辨率
  19. -pix_fmt :录制时的格式
  20. 查看支持的设备列表:ffmpeg -f avfoundation -list_devices true -i ""
  21. 录音命令:ffmpeg -f avfoundation -i :0 out.wav

以上列出了一些常用的、常见的命令,仅供参考。

而在本实验中使用的是视频拼接命令,将所有刚才切好的帧再次合并。(当然读者可以先在处理好的图片中做加工处理,再做合并。)

在完成后,可以在ffmpeg/bin文件夹里找到合并好的视频:


多媒体格式转换

已经介绍了,ffmpeg具有多媒体格式转换的功能,这类似于pr或是macos系统上的finalcut的一些功能,同样,笔者给出一些代码,读者可以自行尝试:

  1. ffmpeg -i out.mp4 -vcodec copy -acodec copy out.flv
  2. i:输入文件
  3. vcodec copy:视频编码处理方式
  4. acodec copy:音频编码处理方式
  5. 只抽取视频:ffmpeg -i out.mp4 -an -vcodec copy out.h264
  6. 只抽取音频:ffmpeg -i out.mp4 -acodec copy -vn out.aac
  7. ffmpeg提取YUV数据
  8. ffmpeg -i input.mp4 -an -c:v rawvedio -pix_fmt uyv420p out.yuv
  9. ffmpeg 提取PCM数据
  10. ffmpeg -i input.mp4 -vn -ar 44100 -ac2 -f s16le out.pcm

三种图像处理的例子(读者在切下来的图片中自行尝试)

1、RGB2HSV

cv2.cvtColor(image,cv2.COLOR_RGB2HSV)


2、直方图均衡

return cv2.equalizeHist(img)


3、高斯模糊+边缘检测

  1. img = cv2.GaussianBlur(img,(3,3),0)
  2. canny=cv2.Canny(img,50,150)


持续更新中……