返回顶部
首页 > 资讯 > 后端开发 > Python >OpenCV 光流Optical Flow示例
  • 631
分享到

OpenCV 光流Optical Flow示例

OpenCV 光流Optical FlowOpenCV 光流 2023-05-18 08:05:15 631人浏览 独家记忆

Python 官方文档:入门教程 => 点击学习

摘要

目录目标光流OpenCV 中的 Lucas-Kanade 光流OpenCV 中的密集光流目标 在本章中,将学习: 使用 Lucas-Kanade 方法理解光流的概念及其估计使用cv2

目标

在本章中,将学习

  • 使用 Lucas-Kanade 方法理解光流的概念及其估计
  • 使用cv2.calcOpticalFlowPyrLK()等函数来跟踪视频中的特征点
  • 使用cv2.calcOpticalFlowFarneback()方法创建一个密集的光流场

光流

光流是由物体或相机的运动引起的图像物体在两个连续帧之间的明显运动的模式。它是二维向量场,其中每个向量都是一个位移向量,显示点从第一帧到第二帧的移动。如下图所示。

它显示了一个球在连续 5 帧中移动。箭头表示其位移矢量。光流在以下领域有许多应用:

  • 运动结构
  • 视频压缩
  • 视频稳定
  • ...

光流基于以下几个假设:

  • 对象的像素强度在连续帧之间不会改变
  • 相邻像素具有相似的运动

(用 Harris 角点检测器检查逆矩阵的相似性。它表示角点是更好的跟踪点。)

所以从用户的角度来看,这个想法很简单,给出了一些要追踪的要点,收到了这些点的光学流量矢量。但是,还有一些问题。到目前为止,正在处理的是小的动作,因此当有很大的动作时它失败了。要处理这一点,需要使用金字塔。当在金字塔上采样时,会消除小型动作,大的运动会变小。因此,通过在那里应用Lucas-Kanade,将光流与缩放合在一起了。

OpenCV 中的 Lucas-Kanade 光流

OpenCV的cv2.calcOpticalFlowPyrLK() 提供了所有这些功能。下面创建一个简单的应用程序来跟踪视频中的某些点。为了确定点,使用cv2.GoodFeaturesToTrack()。取第一帧,检测其中的一些 Shi-Tomasi 角点,然后使用 Lucas-Kanade 光流迭代跟踪这些点。对于函数cv2.calcOpticalFlowPyrLK(),传递前一帧、前面的点和下一帧。它返回之后的点以及一些状态编号,如果找到之后的点,则值为 1,否则为零。在下一步中迭代地将这些点作为前面的点传递,迭代进行。

import cv2
import numpy as np
video_file = 'slow_traffic_small.mp4'
cap = cv2.VideoCapture(video_file)
# params for ShiTomasi corner detection
feature_params = dict( maxCorners = 100,
                       qualityLevel = 0.3,
                       minDistance = 7,
                       blockSize = 7 )
# Parameters for lucas kanade optical flow
lk_params = dict(
    winSize = (15, 15),
    maxLevel = 2,
    criteria = (cv2.TERM_CRITERIA_EPS | cv2.TERM_CRITERIA_COUNT, 10, 0.03))
# create some random colors
color = np.random.randint(0, 255, (100, 3))
# Take first frame and find corners in it
ret, old_frame = cap.read()
old_gray = cv2.cvtColor(old_frame, cv2.COLOR_BGR2GRAY)
p0 = cv2.goodFeaturesToTrack(old_gray, mask=None, **feature_params)
# create a mask image for drawing purpose
mask = np.zeros_like(old_frame)
while True:
    ret, frame = cap.read()
    if ret:
        frame_gray = cv2.cvtColor(frame, cv2.COLOR_BGR2GRAY)
        # calculate optical flow
        p1, st, err = cv2.calcOpticalFlowPyrLK(old_gray, frame_gray, p0, None, **lk_params)
        # Select good points
        if p1 is not None:
            good_new = p1[st==1]
            good_old = p0[st==1]
        # draw the tracks
        for i,(new, old) in enumerate(zip(good_new, good_old)):
            a, b = new.ravel()
            c, d = old.ravel()
            mask = cv2.line(mask, (int(a), int(b)), (int(c), int(d)), color[i].tolist(), 2)
            frame = cv2.circle(frame, (int(a), int(b)), 5, color[i].tolist(), -1)
        img = cv2.add(frame,mask)
        cv2.imshow('frame',img)
        k = cv2.waiTKEy(30) & 0xff
        if k == 27:
            cv2.destroyAllwindows()
            break
        # Now update the previous frame and previous points
        old_gray = frame_gray.copy()
        p0 = good_new.reshape(-1,1,2)
    else:
        cv2.destroyAllWindows()
        break

上述代码没有检查下一个关键点的正确程度。因此,即使图像中任何一个特征点消失,光流也有可能找到下一个看起来可能靠近它的点。实际上, 对于稳健的跟踪,角点应该在特定的时间间隔内检测点。OpenCV sample提出了这样一个例子,它每 5 帧找到一次特征点,还运行对光流点的向后检查,只选择好的点 )。代码见(GitHub.com/opencv/open…)

结果如下:

OpenCV 中的密集光流

Lucas-Kanade 方法计算稀疏特征集的光流(在示例中,使用 Shi-Tomasi 算法检测到的角点)。OpenCV 提供了另一种算法来寻找密集光流。它计算帧中所有点的光流。它基于 Gunner Farneback 的算法,该算法在 Gunner Farneback 于 2003 年在“Two-Frame Motion Estimation Based on Polynomial Expansion”中进行了解释。

下面的示例显示了如何使用上述算法找到密集光流。首先得到一个带有光流向量(u,v)(u,v)(u,v)的 2通道向量,找到它们的大小和方向。对结果进行颜色编码以实现更好的可视化。方向对应于图像的色调值(Hue),幅度对应于值屏幕。代码如下:

import cv2
import numpy as np
cap = cv2.VideoCapture("vtest.avi")
ret, frame1 = cap.read()
frame1_gray = cv2.cvtColor(frame1, cv2.COLOR_BGR2GRAY)
hsv = np.zeros_like(frame1)
hsv[...,1] = 255
while(1):
    ret, frame2 = cap.read()
    if ret:
        frame2_gray = cv2.cvtColor(frame2, cv2.COLOR_BGR2GRAY)
        flow = cv2.calcOpticalFlowFarneback(frame1_gray, frame2_gray, None, 0.5, 3, 15, 3, 5, 1.2, 0)
        mag, ang = cv2.cartToPolar(flow[...,0], flow[...,1])
        hsv[...,0] = ang*180/np.pi/2
        hsv[...,2] = cv2.nORMalize(mag, None, 0, 255, cv2.NORM_MINMAX)
        bgr = cv2.cvtColor(hsv, cv2.COLOR_HSV2BGR)
        cv2.imshow('frame2', bgr)
        k = cv2.waitKey(30) & 0xff
        if k == 27:
        	cv2.destroyAllWindows()
            break
        elif k == ord('s'):
            cv2.imwrite('opticalfb.png',frame2)
            cv2.imwrite('opticalhsv.png',bgr)
        frame1_gray = frame2_gray
    else:
        cv2.destroyAllWindows()
        break

附加资源

  • docs.opencv.org/4.1.2/d4/de…
  • cv2.calcOpticalFlowPyrLK()
  • cv.calcOpticalFlowFarneback()
  • en.wikipedia.org/wiki/Optica…

以上就是OpenCV 光流Optical Flow示例的详细内容,更多关于OpenCV 光流Optical Flow的资料请关注编程网其它相关文章!

--结束END--

本文标题: OpenCV 光流Optical Flow示例

本文链接: https://lsjlt.com/news/211844.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • OpenCV 光流Optical Flow示例
    目录目标光流OpenCV 中的 Lucas-Kanade 光流OpenCV 中的密集光流目标 在本章中,将学习: 使用 Lucas-Kanade 方法理解光流的概念及其估计使用cv2...
    99+
    2023-05-18
    OpenCV 光流Optical Flow OpenCV 光流
  • python如何使用opencv提取光流详解
    目录前言提取帧提取flow光流环境配置结果总结前言 光流flow特征中包含了一个视频当中运动相关的信息,在视频动作定位当中光流特征使用的比较多,所以记录一下提取光流特征的方法。 使用...
    99+
    2024-04-02
  • Kotlin协程之Flow异常示例处理
    目录示例一.catch方法catchImpl方法二. onCompletion方法1.unsafeFlow方法2.ThrowingCollector类三. retryWhen方法示例...
    99+
    2024-04-02
  • C++之OpenCV图像高光调整具体流程
    实现原理 PS中的高光命令是一种校正由于太接近相机闪光灯而有些发白的焦点的方法。在用其他方式采光的图像中,这种调整也可用于使高光区域变暗。要实现图像的高光调整,首先要识别出高光区;再...
    99+
    2024-04-02
  • Kotlin协程之Flow基础原理示例解析
    目录引言一.Flow的创建二.Flow的消费1.SafeFlow类2.AbstractFlow类3. SafeCollector类4.消费过程中的挂起引言 本文分析示例代码如下: l...
    99+
    2024-04-02
  • OpenCV基于稠密光流如何实现视频跟踪
    这篇“OpenCV基于稠密光流如何实现视频跟踪”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“OpenCV基于稠密光流如何实现...
    99+
    2023-07-05
  • Kotlin协程之Flow触发与消费示例解析
    目录示例一.Flow的触发与消费1.onEach方法2.transform方法3.collect方法二.多消费过程的执行三.总结示例 代码如下: launch(Dispatchers...
    99+
    2024-04-02
  • Android开发flow常见API的使用示例详解
    目录collect通知flow执行launchIn()指定协程作用域通知flow执行catch{}捕捉异常merge()合流map{}变换发送的数据类型总结collect通知flow...
    99+
    2024-04-02
  • 图文详解OpenCV中光流以及视频特征点追踪
    目录前言1. 效果图2. 原理2.1 什么是光流?光流追踪的前提、原理2.2 光流的应用2.3 光流的2种方法3. 源码3.2 稀疏光流追踪3.2 优化版稀疏光流追踪3.3 密集光流...
    99+
    2024-04-02
  • OpenCV怎么使用稀疏光流实现视频对象跟踪
    这篇“OpenCV怎么使用稀疏光流实现视频对象跟踪”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“OpenCV怎么使用稀疏光流...
    99+
    2023-07-05
  • GHOSTXP光盘刻录的示例分析
    这篇文章主要介绍GHOSTXP光盘刻录的示例分析,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!刻录机软件下载 Nero8.2.8下载地址:http://www.xp198.com/2008/1207/0NMDAwMD...
    99+
    2023-06-14
  • OpenSUSE光盘安装的示例分析
    这篇文章主要介绍了OpenSUSE光盘安装的示例分析,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。本HOWTO指导您如何使用下载的openSUSEDVDiso镜像安装/升级o...
    99+
    2023-06-16
  • python中OpenCV的知识点示例
    这篇文章主要介绍python中OpenCV的知识点示例,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!图像翻转使用Python的一个包,imutils。使用下面的指令可以安装。pip install ...
    99+
    2023-06-14
  • OpenCV角点检测的实现示例
    目录Harris 角点检测算法1. 角点角点检测算法的基本思想: 2. 流程3. 实现Harris 角点检测算法 1. 角点 角点是水平方向、垂直方向变化都很大的像素。 角...
    99+
    2024-04-02
  • OpenCV仿射变换的示例代码
    目录1、认识仿射变换2、仿射变换的求法3、进行仿射变换:warpAffine()函数4、计算二维旋转变换矩阵:getRotationMatrix2D()函数5、示例程序:1、认识仿射...
    99+
    2024-04-02
  • OpenCV形状检测的示例详解
    目录1.基于OpenCV的形状检测Python版本1.1.定义我们的形状检测器类ShapeDetector1.2.基于OpenCV的形状检测器2.基于OpenCV的形状检测C++版本...
    99+
    2024-04-02
  • Opencv对象追踪的示例代码
    1 HSV上下限 颜色的HSV上下限如下表: 2 追踪单个颜色 import cv2 as cv import numpy as np cap = cv.VideoCapt...
    99+
    2024-04-02
  • Python中opencv操作的示例分析
    这篇文章主要介绍Python中opencv操作的示例分析,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!直接读取图片def display_img(file="p.jpeg"): ...
    99+
    2023-06-14
  • Android之RecyclerView实现时光轴效果示例
    做项目的过程中有个需求需要时光轴,于是网上找了部分资料 ,写了个案例,现在分享给大家。 如图:       &nbs...
    99+
    2022-06-06
    示例 recyclerview Android
  • Python OpenCV 图像平移的实现示例
    每次学习新东西的时候,橡皮擦都是去海量检索,然后找到适合自己理解的部分。 再将其拼凑成一个小的系统,争取对该内容有初步理解。 今天这 1 个小时,核心要学习的是图像的平移,在电脑上随...
    99+
    2024-04-02
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作