Как отображать график и видеофайл в одном кадре/окне в python?

Question

I want something similar like this image and this is same layout which I supposed to want.

И с дополнительной заметкой, я хочу сгенерировать график на основе таймингов видеофайлов. Для примера. 10 секунд этот график должен быть сгенерирован, и через 20 секунд должен быть создан другой график.

Возможно ли это

Answer 1

Я хотел показать, что даже можно обновить график для каждого кадра при скорости видео.

В этом примере вычисляется средняя интенсивность пикселей вдоль оси X и обновляется график для каждого кадра. Поскольку вы хотите обновлять каждые 10 секунд, вам понадобится некоторая модификация. Этот клип (Jenny Mayhem) берется из https://www.youtube.com/watch?v=cOcgOnBe5Ag

import cv2 
import numpy as np 

import matplotlib 
matplotlib.use('WXAgg') # not sure if this is needed 

from matplotlib.figure import Figure 
from matplotlib.backends.backend_wxagg import FigureCanvasWxAgg as FigureCanvas 

import wx 

class VideoPanel(wx.Panel): 

    def __init__(self, parent, size): 
     wx.Panel.__init__(self, parent, -1, size=size) 
     self.Bind(wx.EVT_PAINT, self.OnPaint) 
     self.parent = parent 
     self.SetDoubleBuffered(True) 

    def OnPaint(self, event): 
     dc = wx.BufferedPaintDC(self) 
     dc.Clear() 
     if self.parent.bmp: 
      dc.DrawBitmap(self.parent.bmp,0,0) 


class MyFrame(wx.Frame): 
    def __init__(self, fp): 
     wx.Frame.__init__(self, None) 

     self.bmp = None 

     self.cap = cv2.VideoCapture(fp) 
     ret, frame = self.cap.read() 
     h,w,c = frame.shape 
     print w,h,c 

     videopPanel = VideoPanel(self, (w,h)) 

     self.videotimer = wx.Timer(self) 
     self.Bind(wx.EVT_TIMER, self.OnUpdateVidoe, self.videotimer) 
     self.videotimer.Start(1000/30.0) 

     self.graph = Figure() # matplotlib figure 
     plottPanel = FigureCanvas(self, -1, self.graph) 
     self.ax = self.graph.add_subplot(111) 

     y = frame.mean(axis=0).mean(axis=1) 
     self.line, = self.ax.plot(y) 
     self.ax.set_xlim([0,w]) 
     self.ax.set_ylim([0,255]) 

     sizer = wx.BoxSizer(wx.HORIZONTAL) 
     sizer.Add(videopPanel) 
     sizer.Add(plottPanel) 
     self.SetSizer(sizer) 

     self.Fit() 
     self.Show(True) 


    def OnUpdateVidoe(self, event): 
     ret, frame = self.cap.read() 
     if ret: 
      frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB) 
      img_buf = wx.ImageFromBuffer(frame.shape[1], frame.shape[0], frame) 
      self.bmp = wx.BitmapFromImage(img_buf) 

      # modify this part to update every 10 sec etc... 
      # right now, it's realtime update (every frame) 
      y = frame.mean(axis=0).mean(axis=1) 
      self.line.set_ydata(y) 
      self.graph.canvas.draw() 

     self.Refresh() 


if __name__ == '__main__': 

    fp = "Jenny Mayhem and The Fuzz Orchestrator - Gypsy Gentleman (Live at the Lodge on Queen).mp4" 
    app = wx.App(0) 
    myframe = MyFrame(fp) 
    app.MainLoop()