Проблема при отображении кадров с OpenCV? - PullRequest
0 голосов
/ 10 января 2020

Здравствуйте,

Я использую мой RaspberryPi Camera Module v2.1 и мой Jetson Nano с Python для захвата кадров с помощью камеры и их отображения, создавая своего рода «видеопоток» ». Но мой вопрос скорее об использовании OpenCV, чем об оборудовании, которое я использую. Мой код следующий:

import cv2
import numpy as np
from scipy.misc import imshow
import time

def gstreamer_pipeline (capture_width=3280, capture_height=2464, display_width=1280, display_height=720, framerate=21, flip_method=0) :   
    return ('nvarguscamerasrc ! ' 
    'video/x-raw(memory:NVMM), '
    'width=(int)%d, height=(int)%d, '
    'format=(string)NV12, framerate=(fraction)%d/1 ! '
    'nvvidconv flip-method=%d ! '
    'video/x-raw, width=(int)%d, height=(int)%d, format=(string)BGRx ! '
    'videoconvert ! '
    'video/x-raw, format=(string)BGR ! appsink'  % (capture_width,capture_height,framerate,flip_method,display_width,display_height))

if __name__ == '__main__':
    cap = cv2.VideoCapture(gstreamer_pipeline(flip_method=0), cv2.CAP_GSTREAMER)

    if cap.isOpened():
        try:
            while cap.isOpened():
                ret, frame = cap.read()
                frame = cv2.cvtColor(frame, cv2.COLOR_BGR2RGB)
                cv2.imshow('frame',frame)
        except KeyboardInterrupt:
            print("Stopped video streaming.")
            cap.release()
            cv2.destroyAllWindows()
    else:
        print("Unable to open camera.")

Я читаю устройство захвата, применяю преобразование цветов к RGB для каждого кадра и хочу отобразить его с cv2.imshow('frame',frame), как я видел в уроках. Проблема в том, что этот код ничего не сделает, у меня нет окна и сообщения об ошибке. Выходные данные, сгенерированные программой:

GST_ARGUS: Creating output stream
CONSUMER: Waiting until producer is connected...
GST_ARGUS: Available Sensor modes :
GST_ARGUS: 3264 x 2464 FR = 21.000000 fps Duration = 47619048 ; Analog Gain range min 1.000000, max 10.625000; Exposure Range min 13000, max 683709000;

GST_ARGUS: 3264 x 1848 FR = 28.000001 fps Duration = 35714284 ; Analog Gain range min 1.000000, max 10.625000; Exposure Range min 13000, max 683709000;

GST_ARGUS: 1920 x 1080 FR = 29.999999 fps Duration = 33333334 ; Analog Gain range min 1.000000, max 10.625000; Exposure Range min 13000, max 683709000;

GST_ARGUS: 1280 x 720 FR = 59.999999 fps Duration = 16666667 ; Analog Gain range min 1.000000, max 10.625000; Exposure Range min 13000, max 683709000;

GST_ARGUS: 1280 x 720 FR = 120.000005 fps Duration = 8333333 ; Analog Gain range min 1.000000, max 10.625000; Exposure Range min 13000, max 683709000;

GST_ARGUS: Running with following settings:
   Camera index = 0 
   Camera mode  = 0 
   Output Stream W = 3264 H = 2464 
   seconds to Run    = 0 
   Frame Rate = 21.000000 
GST_ARGUS: PowerService: requested_clock_Hz=37126320
GST_ARGUS: Setup Complete, Starting captures for 0 seconds
GST_ARGUS: Starting repeat capture requests.
CONSUMER: Producer has connected; continuing.
Gtk-Message: 21:05:04.463: Failed to load module "canberra-gtk-module"

После ошибки загрузки (которая часто происходит; программа все еще работает) ничего не происходит, пока я не отменю комбинацию клавиш CTRL + C. Однако если я заменим cv2.imshow на простой imshow(frame) на SciPy, он нормально работает и выводит изображения, поэтому я думаю, что проблемы ie скорее в OpenCV, чем в моей камере. Любая идея, что я делаю неправильно и как заставить работать постоянный (> = 21FPS) поток кадров?

Спасибо за ответы заранее!

...