Как получить последний кадр с устройства захвата (камеры) в opencv

Я думаю, что решение, упомянутое в вопросе, а именно наличие отдельного потока, который очищает буфер, является самым простым нехрупким решением для этого. Вот достаточно хороший (я думаю) код для этого:

import cv2, queue, threading, time

# bufferless VideoCapture
class VideoCapture:

  def __init__(self, name):
    self.cap = cv2.VideoCapture(name)
    self.q = queue.Queue()
    t = threading.Thread(target=self._reader)
    t.daemon = True
    t.start()

  # read frames as soon as they are available, keeping only most recent one
  def _reader(self):
    while True:
      ret, frame = self.cap.read()
      if not ret:
        break
      if not self.q.empty():
        try:
          self.q.get_nowait()   # discard previous (unprocessed) frame
        except queue.Empty:
          pass
      self.q.put(frame)

  def read(self):
    return self.q.get()

cap = VideoCapture(0)
while True:
  time.sleep(.5)   # simulate time between events
  frame = cap.read()
  cv2.imshow("frame", frame)
  if chr(cv2.waitKey(1)&255) == 'q':
    break

Поток считывателя кадров инкапсулируется внутри настраиваемого класса VideoCapture, а связь с основным потоком осуществляется через очередь.

Я разместил очень похожий код для вопроса node.js, где решение JavaScript было бы лучше. В моих комментариях к другому ответу на этот вопрос подробно рассказывается, почему нехрупкое решение без отдельного потока кажется трудным.

Альтернативное решение, которое проще, но поддерживается только для некоторых бэкэндов OpenCV, использует CAP_PROP_BUFFERSIZE. В 2.4 docs говорится, что он поддерживается только В настоящее время серверная часть DC1394 [Firewire] v 2.x. Для серверной части Linux V4L, согласно комментарию в Код 3.4.5, поддержка была добавлена ​​9 марта 2018 г., но я получил VIDEOIO ERROR: V4L: Property <unknown property string>(38) not supported by device именно для этого бэкэнда. Возможно, сначала стоит попробовать; код такой простой:

cap.set(cv2.CAP_PROP_BUFFERSIZE, 0)

На моем Raspberry Pi 4

cap = cv2.VideoCapture(0)
cap.set(cv2.CAP_PROP_BUFFERSIZE, 1)

действительно работает, и это все, что мне нужно, чтобы моя пи-камера выдавала мне последний кадр с постоянной задержкой в ​​3+ секунды между сценой перед камерой и отображением этой сцены в изображении предварительного просмотра. Мой код обрабатывает изображение за 1,3 секунды, поэтому я не уверен, почему присутствуют остальные 2 секунды задержки, но он согласован и работает.

Боковое примечание: поскольку мой код занимает секунду для обработки изображения, я также добавил

cap.set( cv2.CAP_PROP_FPS, 2 )

на случай, если это уменьшит ненужную активность, так как я не могу получить кадр в секунду. Когда я установил cv2.CAP_PROP_FPS на 1, я получил странный вывод, что все мои кадры были почти полностью темными, поэтому слишком низкая установка FPS может вызвать проблему.

Если вы не хотите захватывать кадр при отсутствии события, зачем вы предварительно обрабатываете / обрабатываете свой кадр? Если вы не обработаете свой фрейм, вы можете просто отказаться от него, если событие не произойдет. Ваша программа должна иметь возможность захватывать, оценивать ваше состояние и отбрасывать на достаточной скорости, то есть достаточно быстро по сравнению с частотой захвата кадров вашей камеры, чтобы всегда получать последний кадр в очереди.

Если я не разбираюсь в python, потому что я использую OpenCV на C ++, но он должен выглядеть примерно так:

vidcap = cv.VideoCapture(   filename    )

while True:
    success, frame = vidcap.read()
    If Not success:
         break
    If cv.waitKey(1):
         process(frame)

Согласно ссылке OpenCV, vidcap.read () возвращает bool. Если кадр прочитан правильно, он будет True. Затем захваченный кадр сохраняется в переменной frame. Если кнопки не нажимаются, цикл продолжается. Когда нажата клавиша, вы обрабатываете свой последний захваченный кадр.