Labomedia Ressources

Outils pour utilisateurs

Outils du site

Piste : • Réalisation d'un shutter DMX • Streamer des images OpenCV avec v4l2-loopback
streamer_des_images_opencv_avec_v4l2-loopback

Différences

Ci-dessous, les différences entre deux révisions de la page.

Lien vers cette vue comparative

Les deux révisions précédentesRévision précédente
Prochaine révision		Révision précédente
streamer_des_images_opencv_avec_v4l2-loopback [2022/02/25 13:06] – [Profondeur d'une RealSense D455] sergestreamer_des_images_opencv_avec_v4l2-loopback [2022/03/03 12:35] (Version actuelle) – [Profondeur d'une RealSense D455] serge
Ligne 15: Ligne 15:
  
 =====Sources des exemples===== =====Sources des exemples=====
-  * **** +  * **[[https://github.com/sergeLabo/fakewebcam|fakewebcam de github.com/sergeLabo]]**
-=====Installation==== +
-A voir, nécessaire mais peut-être pas suffisant: +
-  sudo apt install v4l2loopback-utils +
-  +
-<code bash> +
-sudo apt install python3-pip +
-python3 -m pip install --upgrade pip +
-sudo apt install python3-venv+
  
-cd /le/dossier/de/votre/projet +====Installation==== 
-python3 -m venv mon_env +Voir le README ci-dessus.
-source mon_env/bin/activate +
-python3 -m pip install opencv-python pyfakewebcam +
-</code>  +
  
 =====Exemple simple pour tester===== =====Exemple simple pour tester=====
 <file python cam_relay.py>   <file python cam_relay.py>  
-""" 
-Insert the v4l2loopback kernel module. 
-modprobe v4l2loopback devices=2 
-will create two fake webcam devices 
-""" 
-import time 
 import pyfakewebcam import pyfakewebcam
 import cv2 import cv2
Ligne 44: Ligne 27:
  
 cap = cv2.VideoCapture(0) cap = cv2.VideoCapture(0)
-camera = pyfakewebcam.FakeWebcam('/dev/video1', 640, 480)+camera = pyfakewebcam.FakeWebcam('/dev/video11', 640, 480) 
 while True: while True:
     ret, image = cap.read()     ret, image = cap.read()
Ligne 52: Ligne 36:
     if cv2.waitKey(1) == 27:     if cv2.waitKey(1) == 27:
         break         break
- 
-""" 
-Run the following command to see the output of the fake webcam. 
-ffplay /dev/video1 
-or open a camera in vlc 
-""" 
 </file> </file>
  
-Exécuter le script avec: +Run the following command to see the output of the fake webcam.\\ 
-  cd /le/dossier/de/votre/projet +ffplay /dev/video11\\ 
-  modprobe v4l2loopback devices=2 +or open the camera 11 in vlc
-  ./mon_env/bin/python3 cam_relay.py +
-Dans un autre terminal +
-  ffplay /dev/video1 +
-Il faudra peut-être adapter les numéro de /dev/video +
-  +
 ===== Profondeur d'une OAK-D Lite ===== ===== Profondeur d'une OAK-D Lite =====
- <code bash> 
-cd /le/dossier/de/votre/projet 
-source mon_env/bin/activate 
-python3 -m pip install depthai numpy 
-</code> 
- 
 <file python sender_oak_depth.py> <file python sender_oak_depth.py>
 import cv2 import cv2
Ligne 82: Ligne 49:
  
 pipeline = dai.Pipeline() pipeline = dai.Pipeline()
 +
 # Define a source - two mono (grayscale) cameras # Define a source - two mono (grayscale) cameras
 left = pipeline.createMonoCamera() left = pipeline.createMonoCamera()
Ligne 115: Ligne 83:
 depth.disparity.link(xout.input) depth.disparity.link(xout.input)
  
-camera = pyfakewebcam.FakeWebcam('/dev/video1', 640, 480)+camera = pyfakewebcam.FakeWebcam('/dev/video11', 640, 480)
  
 with dai.Device(pipeline) as device: with dai.Device(pipeline) as device:
Ligne 137: Ligne 105:
             break             break
 </file> </file>
-Exécuter le script avec: + 
-  cd /le/dossier/de/votre/projet +Ouvrir /dev/video11 dans VLC
-  modprobe v4l2loopback devices=2 +
-  ./mon_env/bin/python3 sender_oak_depth.py +
-Ouvrir /dev/video1 dans VLC+
 {{ :media_15:oak_depth_in_vlc.png?400 |}} {{ :media_15:oak_depth_in_vlc.png?400 |}}
 =====Profondeur d'une RealSense D455===== =====Profondeur d'une RealSense D455=====
Ligne 147: Ligne 112:
  
 <file python sender_rs_depth.py> <file python sender_rs_depth.py>
- 
 """ """
-Créer un device /dev/video11 +Voir https://github.com/sergeLabo/fakewebcam
-Commande non persistante, c'est perdu au reboot +
- +
-sudo modprobe v4l2loopback video_nr=11 +
- +
-Necéssite pyrealsense2 +
- +
-Sans VirtualEnv +
- +
-    python3 -m pip install numpy opencv-python pyfakewebcam pyrealsense2 +
- +
-    Lancement du script, dans le dossier du script +
- +
-    python3 sender_rs_depth.py +
- +
-Avec VirtualEnv +
- +
-    Dans le dossier du projet: +
- +
-    python3 -m venv mon_env +
-    source mon_env/bin/activate +
-    python3 -m pip install numpy opencv-python pyfakewebcam pyrealsense2 +
- +
-    Lancement du script, dans le dossier du script+
  
-    ./mon_env/bin/python3 python3 sender_rs_depth.py+Suppression du fond, voir 
 +https://github.com/IntelRealSense/librealsense/blob/master/wrappers/python/examples/align-depth2color.py
 """ """
  
Ligne 184: Ligne 126:
 import pyrealsense2 as rs import pyrealsense2 as rs
  
-GRAY_BACKGROUND = 153+ 
 +# Le faux device
 VIDEO = '/dev/video11' VIDEO = '/dev/video11'
 +
 +# Avec ou sans slider pour régler CLIPPING_DISTANCE_IN_MILLIMETER
 +SLIDER = 1
 +# Réglable avec le slider
 +# We will be removing the background of objects more than
 +# CLIPPING_DISTANCE_IN_MILLIMETER away
 +CLIPPING_DISTANCE_IN_MILLIMETER = 2000
 +
  
 class MyRealSense: class MyRealSense:
  
-    def __init__(self): +    def __init__(self, video, slider, clip): 
-        global VIDEO+        self.video = video 
 +        self.slider = slider 
 +        self.clip = clip 
         self.width = 1280         self.width = 1280
         self.height = 720         self.height = 720
Ligne 221: Ligne 175:
         # Getting the depth sensor's depth scale (see rs-align example for explanation)         # Getting the depth sensor's depth scale (see rs-align example for explanation)
         depth_sensor = profile.get_device().first_depth_sensor()         depth_sensor = profile.get_device().first_depth_sensor()
-        depth_scale = depth_sensor.get_depth_scale() +        self.depth_scale = depth_sensor.get_depth_scale() 
-        print("Depth Scale is: " , depth_scale) +        print("Depth Scale is: " , self.depth_scale)
-        # We will be removing the background of objects more than +
-        #  clipping_distance_in_meters meters away +
-        clipping_distance_in_meters = 1 #1 meter +
-        self.clipping_distance = clipping_distance_in_meters / depth_scale +
  
         # Affichage de la taille des images         # Affichage de la taille des images
Ligne 236: Ligne 185:
  
         self.camera = pyfakewebcam.FakeWebcam(VIDEO, 1280, 720)         self.camera = pyfakewebcam.FakeWebcam(VIDEO, 1280, 720)
 +
 +        if self.slider:
 +            self.create_slider()
 +
 +    def create_slider(self):
 +        cv2.namedWindow('controls')
 +        cv2.createTrackbar('background', 'controls', 1000, 8000,
 +                            self.remove_background_callback)
 +        cv2.setTrackbarPos('background', 'controls', self.clip)
 +        cv2.namedWindow('depth', cv2.WND_PROP_FULLSCREEN)
 +
 +    def remove_background_callback(self, value):
 +        if value != 1000:
 +            self.clip = int(value)
  
     def run(self):     def run(self):
         """Boucle infinie, quitter avec Echap dans la fenêtre OpenCV"""         """Boucle infinie, quitter avec Echap dans la fenêtre OpenCV"""
-        global GRAY_BACKGROUND 
  
         while self.pose_loop:         while self.pose_loop:
Ligne 262: Ligne 224:
  
             # Remove background - Set pixels further than clipping_distance to grey             # Remove background - Set pixels further than clipping_distance to grey
-            grey_color = GRAY_BACKGROUND 
             # depth image is 1 channel, color is 3 channels             # depth image is 1 channel, color is 3 channels
             depth_image_3d = np.dstack((depth_image, depth_image, depth_image))             depth_image_3d = np.dstack((depth_image, depth_image, depth_image))
-            bg_removed = np.where((depth_image_3d > self.clipping_distance) |\ +            clipping_distance = self.clip / (1000*self.depth_scale) 
-                                (depth_image_3d <= 0), grey_color, color_image)+            bg_removed = np.where((depth_image_3d > clipping_distance) |\ 
 +                        (depth_image_3d <= 0), 0, color_image)
  
-            # Render images: 
-            #   depth align to color on left 
-            #   depth on right 
             depth_colormap = cv2.applyColorMap(cv2.convertScaleAbs(depth_image,             depth_colormap = cv2.applyColorMap(cv2.convertScaleAbs(depth_image,
                                                                    alpha=0.03),                                                                    alpha=0.03),
                                                                    cv2.COLORMAP_JET)                                                                    cv2.COLORMAP_JET)
 +            images = np.hstack((bg_removed, depth_colormap))
  
-            # # print(depth_colormap.shape) +            if self.slider: 
-            # # cv2.imshow('depth', depth_colormap) +                cv2.imshow('depth', images) 
-            self.camera.schedule_frame(depth_colormap)+ 
 +            self.camera.schedule_frame(bg_removed)
  
             if cv2.waitKey(1) == 27:             if cv2.waitKey(1) == 27:
Ligne 285: Ligne 246:
  
 if __name__ == '__main__': if __name__ == '__main__':
-    mrs = MyRealSense()+ 
 +    mrs = MyRealSense(VIDEO, SLIDER, CLIPPING_DISTANCE_IN_MILLIMETER)
     mrs.run()     mrs.run()
- 
- 
 </file> </file>
- 
-Exécuter le script avec: 
-  cd /le/dossier/de/votre/projet 
-  modprobe v4l2loopback devices=2 
-  ./mon_env/bin/python3 sender_oak_depth.py 
      
 =====Réception===== =====Réception=====
streamer_des_images_opencv_avec_v4l2-loopback.1645794379.txt.gz · Dernière modification : de serge