Как получить изображения Facebook 3D из стерео изображений - PullRequest
Новая
       46

Как получить изображения Facebook 3D из стерео изображений

0 голосов
/ 18 июня 2019

У меня есть стереоизображения (с picryl.com), и я хотел бы преобразовать их в 3D-изображения, которые можно загружать на Facebook (в формате .glb)

Попытка создания карт глубины и преобразования в 3D-модели. 

import numpy as np
from sklearn.preprocessing import normalize
import cv2

print('loading images...')
imgL = cv2.imread('l_active.png')  # downscale images for faster processing
imgR = cv2.imread('r_active.png')

# SGBM Parameters -----------------
window_size = 3                     # wsize default 3; 5; 7 for SGBM reduced size image; 15 for SGBM full size image (1300px and above); 5 Works nicely

left_matcher = cv2.StereoSGBM_create(
    minDisparity=0,
    numDisparities=32,    #160         # max_disp has to be dividable by 16 f. E. HH 192, 256
    blockSize=5,
    P1=8 * 5 * window_size ** 2,    # wsize default 3; 5; 7 for SGBM reduced size image; 15 for SGBM full size image (1300px and above); 5 Works nicely
    P2=32 * 3 * window_size ** 2,
    disp12MaxDiff=1,
    uniquenessRatio=15,
    speckleWindowSize=0,
    speckleRange=2,
    preFilterCap=63,
    mode=cv2.STEREO_SGBM_MODE_SGBM_3WAY
)

right_matcher = cv2.ximgproc.createRightMatcher(left_matcher)

# FILTER Parameters
lmbda = 80000
sigma = 1.2
visual_multiplier = 1.0

wls_filter = cv2.ximgproc.createDisparityWLSFilter(matcher_left=left_matcher)
wls_filter.setLambda(lmbda)
wls_filter.setSigmaColor(sigma)

print('computing disparity...')
displ = left_matcher.compute(imgL, imgR)  # .astype(np.float32)/16
dispr = right_matcher.compute(imgR, imgL)  # .astype(np.float32)/16
displ = np.int16(displ)
dispr = np.int16(dispr)
filteredImg = wls_filter.filter(displ, imgL, None, dispr) 
//save here

Окончательные 3D-модели даже не похожи на оригинальные

...