Полагаю, для полноценного объяснения всего вам потребуется полная книга. Так что лучше почитай один. Для начала, может быть, я могу дать вам несколько советов.
1) Это все данные о глубине? Pixel (x, y) - расстояние в мм. Или
там больше для глубины данных.
Да, это все. Если у вас есть расстояния с единицами измерения или просто какое-то значение датчика, зависит от вашего датчика глубины и от того, есть ли какой-либо шаг калибровки.
2) Как данные глубины представляются в файле
Обычно как последовательность значений. Если информация о глубине является двухмерной, у вас обычно есть карта глубины, которая в основном представляет собой цифровое изображение. Вместо яркости или цветовой информации у вас есть расстояния. Это слишком широко, чтобы ответить.
3) Для чего все это можно использовать?
Для всего, что использует информацию о глубине. Это слишком широко, чтобы ответить.
4) Как наиболее эффективно сохранить эти данные в файл
Это будет зависеть от вашего разрешения по глубине и многих других факторов, например, если вы хотите сохранить яркость или цвет. Это слишком широкий вопрос, чтобы на него можно было ответить.
5) Если сохранить 20-секундное видео с данными глубины, получится не очень
большой и очень медленный процесс? как справиться с этим
Если вы снимаете только глубину, видео в градациях серого не отличается, учитывая, что у вас одинаковое квантование. Что вы считаете очень большим? Что такое очень медленный процесс? Это слишком широко, чтобы ответить.