В отличие от источника системы координат камеры, которая находится в центре проекции, мировая система координат не является фиксированной и должна определяться вами в зависимости от варианта использования. Начало мировой системы координат может быть где угодно, независимо от источника системы координат камеры.
Преобразование между координатами мира и камеры определяется моделью камеры-обскуры. См. this для краткого обзора модели камеры-обскуры.