Неважно, на каком порту вы запускаете службу, но чаще всего от того, с каким пользователем вы запускаете эту службу и что этот пользователь может делать.
Что вам нужно, так это пользователь с ограниченными правами на chroot, который запускает ваш svn-репозиторий, если вы хотите быть в безопасности.
Полагаю, вы пытаетесь запустить svn-репозиторий. Самое простое, что вы можете сделать - создать свой репозиторий как пользователь и туннелировать ваши соединения через ssh с помощью svn+ssh://svnuser@my.domain.com/home/myuser/REPOSITORY
стиль ссылок.
Если вы хотите, чтобы больше пользователей SVN получили доступ к вашему сервису, создайте группу SVN и добавьте их в группу SVN,
chmod -R g+w /home/myuser/REPOSITORY
chgrp -R svngroup /home/myuser/REPOSITORY
и все готово