Git - это распределенная система контроля версий (DVCS). Это означает, что у вас будет хранилище на вашем локальном компьютере. Вам нужно будет прочитать о «толкании», «извлечении» и «вытягивании». Все это под идеей «удаленных» - как вы говорите одному хранилищу, где живет другой.
Вы можете ожидать, что в корневом каталоге вашего рабочего каталога будет находиться папка .git.
Я бы быстро прочитал о git в любом из следующих мест:
gitready.com
progit.org/book
git-scm.com
На freenode также есть канал #git.