Да, вы делаете.Проверьте список пакетов в cygwin setup.exe, выберите все svn -подобные пакеты и установите их.Для типичного использования, такого как обновление, принятие, показ истории, это почти идеально.
ОБНОВЛЕНИЕ
(не для кражи кредитов, но, видимо, важное дополнение)
Также должен быть установлен пакет "subversion".