Как сказал Нукту, вы можете использовать приведенный ниже атрибут в случае неопределенного жеста.
android:uncertainGestureColor="#000"
в случае определенного жеста система примет значение цвета из следующего атрибута.
android:gestureColor="#000"
Еще одна вещь, значение цвета всегда должно оставаться цветом фона, тогда только жест не будет виден.