Свойство cacheColorHint необходимо установить для фактического списка, например, так.Как указано в 3dmg, для него обычно устанавливается тот же цвет фона, что и для контейнера, в котором находится ListView. В приведенном ниже примере ListView будет находиться внутри LinearLayout, который также имеет белый (#FFF) фон.
<ListView
android:id="@+id/android:list"
android:layout_width="fill_parent"
android:layout_height="0dp"
android:layout_weight="1.0"
android:cacheColorHint="#FFF" />