Я бы только прокомментировал ответ Etaoin, но у меня пока нет на него репутации.
Во всяком случае, позвоните, прежде чем создавать экземпляр JSlider:
UIManager.put("Slider.paintValue", false);
Обратите внимание на заглавную букву «V» в paintValue.
Кроме того, чтобы напечатать все забавные вещи, которые в данный момент установлены вашим UIManager, введите этот код в любом месте после создания экземпляра UIManager:
Iterator<Entry<Object, Object>> it = UIManager.getDefaults().entrySet().iterator();
while(it.hasNext())
System.out.println(it.next());