Назовите 2 файла .properties с тем же базовым именем плюс код языка, например,
prop_de.properties и prop_en.properties. Затем скопируйте один из них и назовите его prop.properties. Это запасной вариант. Если файлы находятся в пакете org.foo, тогда
ResourceBundle bundle = ResourceBundle.getBundle( "org.foo.prop" );
дает вам набор с желаемым поведением.