Вы должны установить свой DataSFormat CellStyle таким образом (если вы используете целое число и хотите разделитель тысяч)
cellStyle.setDataFormat(creationHelper.createDataFormat().getFormat("#,##0"));
cell.setCellStyle(cellStyle);
Я думаю, что вам нужно что-то вроде этого:возможно, вам нужно немного его изменить) #,##0.00
обратите внимание: очень важно использовать запятую, а не точку.Если ваш языковой стандарт установлен правильно, вы увидите точку.