После выхода из цикла для создайте новую строку и добавьте 5-й элемент из list2
во второй столбец
for(int j=0;j<list1.size();j++)
{
Row row = sheet.createRow(j+1);
row.createCell(0).setCellValue(list1.get(j));
row.createCell(1).setCellValue(list2.get(j));
}
sheet.createRow(j+1);
row.createCell(1).setCellValue(list2.get(j));
Если вы хотите сделать это внутризацикливание, зацикливание большего списка, но добавление условия
for(int j=0;j<list2.size();j++)
{
Row row = sheet.createRow(j+1);
if (j < list1.size()) {
row.createCell(0).setCellValue(list1.get(j));
}
row.createCell(1).setCellValue(list2.get(j));
}