Я нашел способ, с другим подходом.Вместо того, чтобы создавать 2 ячейки, я создал ListView для каждой ячейки и установил его как графический.
SpreadsheetCell cell = SpreadsheetCellType.STRING.createCell(x, y, 1, 1, "");
ListView<SpreadListCell> listView = new ListView<>(valuesList);
listView.getSelectionModel().setSelectionMode(SelectionMode.SINGLE);
listView.setPrefHeight(valuesList.size()*24);
cell.setGraphic(listView);