Из документации вы должны установить срок действия в качестве абсолютной даты.
Итак, вы можете получить текущую дату, добавить к ней один день и затем sh время до полуночи.
const tomorrow = new Date();
tomorrow.setDate(tomorrow.getDate() + 1);
tomorrow.setHours(0, 0, 0, 0);
this.props.cookies.set('num_tag', num_tag, {expires: tomorrow});