Я разрабатываю систему, которая может иметь тысячи заданий cron. Я создаю пользовательский интерфейс, в котором можно создать задание cron и указать в нем интервал. Какой дизайн системы вы предложите сделать его масштабируемым?
Я бы рекомендовал поближе познакомиться с существующими системами. Может быть, они уже выполняют ваши потребности. Посмотрите на apache airflow (https://airflow.apache.org/), Azkaban (https://azkaban.github.io/) или oozie) (http://oozie.apache.org/).
Если вы действительно хотите использовать свою собственную систему, пожалуйста, сообщите намнемного больше о требованиях.