В базах данных обычно хранятся таблицы данных, как и в книгах Excel, поэтому ответ «вероятно, да». А поскольку вы можете читать и обрабатывать листы Excel с помощью Python, вы также можете использовать данные в Jupyter Notebook.
Но, не зная ничего о том, что находится в вашей базе данных, что это за база данных, что вы планируете делать с данными в Excel (и почему вы не просто читаете базу данных из Jupyter), невозможно дать более полный ответ.