Identity Server 4 использует только одну пару асимметричных ключей для подписи JWT.Насколько мне известно, нет встроенной поддержки использования пары ключей для каждого арендатора (если, конечно, вы не размещаете отдельный экземпляр для каждого арендатора).
Также стоит отметить, что технически вы можете иметь более одной пары ключей, но она предназначена для поддержки пролонгации ключа подписи , а не для нескольких арендаторов.