Я хочу добавить файл dev.jks в хранилище с паролем файла jks.поэтому, когда мое приложение пытается использовать JKS из хранилища, можно использовать тот же пароль для получения сертификата
То есть вы хотите сохранить файл в Vault и пароль для этого файла?
Вы можете использовать значение kv, например,
vault kv put secret/dev.jks file="$(dev.jks | base64 -w0)" password=my-pass