Краткий ответ: нет. Не в селекторах сообщений JMS, как описано в JMS API
Самое близкое к регулярному выражению, которое вы можете получить, это конструкция "LIKE", как в SQL:
header LIKE 9%S // matches 9.*S
header LIKE 9_S // matches 9.S
Это позволит вам упростить ваш селектор, но все еще далеко от гибкости регулярных выражений.