На самом деле в документации AWS нет информации об этом.
Я не думаю, что существует ограничение на число очередей.
На самом деле мы работаем с 28 очными очередями в нашей инфраструктуре без каких-либо проблем.
Если хотя бы вы превысили лимит, простой билет поддержки AWS может увеличить его.Так же, как процесс увеличения лимита числа Ec2.
Надеюсь, это поможет