Я думаю, вы можете заказать_ на модели FKey.
A.objects.order_by('B__name')
Если вы не можете, вам нужно использовать API аннотаций Django ORM, чтобы создать новое поле, и вы сможете упорядочить его соответственно:
A.objects.annotate(bname='B__name').order_by('bname')