Это не так сложно. Вы можете получить доступ к каждому значению в этом словаре и отсортировать его. Вот так:
a={'a':[4,2,1], 'v':[41,5,1]}
for i,j in a.items():
a[i]=sorted(a[i])
print(a)
Вывод:
{'a': [1, 2, 4], 'v': [1, 5, 41]}
Надеюсь, это то, что вы искали.