Конфигурации решения связаны с конфигурациями проекта. Для каждой конфигурации решения мы указываем, какие конфигурации проекта использовать. Например, когда мы выбираем решение Release, обычно выбираются проекты Release.
Итак, создайте две конфигурации проекта, соответствующие двум конфигурациям решения, которые вы хотите для dll, который вы хотите. Когда вы выбираете конфигурацию решения, будут выбраны другие конфигурации проекта, и будет указана правильная DLL.