Каким-то образом один компонент, интегрированный в тест, запрашивал версию Castle.Core 4.1.0.0, но версия 4.0.0.0 была включена в сборку.
Я добавил это в файл конфигурации:
<runtime>
<assemblyBinding xmlns="urn:schemas-microsoft-com:asm.v1">
<dependentAssembly>
<assemblyIdentity name="Castle.Core" publicKeyToken="407dd0808d44fbdc" culture="neutral" />
<bindingRedirect oldVersion="0.0.0.0-4.1.0.0" newVersion="4.0.0.0" />
</dependentAssembly>
...