Мне удалось решить эту проблему, взяв последнюю версию dll из nuget, и просто положив ее в боковую папку и указав ссылку на dll.
Я не уверен, почему nuget испортил ее, но после того, как я взялNuget вне изображения сборки работал.
Мне не нравится тот факт, что я не могу использовать Nuget для получения обновлений для этого проекта, но, как минимум, он работает.