Вы можете статически связать эту библиотеку внутри DLL проекта (A). Благодаря этому двоичный файл, созданный библиотекой, будет включен в двоичный файл библиотеки DLL, проект (B) вообще не будет изменен (если использование статической библиотеки не повлияет на код интерфейса самой библиотеки DLL, ie: заголовок, включенный в проект (B).