Да, абстрактные классы работают точно так же, как интерфейсы.
Если WorkerBase - абстрактный класс, а RealWorker - реализация, то:
var container = new Container(x => x.For<WorkerBase>().Use<RealWorker>());
var worker = container.GetInstance<WorkerBase>();