Полагаю, вы имеете в виду столбец, а не ячейку, не так ли?
Для столбца вы можете использовать что-то вроде этого:
<dg:DataGridComboBoxColumn Header="Current Category"
SelectedValueBinding="{Binding Path=CurrentCategory}"
SelectedValuePath="CategoryID"
DisplayMemberPath="CategoryName"
ItemsSource="{Binding Source={StaticResource categoriesDataProvider}}">
Если вы хотите изменить привязки во время выполнения, вам нужно назвать свой столбец и установить соответствующие привязки в коде.
Я нашел решение XAML в первом результате через Google с поисковым термином "wpf столбец комбинированного списка данных".