Система перетаскивания реализована поверх системы обработки событий. Система обработки событий (то, что вы отслеживаете) не имеет понятия о том, что перетаскивается, просто происходит перетаскивание мышью.
Если вы хотите знать, что перетаскивается, вам нужно будет записать местоположение мыши в начале перетаскивания и использовать ее для расчета того, что перетаскивается. Для этого вы можете использовать специальные API.