Скорее всего, это Border, Margin или Padding в контейнере вашего элемента (т.е. ListBoxItem, если вы используете ListBox), который можно исправить с помощью ItemContainerStyle или BorderThickness = 1, BorderBrush = Transparent или null, если Border вашей кнопки .
Используйте Снуп, как Дэн предложил выяснить.