Вы не можете изменить цвет границы напрямую, но вы рисуете свой собственный в любом цвете и стиле, который пожелаете.См. эту статью .
Пример кода из статьи.(Это все, что вам нужно.)
private void panel1_Paint(object sender, PaintEventArgs e) {
ControlPaint.DrawBorder(e.Graphics, this.panel1.ClientRectangle,
Color.DarkBlue, ButtonBorderStyle.Solid);
}
private void panel1_Resize(object sender, EventArgs e)
{
Invalidate();
}