Я предполагаю, что под "панелью с вкладками" вы ссылаетесь на javax.swing.JTabbedPane .
Чтобы ответить на ваш вопрос: AFAIK нет простого способа сделать то, что вы хотите. BasicTabbedPaneUI (или TabbedPaneUI, который определяется внешним видом вашего приложения), который отвечает за рисование области вкладок панели с вкладками, потребует некоторых изменений, чтобы сделать то, что вам нужно.
Если у вас нет времени на написание собственного пользовательского интерфейса, вы можете искать решения в Интернете. Я сомневаюсь, что было бы готовое решение вашего вопроса, но опять же, кто знает?
Надеюсь, это вам немного поможет.