Если вы хотите сразу изменить цвет шрифта заголовка раздела, то вам нужно заново определить команду startsection.
Следующая ссылка содержит подробное описание настройки цвета шрифта заголовков разделов, Заголовок и заголовки разделов
Я скопировал и вставил соответствующий код, который необходимо вставить в преамбулу,
\renewcommand\section{%
\@startsection{section}{1}{\z@}%
{-3.5ex \@plus -1ex \@minus -.2ex}%
{2.3ex \@plus.2ex}%
{\color{RoyalBlue}\sffamily\Large\bfseries}}
\renewcommand\subsection{%
\@startsection{subsection}{2}{\z@}%
{-3.25ex\@plus -1ex \@minus -.2ex}%
{1.5ex \@plus .2ex}%
{\color{RoyalBlue}\sffamily\large\bfseries}}
Кроме того, не забудьте импортировать пакет цветов
\usepackage{color}
Вот ссылка для получения дополнительной информации о цветах, Информация о цвете