Вы можете использовать
\captionsetup[figure]{labelformat=empty}
, чтобы отключить текст заголовка, а затем используйте
\captionsetup[figure]{labelformat=default}
, чтобы снова включить текст заголовка, если вы хотите, чтобы он был другим в разных разделах.,