Вы не сказали, как включили его в начало файла. Это должно работать, если вы сделали
#include "mysql.h"
вместо
#include <mysql>
что является ошибкой, которую иногда совершают люди.
РЕДАКТИРОВАТЬ: Возможно, попробуйте использовать относительные пути, а не абсолютный путь (как вы, кажется, делаете) при указании дополнительных каталогов включения? Я не знаю, будет ли это иметь значение (и у меня нет времени проверять), но я всегда использовал относительные пути, и это всегда работало для меня (это также хорошая практика в любом случае) Итак, вместо
C: \ Projects \ ProjectName \ Include
что-то вроде
\ Включить или .. \ Включить в зависимости от структуры файла вашего проекта.