Вы можете использовать Google для сторонней библиотеки CSV, выполнить запрос Java с помощью sqljdbc.jar или любого другого файла, подходящего для вашей базы данных, и передать данные в библиотеку CSV.
Вы можете даже найти стороннюю библиотеку, которая может предоставить вам CSV из запроса SQL и соединения JDBC.
Но если вы собираетесь программно реализовывать CSV, пожалуйста, полностью реализуйте его, включая экранирование, кавычки и т. Д. Википедия содержит подробности.