Если вам просто нужна первая строка, то вы можете использовать модуль csv следующим образом.
import csv
with open("foo.csv", "r") as my_csv:
reader = csv.reader(my_csv)
first_row = next(reader)
# do stuff with first_row
Модуль CSV использует генераторы, поэтому весь файл не загружается в ОЗУ, больше строк загружается по запросудля предотвращения загрузки всего файла в ОЗУ.