Вы еще используете csv в Pandas? Ой, ой, ой
Не csv единым жив Pandas.
В видео продемонстрированна работа с легковесной библиотекой Parquet, расширяющей возможности Pandas.
А она позволяет:
1. Чтение файлов до 6 -10 раз быстрее
2. Сохранение - до 15-25 раз быстрее
3. и несколько других очень приятных моментов
Смотрим.