Я пытаюсь загрузить файл csv, который составляет 250 МБ. В основном 4 миллиона строк и 6 столбцов данных временных рядов (1 мин). Обычная процедура:
location = r'C:\Users\Name\Folder_1\Folder_2\file.csv'
df = pd.read_csv(location)
Эта процедура занимает около 20 минут!!!. Очень предварительный я изучил следующие варианты
Интересно, сравнивал ли кто-нибудь эти варианты (или больше) и там был явный победитель. Если никто не ответит, в будущем я опубликую свои результаты. Сейчас у меня просто нет времени.