Каким образом можно эффективно обрабатывать и извлекать данные из большого количества файлов, содержащих миллион строк каждый?