Mussten Sie direkt mit Spark arbeiten? Was ist sein Nachteil?

Да, приходилось работать напрямую со Spark. Один из основных минусов Apache Spark — это высокая потребность в ресурсах (память, CPU), особенно при обработке больших объемов данных. Кроме того, Spark может иметь значительную задержку при запуске задач (latency), что не всегда подходит для задач с низкой задержкой. Также сложность настройки и оптимизации производительности требует глубоких знаний, особенно при работе с кластером и распределёнными вычислениями.