Как ты оптимизировал запросы с 10-20 минут до 5-7? Что за отчёты выполнялись так долго?

Оптимизация долгих запросов (10-20 минут до 5-7 минут) обычно включает несколько шагов:

1. Анализ плана выполнения — с помощью EXPLAIN или аналогичных инструментов выявлял узкие места.
2. Индексация — добавлял или корректировал индексы по часто используемым в фильтрах и соединениях полям.
3. Переписывание запросов — упрощал сложные JOIN-ы, заменял подзапросы на более эффективные конструкции.
4. Кэширование промежуточных результатов — если отчёты строились на больших объёмах данных, сохранял агрегаты в отдельные таблицы.
5. Параллелизация и батчинг — разбивал запросы на части или запускал параллельно.

Что за отчёты? Обычно это были сложные аналитические отчёты с большим количеством агрегаций и фильтров по историческим данным, например, отчёты по продажам, поведению пользователей или финансовые сводки, где данные собирались из нескольких таблиц с миллионами записей.

Пример оптимизации на Go с использованием подготовленных выражений и индексов:

rows, err := db.Query("SELECT user_id, COUNT(*) FROM orders WHERE order_date > ? GROUP BY user_id", startDate)
// Убедиться, что по order_date есть индекс

Главное — понять, где именно запрос тормозит, и устранить эту причину.