Что такое expectation suite?

Expectation suite — это набор правил или ожиданий, которые определяют требования к качеству данных в контексте Data Quality и Data Validation.

Обычно expectation suite включает в себя множество отдельных ожиданий (expectations), например:

• Проверка, что значения в столбце не пустые
• Проверка, что значения находятся в заданном диапазоне
• Проверка уникальности значений
• Проверка соответствия формату (например, email)

Expectation suite используется для автоматической проверки данных на соответствие этим правилам, что помогает выявлять ошибки, аномалии и поддерживать качество данных на нужном уровне.

Пример использования в библиотеке Great Expectations (Python):

import great_expectations as ge

df = ge.from_pandas(my_dataframe)
df.expect_column_values_to_not_be_null('age')
df.expect_column_values_to_be_between('salary', min_value=30000, max_value=200000)

results = df.validate()

Таким образом, expectation suite — это структурированный набор проверок, который помогает систематически контролировать качество данных.