Nədir gözləmə dəstləri?

Expectation suite — bu, Data Quality və Data Validation kontekstində məlumatların keyfiyyət tələblərini müəyyən edən qaydalar və ya gözləntilər toplusudur.

Adətən, expectation suite çoxsaylı fərdi gözləntiləri əhatə edir, məsələn:

• Sütundakı dəyərlərin boş olmaması
• Dəyərlərin müəyyən edilmiş diapazonda olması
• Dəyərlərin unikal olması
• Format uyğunluğu (məsələn, email)

Expectation suite bu qaydalara uyğunluğu avtomatik yoxlamaq üçün istifadə olunur, bu da səhvləri və anomaliyaları aşkar etməyə və məlumatların keyfiyyətini tələb olunan səviyyədə saxlamağa kömək edir.

Great Expectations (Python) kitabxanasında istifadə nümunəsi:

import great_expectations as ge

df = ge.from_pandas_mənim_məlumatlarım
df.expect_column_values_to_not_be_null('yaş')
df.expect_column_values_to_be_between('maaş', min_value=30000, max_value=200000)

nəticələr = df.validate()

Beləliklə, expectation suite məlumatların keyfiyyətini sistematik şəkildə nəzarət etməyə kömək edən strukturlaşdırılmış yoxlama toplusudur.