Ի՞նչ է սպասման հավաքածուն։

Expectation suite — դա կանոնների կամ սպասումների հավաքածու է, որոնք սահմանում են տվյալների որակի պահանջները Data Quality և Data Validation համատեքստում:

Ընդհանուր առմամբ, expectation suite-ը ներառում է մի շարք առանձին սպասումներ, օրինակ՝

• Ստուգել, որ սյունակի արժեքները չեն դատարկ
• Ստուգել, որ արժեքները գտնվում են սահմանված տիրույթում
• Ստուգել արժեքների եզակիությունը
• Ստուգել ձևաչափի համապատասխանությունը (օրինակ՝ էլփոստ)

Expectation suite-ը օգտագործվում է ավտոմատ կերպով ստուգելու համար, արդյոք տվյալները համապատասխանում են այս կանոններին, ինչը օգնում է հայտնաբերել սխալները, անոմալիաները և պահել տվյալների որակը անհրաժեշտ մակարդակում:

Օրինակ՝ օգտագործումը Great Expectations (Python) գրադարանում:

import great_expectations as ge

df = ge.from_pandas-իմ_մասին_տվյալները
df.expect_column_values_to_not_be_null('տարի')
df.expect_column_values_to_be_between('ամատույց', min_value=30000, max_value=200000)

արդյունքներ = df.validate()

Այսպիսով, expectation suite-ը կառուցվածքային ստուգումների հավաքածու է, որը օգնում է համակարգային կերպով վերահսկել տվյալների որակը: