Találkozott már a Liquibase-szel?

A Liquibase egy eszköz az adatbázis verziókezelésére (Database Change Management). Lehetővé teszi az adatbázis szerkezetében végrehajtott változtatások (például táblák létrehozása, oszlopok módosítása, indexek hozzáadása) leírását szkriptek (changelogs) formájában, amelyeket egymás után és automatikusan lehet alkalmazni.

ML és Data Engineering kontextusában a Liquibase segít fenntartani az adatbázis séma összhangját különböző környezetek között (fejlesztés, teszt, gyártás), ami fontos nagy adatmennyiségekkel és összetett pipeline-kkal való munkánál. Emellett megkönnyíti a változtatások visszavonását és a CI/CD-vel való integrációt.

XML formátumú changelog példája:

<databaseChangeLog
    xmlns="http://www.liquibase.org/xml/ns/dbchangelog"
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xsi:schemaLocation="http://www.liquibase.org/xml/ns/dbchangelog
    http://www.liquibase.org/xml/ns/dbchangelog/dbchangelog-3.1.xsd">

    <changeSet id="1" author="user">
        <createTable tableName="employee">
            <column name="id" type="int" autoIncrement="true" primaryKey="true"/>
            <column name="name" type="varchar(255)"/>
        </createTable>
    </changeSet>

</databaseChangeLog>

A Liquibase különböző adatbázis-kezelő rendszerekkel (DBMS) és CI/CD rendszerekkel integrálódik, így kényelmes az adat-infrastruktúra automatizálásához.