Veri sürümleme için DVC ve Git LFS nedir?

DVC (Veri Sürüm Kontrolü) ve Git LFS (Git Büyük Dosya Depolama), büyük dosyaların ve verilerin sürüm yönetimi için araçlardır; bunlar geleneksel Git'te verimli olmayan depolama yöntemleridir.

Git LFS Git'i genişletir, büyük ikili dosyaları ana depo dışında depolamaya izin verir ve bunları Git anlık görüntülerinde bağlantılarla değiştirir. Bu, büyük dosyalarla çalışmayı kolaylaştırır, ancak ML boru hatları için karmaşık mekanizmalar sunmaz.

DVC daha gelişmiş bir araçtır ve ML projelerine yöneliktir. Şunları yapabilir:

• Verileri ve modelleri belirli Git commit'leriyle ilişkilendirerek sürüm kontrolü yapmak.
• ML boru hatlarını ve bağımlılıklarını yönetmek.
• Verileri uzak depolamalarda saklamak (S3, Azure, Google Drive vb.).

DVC kullanım örneği:

dvc init
# Veriyi sürüm kontrolüne ekle
 dvc add data/dataset.csv
# Dosyanın meta verilerini tutan .dvc dosyasını oluştur
 git add data/dataset.csv.dvc .gitignore
 git commit -m "DVC ile veri seti ekle"

Bu şekilde, DVC ML'de veri ve deneyimlerin daha kapsamlı yönetimini sağlar, Git LFS ise büyük dosyalar için daha basit bir Git genişletmesidir.