Veri Kataloğu Nedir?
İngilizce: Data Catalog
Yayın: · Son güncelleme:
Veri Kataloğu Nedir? Kısaca
Veri kataloğu, bir kurumdaki veri setlerinin, tabloların ve raporların meta verilerini tek bir yerde toplayan, aranabilir bir envanterdir. Hangi verinin nerede olduğunu, ne anlama geldiğini ve kimin sorumlu olduğunu gösterir.
Veri kataloğu, bir kurumun veri varlıkları için bir kütüphane kataloğu gibi çalışır. Kitapların kendisini değil, onları bulmayı sağlayan bilgileri tutar; veri kataloğu da veriyi değil, veri hakkındaki bilgiyi saklar.
Veri kataloğu nedir?
Büyük kurumlarda yüzlerce veritabanı, binlerce tablo ve dosya bulunabilir. Bir analist "müşteri kayıp oranı verisi nerede, hangi tabloya güvenmeliyim?" sorusuna cevap ararken saatler harcayabilir. Veri kataloğu bu soruyu meta veri üzerinden cevaplar.
Tipik bir katalog şu bilgileri içerir:
- Teknik meta veri: Tablo adı, sütunlar, veri türleri, konum.
- İş meta verisi: Alanların iş dilinde ne anlama geldiği, tanımlar ve sözlük terimleri.
- Sahiplik: Verinin sorumlusu ve iletişim bilgisi.
- Köken (lineage): Verinin hangi kaynaktan geldiği ve hangi dönüşümlerden geçtiği.
- Kalite ve kullanım bilgisi: Güncelleme sıklığı, kalite kontrolleri, en çok kimlerin kullandığı.
- Erişim ve gizlilik etiketleri: Kişisel veri içerip içermediği, kimin erişebileceği.
Ne işe yarar?
Varsayımsal bir bankada iki farklı ekibin "aktif müşteri" kavramını farklı tanımladığını düşün. Katalog, ortak tanımı ve bu tanıma uyan doğru tabloyu görünür kılarak tutarsız raporların önüne geçer.
Başlıca faydaları şunlardır: veriyi bulma süresinin kısalması, tekrar eden çalışmaların azalması, kişisel verilerin daha kolay izlenmesi ve veri yönetişimi kurallarının uygulanabilmesi. Yapay zekâ projelerinde de hangi eğitim verisinin nereden geldiğini belgelemek için önemlidir.
Nelere dikkat etmeli?
Bir katalog ancak güncel tutulduğu sürece işe yarar. Meta verilerin mümkün olduğunca otomatik toplanması ve her veri setinin bir sorumlusunun bulunması, kataloğun eskimiş bir listeye dönüşmesini engeller.
Sıkça Sorulan Sorular
Veri kataloğu veriyi depolar mı?
Genellikle hayır. Veri kataloğu verinin kendisini değil, verinin nerede durduğunu, ne anlama geldiğini ve kime ait olduğunu anlatan meta veriyi saklar.
Veri kataloğu ile veri sözlüğü arasındaki fark nedir?
Veri sözlüğü genellikle tek bir veritabanındaki alanların tanımlarını listeler. Veri kataloğu ise kurumdaki tüm veri varlıklarını arama, sahiplik, köken ve kullanım bilgileriyle birlikte kapsayan daha geniş bir araçtır.