data-infra
Sözlük ↗Veri Kökeni (Lineage)
Veri kökeni, verinin nereden gelip nereye gittiğinin haritasıdır: Bir değeri hangi kaynağın ürettiği, ona hangi dönüşümlerin dokunduğu ve alt tarafta hangi tabloların, panoların ya da modellerin ona bağlı olduğu. İki kritik soruyu yanıtlar: "Bu rakam nereden geldi?" (üst taraf) ve "Bu sütunu değiştirirsem ne bozulur?" (alt taraf). SaaS geliştiricileri için köken bilgisi, hatalı bir panoyu ayıklamayı bir günlük Slack arkeolojisinden beş dakikalık bir izlemeye dönüştüren şeydir. Bir KPI tuhaf göründüğünde, kökeni her veri hattı adımından geriye izleyerek nerede saptığını bulursunuz. Bir şema göçünden önce, kimleri bozacağınızı görmek için alt taraf kökenine bakarsınız. Modern araçlar kökeni otomatik yakalar. dbt, SQL modellerinizden bir bağımlılık grafiği kurar; sütun düzeyi köken araçları (DataHub, OpenMetadata ya da ambara gömülü özellikler) sorguları ayrıştırarak tek tek alanları izler. Pratik not: Etki analizi için sütun düzeyi köken, tablo düzeyinden çok daha yararlı ama sürdürmesi daha zordur — önce en kritik metriklerinize yatırım yapın ve ağır işi elle çizimler yerine otomatik ayrıştırmaya bırakın.
İlgili terimler