Floemdata
Veri ve ETL

Kaynakta Kolon Değişince Veri Hattı Ne Yapmalı?

Kaynak sistemde bir kolon eklenir, silinir ya da adı değişir. Veri hattı o gün ne yapmalı? Şema sözleşmesi, üç tepki biçimi ve Floemdata'nın gerçek durumu.

Floemdata · · 4 dk okuma
Birbirine geçen iki tarak; sağda solda eşi olmayan, içi boş fazladan bir diş

Pazartesi sabahı satış raporu boş geliyor. Kaynak sistemde bir güncelleme yapılmış, bir kolonun adı değişmiş; veri hattı ya hata verip durmuş ya da o kolonu sessizce boş okumuş. İkinci durum daha tehlikelidir: rapor açılır, ama rakamlar yanlıştır.

Şema değişikliği üç biçimde gelir

  • Kolon eklendi: çoğu zaman zararsızdır, ama hat tüm kolonları kopyalıyorsa ambar tablosu beklenmedik biçimde genişler.
  • Kolon silindi ya da adı değişti: hattın beklediği alan yoktur. En sık kırılma buradadır.
  • Tür ya da anlam değişti: kolon aynı adla durur ama artık metin yerine sayı taşır, ya da aynı kodun anlamı değişir. Hata vermez, bu yüzden en zor fark edilenidir.

Veri sözleşmesi: iki tarafın ortak sözü

Veri sözleşmesi, kaynak ile hat arasında yazılı bir listedir: hangi tablolar, hangi kolonlar, hangi türler, hangileri boş olabilir. Kurumsal bir araç şart değil; bir elektronik tablo ya da hattın yanındaki bir yapılandırma dosyası da iş görür. Önemli olan hattın beklentisinin açıkça yazılı olması.

Hat farklılığı görünce ne yapmalı

  • Durdurup bildirmek (sıkı): beklenen kolon yoksa o tabloyu yüklemez ve kimin bakacağını söyler. Raporlar eski ama doğru veriyle kalır.
  • Yüklemeye devam edip uyarmak (esnek): yeni kolonları yok sayar, eksik kolonu boş bırakır, uyarı yazar. Hız kazandırır; ama boş değer rapora sızabilir.
  • Kolon bazlı karar: kritik kolonlar (tutar, tarih, anahtar) için sıkı, bilgi amaçlı kolonlar için esnek davranmak.

Hangisini seçerseniz seçin, değişikliğin sessiz kalmaması gerekir. Sıkı davranışın bedeli bir gün gecikmiş rapordur; sessiz davranışın bedeli yanlış karardır.

Küçük bir kontrol listesi

  • Kaynak sistem güncellemeleri hat sahibine önceden bildiriliyor mu?
  • Hat her çalışmada beklenen kolonları kaynakla karşılaştırıyor mu?
  • Eksik kolon halinde rapor son iyi veriyi mi gösteriyor, boş mu?
  • Yeni kolon eklenince kimin karar vereceği yazılı mı?

Floemdata'da durum

Floemdata'nın kurulum öncesi keşif adımı, SAP Business One tablolarının ve beklenen kolonların var olup olmadığını denetler; eksik tablo ya da kolon varsa profil "hazır değil" olarak işaretlenir. Çıkarım manifestinde alınacak kolonlar tek tek yazılıdır. Manifestte izin verilen bir kullanıcı tanımlı alan (UDF) kaynakta yoksa çıkarım hata verir ve durur.

Şunları bulamadık ya da denemedik: kaynaktaki bir kolon silindiğinde çalışan boru üzerindeki davranışını gerçek bir müşteri ortamında doğrulamadık; kolon türü ya da anlam değişikliğini yakalayan bir denetim kodda yok. Manifestte sayılmayan yeni bir kolonun çekilmediği, kolon listesinin açık yazılmış olmasından çıkarılan bir sonuçtur, ayrıca sınanmadı.

Başlangıç için kaynak sisteminizin sürüm notlarını okuyan kişiyi belirleyin ve hattın tablo-kolon listesini bir sayfaya yazın. Sorularınız için Floemdata ekibine info@floemdata.com adresinden yazabilirsiniz.

← Bütün rehberler