BAŞARI HİKAYESİ

Databricks ile çok alanlı havalimanı veri ortamını birleştirme

Kurumsal düzeyde yönetişim yükseltmesi ve sıfır iş kesintisi için Databrick'in Unity Catalog'una geçiş

challenge_icon
meydan okuma

Küresel havalimanı ve seyahat perakende grubunun veri platformu, finans, İK, operasyonlar ve perakende dahil olmak üzere çok çeşitli departmanlara hizmet veriyordu; her biri kendi analitik işlem hatları, raporlama panoları ve erişim modelleriyle yarı bağımsız olarak çalışıyordu. Bu durum zaman içinde parçalı yönetişime, tutarsız erişim kontrollerine ve operasyonel verimsizliklere yol açtı.
process_icon
ÇÖZÜM

Ekip, veri taşıma süreci sırasında iş sürekliliğini korurken veri yönetimini merkezileştirmek için Unity Catalog'dan yararlandı. Bu, şu yollarla başarıldı:

  • İşle uyumlu kataloglar: Kataloglar Bronz, Gümüş ve Altın katmanlarla iş birimlerine göre yapılandırılarak veri sahipliği, veri soy takibi ve erişim kontrolü kolaylaştırıldı.
  • Çift metastore senkronizasyonu: Delta tabloları Hive ve Unity Catalog arasında gerçek zamanlı olarak yansıtılarak kesintisiz veri erişimi, analitik ve sıfır kesinti sağlandı.
  • Düşük etkili not defteri yeniden düzenleme: Basit katalog değiştirme mantığı ve bağlamsal parametreler geriye dönük uyumluluğu mümkün kılarak 1.500'den fazla not defterinin yeniden yazılmasını önledi.
  • Kurumsal düzeyde güvenlik: Satır ve sütun düzeyinde güvenlik, veri koruması, erişim kontrolü ve uyumluluğu zorunlu kılar.
  • Otomatik yönetişim iş akışları: Geçiş, test ve geri alma iş akışları hız, izlenebilirlik ve esneklik için otomatikleştirildi.
solution_icon
SONUÇ
Tüm gösterge tabloları ve analizler, gerçek zamanlı ikili senkronizasyon ve doğrulama ile desteklenerek geçiş boyunca sorunsuz bir şekilde çalıştı. Unity Catalog aracılığıyla merkezi yönetişim, tam denetlenebilirlik, meta veri görünürlüğü ve uyumluluk sağladı. İş birimleri artık birleşik bir yönetişim modeli içinde bağımsız olarak çalışıyor ve güvenli bir şekilde inovasyon yapıyor. Mühendislik hızı, yeniden kullanılabilir şablonlar ve minimum kod değişikliği sayesinde geçiş süresinde %60'lık bir azalma ile hızlandı ve yeni ekiplerin ve veri kümelerinin hızlı bir şekilde işe alınmasını sağladı.
 
Toplamda yaklaşık 1.500 üretim not defteri taşındı ve binlerce raporda sıfır kesinti ile aktif Delta tablolarının %100'ü senkronize edildi. Tüm ekipler artık tam güvenlik uyumluluğu sağlayan tek ve yönetilen bir analitik platformunda çalışıyor.