Databricksを活用して、多領域にわたる空港データの統合を実現する

グローバルな空港と旅行小売グループのデータプラットフォームは、財務、人事、運営、小売など、多様な部門にサービスを提供していました。各部門は半独立した形で運営され、独自の分析パイプライン、レポートダッシュボード、アクセスモデルを保有していました。これにより、時間とともに、ガバナンスの断片化、アクセス制御の不一致、および運営の非効率性が生じました。

チームは、データ移行プロセス中にデータガバナンスを中央集約化し、事業継続性を維持するためにUnity Catalogを活用しました。これは以下の方法により実現されました：

• ビジネスに連動したカタログ： カタログは事業部門ごとにブロンズ、シルバー、ゴールドの3つの層で構成され、データ所有権の管理、データ系譜の追跡、およびアクセス制御を効率化しました。
• デュアルメタストア同期: デルタテーブルは、HiveとUnity Catalogの間でリアルタイムにミラーリングされ、データアクセス、分析、および業務の停止なしに継続的に利用可能でした。
• 低影響のノートブックリファクタリング: シンプルなカタログ切り替えロジックとコンテキスト依存パラメーターにより、後方互換性が確保され、1,500台を超えるノートパソコンの再プログラミングを回避しました。
• エンタープライズグレードのセキュリティ： 行レベルと列レベルのセキュリティによるデータ保護、アクセス制御、およびコンプライアンスの確保。
• 自動化されたガバナンスワークフロー： 移行、テスト、およびロールバックのワークフローは、速度、追跡可能性、および回復力を向上させるために自動化されました。

すべてのダッシュボードと分析ツールは、リアルタイムのデュアル同期と検証機能により、移行プロセス全体を通じてスムーズに動作しました。Unity Catalogによる中央集権的なガバナンスにより、完全な監査可能性、メタデータの可視性、およびコンプライアンスが実現されました。ビジネス部門は、統一されたガバナンスモデル内で独立して運営され、安全にイノベーションを推進しています。再利用可能なテンプレートと最小限のコード変更により、移行時間が60%短縮され、エンジニアリングの速度が向上しました。これにより、新しいチームやデータセットの迅速なオンボーディングが可能になりました。

合計で約1,500台の生産用ノートパソコンが移行され、数千のレポートにおいてデルタテーブルの100%が中断なしに同期されました。すべてのチームは現在、単一の管理されたアナリティクスプラットフォーム上で運用されており、完全なセキュリティ準拠が確保されています。