データ・エンジニアリングにおけるメダリオン・アーキテクチャ(medallion architecture)とは？
メダリオン・アーキテクチャとは、データ・エンジニアリングの概念の一つである。 この考え方は、システムのソースデータまたはレコードシステムのデータをブロンズ層に着地させるというものです。 ブロンズ層ではデータは変更されず、データ品質に問題があったとしてもソースシステムと正確に一致する必要があります。 次にシルバーレイヤーでは、ブロンズの生データが変換され、データ品質が適用されて結合され、シルバーにランディングされます。 次にゴールドレイヤーでは、シルバーのデータセットを結合し、機械学習モデルの出力など他のデータで強化したデータセットが作られます。 これらのゴールドデータセットは、ダッシュボードやレポーティングでビジネスで使用され、提供されます。