數據倉庫中ETL建模問題的研究.pdf

1、ETL按照統(tǒng)一的規(guī)則集成數據，完成數據從數據源向目標數據倉庫的轉化。它是解決異構數據一致性和集成化的有效方案，是數據倉庫獲得高質量數據的重要環(huán)節(jié)。為了輔助設計人員更好地進行 ETL過程的設計和編碼實現，降低ETL過程的設計和維護代價，提高ETL工具的性能，相關領域專家提出了對ETL過程建模的思想。目前對于ETL建模問題的研究還處于起步階段，各方面的技術還不成熟，存在一定的缺陷。本文分別在概念級和邏輯級上對ETL建模問題進行綜合分析，在此

2、基礎上提出了建立ETL概念模型和設計ETL邏輯架構的方法，具體內容如下。
　　首先，對建立ETL概念模型的方法進行分析，發(fā)現現有的ETL概念建模方法沒有深入地闡述ETL的內部映射結構以及相應轉換操作的構建過程。因此，提出了一種新的基于結構圖來構建圖形化ETL概念模型的方法，該方法深入描述了ETL過程中源數據與目標數據之間的映射關系和對應的轉換操作。首先給出了結構圖的定義以及結構圖中節(jié)點和邊的圖形表示，并通過一個實例，詳細闡述了基于

3、結構圖的ETL概念模型的構建過程。
　　其次，對現有的ETL工具和ETL系統(tǒng)架構的設計方法進行研究，詳細分析了傳統(tǒng)ETL架構的局限性以及元數據對于ETL過程的重要性，在此基礎上，對傳統(tǒng)的ETL架構進行改進，并利用結構圖ETL概念模型來獲取元數據信息，結合元數據管理思想，最終設計了一種新的基于元數據驅動的ETL系統(tǒng)架構。
　　最后，設計了一個ETL元數據生成系統(tǒng)，以解決ETL元數據的提取、生成、存儲和管理，以及實現對ETL概念