基于數(shù)據(jù)網(wǎng)格的海量數(shù)據(jù)管理若干關鍵技術研究.pdf

1、由于信息技術的飛速發(fā)展，數(shù)據(jù)爆炸己成為一個突出的問題，因而海量數(shù)據(jù)管理技術成為人們關心的熱點研究課題。本文以數(shù)字化虛擬人為背景，結合國家863高科技研究發(fā)展計劃課題“數(shù)字化虛擬中國人的數(shù)據(jù)集構建與海量數(shù)據(jù)庫系統(tǒng)”，對海量數(shù)據(jù)管理技術做了較為深入的研究。主要的工作和成果如下： 1、基于數(shù)據(jù)網(wǎng)格技術的海量數(shù)據(jù)管理方法 數(shù)據(jù)網(wǎng)格技術是網(wǎng)格的研究方向之一，側重于數(shù)據(jù)的存儲和管理。以現(xiàn)有的分布式、并行式等數(shù)據(jù)管理技術為基礎，數(shù)據(jù)網(wǎng)

2、格致力于集成網(wǎng)絡中的存儲資源、數(shù)據(jù)資源、計算資源等，建立分布海量數(shù)據(jù)的一體化數(shù)據(jù)訪問、存儲、傳輸、管理與服務架構，為海量數(shù)據(jù)的管理提供了一種新的解決方案。 本文研究了基于數(shù)據(jù)網(wǎng)格的海量數(shù)據(jù)管理，以數(shù)字化虛擬人為背景，結合數(shù)字人數(shù)據(jù)集的特點，對存儲資源分配、副本管理、高速數(shù)據(jù)傳輸、快速數(shù)據(jù)訪問等關鍵技術進行了探索，并在局域網(wǎng)內(nèi)建立了一個基于數(shù)據(jù)網(wǎng)格的數(shù)字化虛擬人海量數(shù)據(jù)管理原型系統(tǒng)。該系統(tǒng)將網(wǎng)絡上分布異構的各種資源集成在一起，形成

3、虛擬的存儲環(huán)境，為上層應用提供統(tǒng)一的訪問接口，達到了數(shù)據(jù)的高度共享。 2．元數(shù)據(jù)模型研究 元數(shù)據(jù)是數(shù)據(jù)管理技術中一個重要的組成部分。目前大多數(shù)據(jù)網(wǎng)格元數(shù)據(jù)研究只關注了文件系統(tǒng)中的數(shù)據(jù)，而對數(shù)據(jù)庫系統(tǒng)中的數(shù)據(jù)卻很少涉及。針對這一現(xiàn)象，本文提出并建立了一個網(wǎng)格數(shù)據(jù)庫環(huán)境下的元數(shù)據(jù)模型。該模型采用了關系．層次混合模式，統(tǒng)一管理數(shù)據(jù)庫系統(tǒng)以及文件系統(tǒng)中的數(shù)據(jù)，擴展了數(shù)據(jù)管理范圍。并且通過一次定位即可查詢到與數(shù)據(jù)相關的所有信息，極

4、大地提高了數(shù)據(jù)訪問效率。 3．數(shù)字化虛擬人應用平臺通用結構 通過分析數(shù)字化虛擬人的應用需求，本文提出了一種應用平臺的通用結構。將海量數(shù)據(jù)管理技術、元數(shù)據(jù)模型以及中間件技術相結合，建立了基于數(shù)據(jù)管理的數(shù)字化虛擬人應用平臺，并將其應用于遠程教育，展示了數(shù)字人在醫(yī)學教育方面的應用。同時，該平臺也可以推廣到其他領域，例如天文學、物理學等等，為這些領域的海量數(shù)據(jù)管理提供強有力的支持。 本文最后對前述工作進行了總結，并提出了