全Flash視頻網站用戶行為數據的采集及其預處理.pdf

1、伴隨網絡寬帶的普及、Web2.0技術的發(fā)展，網絡視頻行業(yè)成為近年來全球新興的一種傳媒行業(yè)。國內的主流傳媒、商業(yè)網站、技術公司和個人創(chuàng)業(yè)者紛紛進入這個行業(yè)，建立起大量不同類型的視頻網站。越來越多的網民選擇通過互聯網觀看視頻節(jié)目，也有不少網民一直向網站上傳自己制作的視頻。視頻網站對現代人的生活影響日益增加。
　　 本文以東華大學研究生多媒體體驗中心為應用平臺，就全Flash視頻網站日志數據的采集及其預處理技術的若干關鍵問題展開了具體

2、的研究工作。文中提出將客戶端用戶操作信息用定義好的標識符表示，并拼接到HTTP請求的URL字串中，同時利用Flex中的HTTPService對象向服務器發(fā)送請求而將前臺用戶操作信息記錄到網站訪問日志的方法，較好的解決了Flash不能實時和服務器交互的問題，同時利用向外部服務頁面請求會話標識的方法巧妙解決了Flash不能保存會話信息的問題。
　　 在拼接HTTP請求中URL字串的同時，本文定義了一套可以準確、高效標識用戶操作信息的

3、標識符，這些標識符在相應的操作下隨著請求同時被傳遞給服務器，被記錄在服務器的訪問日志中，極其的方便了之后數據的導入和預處理，也提高了數據清洗、解析的準確性。
　　 在采集到用戶操作信息之后，本文設計并實現了一套能夠快速解析日志并將數據導入數據庫的應用系統(tǒng)，同時通過SQL存儲過程對導入的基本表進行預處理，高效、準確地進行了會話識別等操作，為后期的數據分析與數據挖掘創(chuàng)造了有利條件。
　　 最后，本文展示了通過本采集和預處理系