- 相關(guān)推薦
初探電子商務(wù)在大數(shù)據(jù)時(shí)代下的數(shù)據(jù)管理論文
大數(shù)據(jù)時(shí)代的到來(lái)改變了人們對(duì)數(shù)據(jù)的認(rèn)識(shí)和態(tài)度，電子商務(wù)作為大數(shù)據(jù)產(chǎn)生的主要來(lái)源之一，其發(fā)展?fàn)顟B(tài)及趨勢(shì)越來(lái)越被人們所關(guān)注。電子商務(wù)數(shù)據(jù)每年增長(zhǎng)約60%，但數(shù)據(jù)利用卻不足5%，人們迫切希望通過(guò)數(shù)據(jù)的力量來(lái)解決一些發(fā)展道路上遇到的瓶頸問(wèn)題。數(shù)據(jù)的價(jià)值逐漸被人們所重視，數(shù)據(jù)的客觀性、真實(shí)性、可靠性為電子商務(wù)的數(shù)據(jù)服務(wù)提供了堅(jiān)實(shí)的“物質(zhì)基礎(chǔ)”，繼而發(fā)展成為一種產(chǎn)業(yè)。那么大數(shù)據(jù)時(shí)代進(jìn)行數(shù)據(jù)存儲(chǔ)方式、讀取方式、分析方式的創(chuàng)新以及增加數(shù)據(jù)服務(wù)模式已經(jīng)成為大勢(shì)所趨，本文正是對(duì)上述問(wèn)題進(jìn)行初步研究。
一、數(shù)據(jù)存儲(chǔ)方式
隨著Web2.0時(shí)代的到來(lái)，傳統(tǒng)的數(shù)據(jù)存儲(chǔ)模式已經(jīng)不能夠應(yīng)付規(guī)模龐大的數(shù)據(jù)流。存儲(chǔ)設(shè)備的成本增加，數(shù)據(jù)洪期的不預(yù)定型，結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù)混雜等因素讓存儲(chǔ)不得不做出徹底的變革。
為了減少存儲(chǔ)成本，提高存儲(chǔ)容量和存儲(chǔ)空間利用率，人們利用虛擬化技術(shù)對(duì)存儲(chǔ)設(shè)備進(jìn)行改造，將所有存儲(chǔ)空間作為一個(gè)資源池，可以自由的配置存儲(chǔ)設(shè)備空間。虛擬化技術(shù)主要利用軟件實(shí)現(xiàn)對(duì)存儲(chǔ)資源的控制，根據(jù)實(shí)際需要可以將軟件安裝在相應(yīng)的硬件設(shè)備之上。為提高一些性能較為低下的設(shè)備利用率，可以通過(guò)網(wǎng)絡(luò)將這些設(shè)備連接起來(lái)，作為數(shù)據(jù)存儲(chǔ)的載體。例如San系統(tǒng)，集群系統(tǒng)。San系統(tǒng)與集群系統(tǒng)都可以實(shí)現(xiàn)數(shù)據(jù)共享和訪問(wèn)，并可以對(duì)存儲(chǔ)空間進(jìn)行自由的擴(kuò)展，但是San系統(tǒng)可以支持不同客戶(hù)端的操作系統(tǒng)，擴(kuò)展范圍更加廣泛，運(yùn)用更加靈活。
San網(wǎng)絡(luò)存儲(chǔ)由服務(wù)器、存儲(chǔ)、互連組成，利用光纖通道實(shí)現(xiàn)對(duì)存儲(chǔ)設(shè)備的管理，既可以實(shí)現(xiàn)服務(wù)器到存儲(chǔ)的數(shù)據(jù)傳輸，也可以實(shí)現(xiàn)服務(wù)器到服務(wù)器的數(shù)據(jù)通信。San網(wǎng)絡(luò)采用雙環(huán)方式及數(shù)據(jù)遠(yuǎn)程備份，增加了數(shù)據(jù)安全性。San對(duì)于磁盤(pán)進(jìn)行虛擬化，可以讓磁盤(pán)同步存儲(chǔ)數(shù)據(jù)，加速了磁盤(pán)讀/寫(xiě)操作的效率。
二、數(shù)據(jù)讀取方式
現(xiàn)階段，電子商務(wù)的數(shù)據(jù)存儲(chǔ)方式大多依靠廣泛使用的關(guān)系型數(shù)據(jù)庫(kù)。關(guān)系型數(shù)據(jù)庫(kù)采用關(guān)系模型，在結(jié)構(gòu)上更容易理解，而其使用的數(shù)據(jù)庫(kù)操作語(yǔ)言SQL也廣泛被人們所接受。由于其對(duì)數(shù)據(jù)類(lèi)型等多方面的嚴(yán)謹(jǐn)性，減少了使得數(shù)據(jù)庫(kù)的維護(hù)量，提高了數(shù)據(jù)管理效率。
然而，隨著電子商務(wù)的飛速發(fā)展，數(shù)據(jù)量的巨增，給關(guān)系數(shù)據(jù)庫(kù)的I/O端口造成了很大的壓力。其次，在對(duì)數(shù)據(jù)的查詢(xún)操作上，尤其是一些大表的嵌套查詢(xún)，效率非常低。由于龐大的數(shù)據(jù)量，對(duì)數(shù)據(jù)庫(kù)的維護(hù)造成了一定影響，數(shù)據(jù)庫(kù)無(wú)法動(dòng)態(tài)擴(kuò)展其存儲(chǔ)空間及提高其負(fù)載能力。數(shù)據(jù)庫(kù)升級(jí)和往往要進(jìn)行停機(jī)維護(hù)，導(dǎo)致業(yè)務(wù)的中斷。
近年來(lái)，非關(guān)系型數(shù)據(jù)庫(kù)及分布式存儲(chǔ)的出現(xiàn)可以解決傳統(tǒng)關(guān)系型數(shù)據(jù)庫(kù)存在的問(wèn)題。NoSQL數(shù)據(jù)庫(kù)是為了解決大規(guī)模數(shù)據(jù)集的管理，包括對(duì)數(shù)據(jù)的存儲(chǔ)及并發(fā)控制。而數(shù)據(jù)的多樣化，非結(jié)構(gòu)化等難題，給大數(shù)據(jù)處理及分析帶來(lái)了挑戰(zhàn)�，F(xiàn)在NoSQL類(lèi)型有很多，且各自擁有各自的技術(shù)優(yōu)勢(shì)，數(shù)據(jù)管理者要結(jié)合自己的需求選擇好合適的NoSQL數(shù)據(jù)庫(kù)，才能體現(xiàn)非關(guān)系型數(shù)據(jù)庫(kù)具備的優(yōu)勢(shì)。NoSQL數(shù)據(jù)庫(kù)主要分為：鍵值存儲(chǔ)數(shù)據(jù)庫(kù)，列存儲(chǔ)數(shù)據(jù)庫(kù)，文檔型數(shù)據(jù)庫(kù)，圖形數(shù)據(jù)庫(kù)等。NoSQL數(shù)據(jù)庫(kù)并沒(méi)有一個(gè)統(tǒng)一的架構(gòu)，兩種NoSQL數(shù)據(jù)庫(kù)之間的不同，甚至遠(yuǎn)遠(yuǎn)超過(guò)兩種關(guān)系型數(shù)據(jù)庫(kù)的不同。NoSQL沒(méi)有高低之分，只能合理地使用NoSQL到適合的場(chǎng)合，才能充分發(fā)揮NoSQL的優(yōu)勢(shì)。
現(xiàn)在比較常用的NoSQL數(shù)據(jù)庫(kù)主要是Redis，Leveldb， Mongodb，HBase。HBase作為Hadoop的子項(xiàng)目，適合于非結(jié)構(gòu)化的數(shù)據(jù)存儲(chǔ)。HBase的一大特點(diǎn)是基于列的模式，這樣可以增強(qiáng)數(shù)據(jù)庫(kù)的擴(kuò)展性，提高數(shù)據(jù)庫(kù)的存儲(chǔ)效率。而且，HBase作為分布式數(shù)據(jù)庫(kù)可以在廉價(jià)服務(wù)器上搭建起規(guī)模龐大且結(jié)構(gòu)化的存儲(chǔ)集群。
三、數(shù)據(jù)分析方式
大數(shù)據(jù)時(shí)代下，人們對(duì)數(shù)據(jù)的態(tài)度有了很大改變，對(duì)數(shù)據(jù)的研究由追尋因果向數(shù)據(jù)相關(guān)性轉(zhuǎn)變。然而，對(duì)于電子商務(wù)來(lái)說(shuō)，需求關(guān)系的分析是電商市場(chǎng)一個(gè)重要因素，仍然不可或缺。電子商務(wù)數(shù)據(jù)包含了客戶(hù)的基本信息、消費(fèi)信息、商家的產(chǎn)品信息、金融交易信息等結(jié)構(gòu)化或非結(jié)構(gòu)化數(shù)據(jù)。對(duì)電子商務(wù)數(shù)據(jù)的分析可分為幾個(gè)方面：
(1)流量數(shù)據(jù)分析，包含了對(duì)電子商務(wù)網(wǎng)站的流量，點(diǎn)擊率等數(shù)據(jù)的分析。流量的大小可以反映商品的推廣程度，但是，為檢測(cè)一些為提高點(diǎn)擊率的惡意、虛假行為，需要對(duì)流量來(lái)源等數(shù)據(jù)進(jìn)行分析，確保點(diǎn)擊率能真實(shí)反映產(chǎn)品推廣程度。網(wǎng)站到達(dá)率，二跳率，pv/ip值等數(shù)據(jù)都可反映商品宣傳的效果。
(2)網(wǎng)站數(shù)據(jù)分析，網(wǎng)站數(shù)據(jù)最能直接反映商品推廣效率，商品質(zhì)量及商品銷(xiāo)售情況等重要信息。各式各樣的電商產(chǎn)品琳瑯滿(mǎn)目，客戶(hù)往往會(huì)陷入難以抉擇的尷尬局面，難以達(dá)成交易。通過(guò)對(duì)網(wǎng)站數(shù)據(jù)的分析，可以更好的了解客戶(hù)的真實(shí)需求和偏好，并制定相應(yīng)的營(yíng)銷(xiāo)策略，更好的將商品推銷(xiāo)至客戶(hù)。
(3)信用數(shù)據(jù)分析，無(wú)論是客戶(hù)還是商家，信用都代表了其交易的真誠(chéng)度和可靠性。信用主要以交易量及交易評(píng)價(jià)作為依據(jù)。面對(duì)日益競(jìng)爭(zhēng)激烈的電商市場(chǎng)，商家為了提高自身的銷(xiāo)售額，難免采用一些不正當(dāng)手段，通過(guò)構(gòu)造虛假評(píng)論信息來(lái)提升自己和打擊對(duì)手。通過(guò)對(duì)評(píng)價(jià)數(shù)據(jù)的分析，可以判斷其評(píng)價(jià)的真實(shí)性，避免了一些商家通過(guò)炒作來(lái)提高自身信用和客戶(hù)惡意評(píng)價(jià)等行為帶來(lái)的影響。
四、數(shù)據(jù)服務(wù)模式
大數(shù)據(jù)時(shí)代下，數(shù)據(jù)分析所利用的數(shù)據(jù)不再是通過(guò)簡(jiǎn)單的抽樣得到的樣本，而是要將整體數(shù)據(jù)作為分析來(lái)源。以大數(shù)據(jù)的分析手段，得到分析結(jié)果。盡管相較于傳統(tǒng)方法，大數(shù)據(jù)分析需要消耗更多的時(shí)間和資源，然而，往往一些孤僻、異常的數(shù)據(jù)才是問(wèn)題出現(xiàn)的根本原因，而原有的抽樣方式很有可能將此類(lèi)數(shù)據(jù)遺漏，影響到最終的分析結(jié)果。
通常，數(shù)據(jù)服務(wù)提供可視化界面，展現(xiàn)數(shù)據(jù)的統(tǒng)計(jì)分析結(jié)果。對(duì)于大數(shù)據(jù)的統(tǒng)計(jì)分析，需要呈現(xiàn)出更多，更廣的事務(wù)特征。例如，某些電商推出的十年賬單查詢(xún)服務(wù)，引起了社會(huì)廣泛的反響。如今，隨著大數(shù)據(jù)分析技術(shù)的革新，數(shù)據(jù)服務(wù)模式也在不斷增加，大數(shù)據(jù)輔助決策和預(yù)測(cè)事物發(fā)展的特點(diǎn)引發(fā)了人們利用數(shù)據(jù)來(lái)研究事物發(fā)展規(guī)律的極大興趣，使得研究結(jié)果更具有客觀性和可靠性。
【初探電子商務(wù)在大數(shù)據(jù)時(shí)代下的數(shù)據(jù)管理論文】相關(guān)文章：
電子商務(wù)下的國(guó)際貿(mào)易創(chuàng)新初探論文08-29
主數(shù)據(jù)管理應(yīng)用與實(shí)踐論文06-24
大數(shù)據(jù)時(shí)代下的餐飲企業(yè)管理問(wèn)題論文10-25
大數(shù)據(jù)時(shí)代網(wǎng)絡(luò)教育論文09-12
新媒體時(shí)代下電子商務(wù)教學(xué)論文范文06-18
通信及互聯(lián)網(wǎng)技術(shù)在數(shù)據(jù)管理的運(yùn)用論文09-04