基于服務(wù)器日志的可視化分析工具

　　在進(jìn)行互聯(lián)網(wǎng)用戶瀏覽行為的定量研究中，阿里巴巴中國(guó)站用戶研究小組開(kāi)發(fā)了一個(gè)基于服務(wù)器日志的可視化分析工具

　　這個(gè)分析工具可以通過(guò)用戶產(chǎn)生的服務(wù)器日志數(shù)據(jù)自動(dòng)還原出網(wǎng)站結(jié)構(gòu)，并按照頁(yè)面流量閾值繪制站點(diǎn)地圖，并將關(guān)鍵的頁(yè)面流量數(shù)據(jù)及其他商業(yè)指標(biāo)進(jìn)行可視化處理，標(biāo)注在這張?zhí)厥獾木W(wǎng)站地圖上。

　　用戶研究員可以快速獲得網(wǎng)站重要頁(yè)面及產(chǎn)品的直觀圖像甚至健康狀態(tài)。這個(gè)工具也被加入了豐富的交互功能，允許用戶分析員選中或者搜索某個(gè)頁(yè)面（節(jié)點(diǎn)），查看當(dāng)前頁(yè)面的主要用戶來(lái)源和流向，并打印出URL列表。同時(shí)它也支持按照session或者cookie對(duì)用戶的群體行為進(jìn)行多步回溯，從中發(fā)現(xiàn)用戶瀏覽網(wǎng)站或者產(chǎn)品使用上的群體行為。

　　現(xiàn)在這個(gè)工具可以在普通筆記本上在10分鐘內(nèi)處理1000萬(wàn)PV的日志樣本。假設(shè)再加上實(shí)時(shí)的log數(shù)據(jù)網(wǎng)站日志分析工具，或許這個(gè)工具也將改變網(wǎng)站產(chǎn)生設(shè)計(jì)和內(nèi)容運(yùn)營(yíng)的方式，成為一個(gè)”Real Time Game”。

　　seci-log 開(kāi)源日志分析軟件發(fā)布了

　　隨著互聯(lián)網(wǎng)和云計(jì)算的發(fā)展，公有云服務(wù)器是人們?cè)絹?lái)越容易接受的產(chǎn)品，其最普遍受益的一點(diǎn)就是節(jié)省成本。企業(yè)不必像擁有私有云那樣去購(gòu)買，安裝，操作或運(yùn)維服務(wù)器或是其他設(shè)備。在一個(gè)公有云的服務(wù)供應(yīng)商提供的平臺(tái)上，企業(yè)只需使用或開(kāi)發(fā)他們自己的應(yīng)用程序即可。但公有云的安全問(wèn)題也是顯而易見(jiàn)的，基于Internet的公有云服務(wù)的特性，全世界只要能上網(wǎng)的人就可以訪問(wèn)到其云服務(wù)器，其在云主機(jī)及其云上的數(shù)據(jù)受到威脅會(huì)更多而且更復(fù)雜，數(shù)據(jù)相對(duì)于私有云處于一個(gè)不穩(wěn)定的狀態(tài)。不管是傳統(tǒng)的信息化還是未來(lái)趨勢(shì)的云計(jì)算，都面臨著安全的風(fēng)險(xiǎn)，從安全防護(hù)的角度來(lái)說(shuō)網(wǎng)站日志分析助手 ，需要一個(gè)循序漸進(jìn)的方式去完善安全體系。一般建設(shè)的順序是網(wǎng)絡(luò)安全、主機(jī)安全、數(shù)據(jù)安全的順序逐步完善。

　　但對(duì)于很多中小企業(yè)來(lái)說(shuō)，本身的設(shè)備也不是太多，也就幾臺(tái)到幾十臺(tái)而已，如果花費(fèi)太多的精力去搞安全也不劃算，如果不搞又感覺(jué)不放心。那什么方面的內(nèi)容是中小企業(yè)關(guān)注的呢？個(gè)人認(rèn)為應(yīng)該優(yōu)先關(guān)注訪問(wèn)安全，就是有沒(méi)有人非法訪問(wèn)你的服務(wù)器，因?yàn)樵谠破脚_(tái)下，任何人只要接入網(wǎng)絡(luò)都可以訪問(wèn)到你的機(jī)器。所以我認(rèn)為應(yīng)該優(yōu)先關(guān)注此信息，報(bào)告非上班時(shí)間訪問(wèn)，非上班地點(diǎn)訪問(wèn)，密碼猜測(cè)，賬號(hào)猜測(cè)網(wǎng)站日志查看軟件，賬號(hào)猜測(cè)成功等行為。從我了解的情況下網(wǎng)站日志分析工具，這部分目前還沒(méi)有比較有效的開(kāi)源或者免費(fèi)工具供大家使用，現(xiàn)在elk用的比較多，但大多數(shù)情況下都不太適合中小公司，門檻太高。因此本公司針對(duì)這種情況，專門開(kāi)發(fā)了賽克藍(lán)德日志分析軟件,并開(kāi)源了web管理端。