心有多大舞臺(tái)便有多大

# re: clickstream項(xiàng)目體會(huì) 2008-02-22 13:36 pony

今天在網(wǎng)上偶爾看到了http://www.opentracker.net這個(gè)網(wǎng)站,看了下他提供的功能:
1.traffic analysis
summary trend
hourly trends
dialy trends
weekly trends
monthly trends
forecast
bounce rate of visitors
2.visitors
online and recent visitors
first time visitors
returning visitors
refered visitors
visitors by search term
entering
exiting
3.top navigation lists
most popular pages
top files & directory paths
top referrers
top search terms
top search engines
top exit links (3rd party)
top exit pages
top entry pages
4.location data
countries/ regions/ cities
companies/ organizations
ISPs
DMA-codes (US)
telephone area codes for U.S.
ZIP/ postal codes (U.S. & Canada)
continents
subcontinents
5.technical data
operating system
browsers
display colors
display resolutions
routers
domains
什么時(shí)候有空自己也做一個(gè)類似的項(xiàng)目吧,我好缺米啊
  回復(fù)  更多評(píng)論   

# re: clickstream項(xiàng)目體會(huì) 2008-02-25 11:49 pony

今天把a(bǔ)pache的--enable-usertrack安裝了.
日志格式為:"%h %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\" %{cookie}n"
從中可以得到:
1.訪問(wèn)時(shí)間:%t
2.訪問(wèn)內(nèi)容:url
3.從哪個(gè)頁(yè)面訪問(wèn)url的:referer
4.通過(guò)什么瀏覽器訪問(wèn)的:user-agent
5.是誰(shuí)訪問(wèn):cookie
6.訪問(wèn)的結(jié)果:會(huì)把http狀態(tài)記錄,如304,404等
有了這些數(shù)據(jù),上面的需求基本都能實(shí)現(xiàn)了.  回復(fù)  更多評(píng)論   

# re: clickstream項(xiàng)目體會(huì) 2008-02-25 13:25 pony

Apache CustomLog的常用日志格式:
格式字符串 描述
%% 百分號(hào)(Apache2.0.44或更高的版本)
%a 遠(yuǎn)端IP地址
%A 本機(jī)IP地址
%B 除HTTP頭以外傳送的字節(jié)數(shù)
%b 以CLF格式顯示的除HTTP頭以外傳送的字節(jié)數(shù)，也就是當(dāng)沒(méi)有字節(jié)傳送時(shí)顯示'-'而不是0。
%{Foobar}C 在請(qǐng)求中傳送給服務(wù)端的cookieFoobar的內(nèi)容。
%D 服務(wù)器處理本請(qǐng)求所用時(shí)間，以微為單位。
%{FOOBAR}e 環(huán)境變量FOOBAR的值
%f 文件名
%h 遠(yuǎn)端主機(jī)
%H 請(qǐng)求使用的協(xié)議
%{Foobar}i 發(fā)送到服務(wù)器的請(qǐng)求頭Foobar:的內(nèi)容。
%l 遠(yuǎn)端登錄名(由identd而來(lái)，如果支持的話)，除非IdentityCheck設(shè)為"On"，否則將得到一個(gè)"-"。
%m 請(qǐng)求的方法
%{Foobar}n 來(lái)自另一個(gè)模塊的注解Foobar的內(nèi)容。
%{Foobar}o 應(yīng)答頭Foobar:的內(nèi)容。
%p 服務(wù)器服務(wù)于該請(qǐng)求的標(biāo)準(zhǔn)端口。
%P 為本請(qǐng)求提供服務(wù)的子進(jìn)程的PID。
%{format}P 服務(wù)于該請(qǐng)求的PID或TID(線程ID)，format的取值范圍為：pid和tid(2.0.46及以后版本)以及hextid(需要APR1.2.0及以上版本)
%q 查詢字符串(若存在則由一個(gè)"?"引導(dǎo)，否則返回空串)
%r 請(qǐng)求的第一行
%s 狀態(tài)。對(duì)于內(nèi)部重定向的請(qǐng)求，這個(gè)狀態(tài)指的是原始請(qǐng)求的狀態(tài)，---%>s則指的是最后請(qǐng)求的狀態(tài)。
%t 時(shí)間，用普通日志時(shí)間格式(標(biāo)準(zhǔn)英語(yǔ)格式)
%{format}t 時(shí)間，用strftime(3)指定的格式表示的時(shí)間。(默認(rèn)情況下按本地化格式)
%T 處理完請(qǐng)求所花時(shí)間，以秒為單位。
%u 遠(yuǎn)程用戶名(根據(jù)驗(yàn)證信息而來(lái)；如果返回status(%s)為401，可能是假的)
%U 請(qǐng)求的URL路徑，不包含查詢字符串。
%v 對(duì)該請(qǐng)求提供服務(wù)的標(biāo)準(zhǔn)ServerName。
%V 根據(jù)UseCanonicalName指令設(shè)定的服務(wù)器名稱。
%X 請(qǐng)求完成時(shí)的連接狀態(tài)：X= 連接在應(yīng)答完成前中斷。
+= 應(yīng)答傳送完后繼續(xù)保持連接。
-= 應(yīng)答傳送完后關(guān)閉連接。

(在1.3以后的版本中，這個(gè)指令是%c，但這樣就和過(guò)去的SSL語(yǔ)法：%{var}c沖突了)

%I 接收的字節(jié)數(shù)，包括請(qǐng)求頭的數(shù)據(jù)，并且不能為零。要使用這個(gè)指令你必須啟用mod_logio模塊。
%O 發(fā)送的字節(jié)數(shù)，包括請(qǐng)求頭的數(shù)據(jù)，并且不能為零。要使用這個(gè)指令你必須啟用mod_logio模塊。
  回復(fù)  更多評(píng)論   

# re: clickstream項(xiàng)目體會(huì) 2008-03-20 09:25 pony

昨天晚上cloudwards跟我說(shuō),google的analytics就能實(shí)現(xiàn)這個(gè)clickstream的功能.確實(shí)是,不過(guò),google的東西還是有些缺陷的,例如,第一,它不能跟蹤到一個(gè)用戶,而用了apache的這個(gè)模塊,就可以通過(guò)cookie來(lái)跟蹤;第二,它不能統(tǒng)計(jì)一個(gè)頁(yè)面上引用的其它資源的調(diào)用,如圖片,而通過(guò)apache的日志,這些都可以記錄下來(lái),這些數(shù)據(jù)對(duì)于優(yōu)化網(wǎng)頁(yè)的大小,甚至分布部署都是很有用的;第三,它不能統(tǒng)計(jì)出訪問(wèn)一個(gè)頁(yè)面需要的時(shí)間,而apache的日志可以記錄接收請(qǐng)求的時(shí)間,返回響應(yīng)的時(shí)間,這對(duì)于分析網(wǎng)站的性能是很重要的數(shù)據(jù);第四,apache的日志還可以記錄每個(gè)請(qǐng)求返回的字節(jié)數(shù).
所以,我想自己做的這個(gè)工具應(yīng)該還是挺有用的.但我可以去借鑒下google analytics的報(bào)表  回復(fù)  更多評(píng)論