<rt id="bn8ez"></rt>
<label id="bn8ez"></label>

  • <span id="bn8ez"></span>

    <label id="bn8ez"><meter id="bn8ez"></meter></label>

    莊周夢蝶

    生活、程序、未來
       :: 首頁 ::  ::  :: 聚合  :: 管理

    緩存的分代

    Posted on 2010-06-05 10:13 dennis 閱讀(4517) 評論(5)  編輯  收藏 所屬分類: java數(shù)據(jù)庫技術涂鴉數(shù)據(jù)結構與算法
        Java的垃圾收集算法是分代的,因為根據(jù)2/8原則,80%的Java對象都是速生速滅的,因此將Java Heap劃分為new和old,對兩個區(qū)域采用不同的垃圾回收算法,在new代存活下來的對象轉移到old區(qū),這樣一來大大提高了Java GC的效率。
        類似分代的思想在很多地方可以用到,分代的本質是根據(jù)對象生命周期的不同做區(qū)別處理,而不是采取一刀切的方式來提高系統(tǒng)的處理效率。推而廣之,比如緩存的使用,現(xiàn)在很多web應用都采用了類似memcached這樣的緩存擋在數(shù)據(jù)庫前面分擔負載,那么你可以將memcached理解成new代,而數(shù)據(jù)庫是old代。memcached中存儲的是查詢的熱點數(shù)據(jù),新鮮火熱,但是易失,并且在數(shù)據(jù)更新的時候被移除;而數(shù)據(jù)庫保存了所有的數(shù)據(jù),當緩存沒有命中的時候才去查詢數(shù)據(jù)庫并存儲到緩存。new和old這只是簡單的二代劃分,事實上現(xiàn)在越來越多的系統(tǒng)是多級緩存,頁面緩存、memcached緩存、JVM內(nèi)部緩存、查詢緩存等等直到數(shù)據(jù)庫,從web頁面到后端是一個越來越old的過程,緩存對象持續(xù)的生命周期逐漸增長直到persist狀態(tài)。
        具體到JVM內(nèi)部緩存,我們通常使用LRU算法來實現(xiàn)一個安全有限的緩存,如直接繼承LinkedHashMap將可以實現(xiàn)一個簡單的LRUMap。基于內(nèi)存使用上的考慮,我們會給LRUMap設定一個最大的capacity,當數(shù)據(jù)量超過這個capacity的時候將最近最少訪問的元素移除來容納新的元素。這樣處理產(chǎn)生的問題是這個capactity不能設置得太大,因為怕內(nèi)存不夠用,但是不夠大的結果可能是命中率沒有那么高(跟你的場景相關),那么如何在保存內(nèi)存安全的前提下更進一步緩存更多的對象呢?答案也是分代。LRUMap默認存儲的都是對象的強引用,我們知道Java還有其他3種引用類:soft,weak和phantom。其中Soft引用是在jvm內(nèi)存不夠的時候進行回收,weak引用是在垃圾回收碰到的時候會被回收,顯然weak->soft->strong三類引用的生命周期可以劃分為3個代,我們將可以實現(xiàn)一個可以容納更多對象的LRUMap:LRUMap設置兩個閥值,一個是強引用的最大閥值,這個不能太大,一個是軟引用的最大數(shù)目,當超過第一個閥值的時候,不是將LRU替換出來的對象移除,而是替代轉換為軟引用存儲;如果軟引用的數(shù)目也超過閥值,那么可以將軟引用這個Map里的對象LRU替換成Weak引用存儲或者簡單移除。處理元素查詢的時候,多了一個步驟,在查詢強引用未果的情況下,需要再去查詢軟引用集合,不過都是O(1)復雜度的查詢,不會成為明顯的瓶頸。通過將緩存對象分代,我們實現(xiàn)了容難更多緩存對象的目標,大部分對象以強引用的形式存儲,被LRU替換出去最近最少訪問的元素以軟引用存儲,它們在內(nèi)存不夠的時候被垃圾回收,保證了內(nèi)存使用上的安全性。我們在系統(tǒng)中采用了類似這樣的緩存,緩存的命中率有了明顯的提高。
        題目是《緩存的分代》,其實談的是分代這種常見的設計或者說技巧,在需要處理大量對象的場景中,不采用一刀切的方式,而是根據(jù)對象的特點進行適當?shù)姆执幚恚瑤淼男侍嵘赡苁求@人的。

        PS.關于這個招聘羅嗦兩句,我是這個小組的成員,有人質疑我的目的是為了賺推薦費,這個不能說沒有,不過主要目的還是招人,我們很缺人。那么多要求可以歸結為一句話:我們找Java基礎良好、對并發(fā)通信有豐富實踐經(jīng)驗、寫代碼相對靠譜、為人相對靠譜的人。那些要求并非硬性,如果你覺的合適,盡管投簡歷,謝謝。我們小組做的東西我認為還是有價值的,也很有挑戰(zhàn),淘寶內(nèi)部的很多應用都在使用,如果你希望你做的產(chǎn)品被成千上萬的人每天使用,歡迎加入。

         

       


    評論

    # re: 緩存的分代  回復  更多評論   

    2010-06-05 14:16 by cd
    有個字寫錯了,閾值,不是閥值~~~

    # re: 緩存的分代  回復  更多評論   

    2010-06-05 14:16 by jaedong
    好文,頂.... 啥時候,在寫些NIO方面的東東啊...包括你地框架

    # re: 緩存的分代  回復  更多評論   

    2010-06-05 22:26 by yeshucheng
    @cd
    樓主沒有寫錯啊,是閥門的“閥”。或許在某些地方有翻譯不同,但是這個閥值個人覺得更確切。引申下:閥門在某個臨界位置就需要釋放某個數(shù)值

    曉丹繼續(xù)寫啊,再深入下。結合畢玄寫的那本書,有個更好的碰撞火花,哈哈。
    我讀書少,你寫的通俗易懂!贊!

    # re: 緩存的分代  回復  更多評論   

    2010-06-06 18:31 by 追夢少年
    很好!!!

    # re: 緩存的分代[未登錄]  回復  更多評論   

    2010-06-19 22:23 by 牛牛
    嗯,看了后,很大收獲
    主站蜘蛛池模板: 中国videos性高清免费| 亚洲国产亚洲片在线观看播放| 国产成人免费ā片在线观看 | 亚洲人成依人成综合网| 亚洲精品无码永久在线观看你懂的 | 亚洲AV成人影视在线观看| 亚洲成人在线免费观看| 亚洲欧洲国产经精品香蕉网| 亚洲美女视频网址| 亚洲自偷自拍另类图片二区| 亚洲xxxxxx| 亚洲日韩AV一区二区三区四区| 中文字幕亚洲男人的天堂网络| 国产精品亚洲精品青青青| 亚洲人成电影网站久久| 亚洲精品天堂成人片AV在线播放 | 中文字幕亚洲综合久久菠萝蜜 | 性做久久久久久免费观看| 无码永久免费AV网站| 女人张开腿给人桶免费视频| 日韩免费在线观看| gogo全球高清大胆亚洲| 国产L精品国产亚洲区久久| 亚洲日韩欧洲无码av夜夜摸| 久久久久亚洲精品美女| 亚洲黄色中文字幕| 亚洲最大福利视频| 美女被免费网站在线视频免费 | 午夜亚洲国产理论片二级港台二级| 国产偷国产偷亚洲高清在线| 老司机精品视频免费| 中文在线观看免费网站| 色欲A∨无码蜜臀AV免费播| 在线观看av永久免费| 国产免费观看黄AV片| 国产亚洲精品AA片在线观看不加载| 日韩va亚洲va欧洲va国产| 亚洲香蕉免费有线视频| 亚洲日韩精品国产3区| 久久久久久噜噜精品免费直播| 99精品免费观看|