<rt id="bn8ez"></rt>
<label id="bn8ez"></label>

  • <span id="bn8ez"></span>

    <label id="bn8ez"><meter id="bn8ez"></meter></label>

    隨筆-84  評論-56  文章-0  trackbacks-0

    來自Facebook核心數據組的Jeff Johnson周三在QCon紐約的演講中公布了Apollo,它是Facebook的一種類似于PaxosNoSQL數據庫。Apollo構建于Apache Thrift 2 RPC框架,采用C++11開發,是一種分層存儲系統,所有數據被劃分到Shard,非常類似于HBase中的區域服務器。Johnson表示它最大的好處是在線低延遲存儲,特別是在Flash和內存中。

    區別于面向文檔和鍵值的存儲,Apollo是一種修改的數據結構,允許你存儲Map、隊列、樹以及鍵值等等。系統中每個單獨的數據塊都非常小,從1字節到1MB,而所有的總大小則從1MB10+PB。它支持的服務器從最少三臺到數千臺之多。

    每個Shard有四個組件。第一個是Quorum一致性協議,它基于來自斯坦福的強Leader一致性協議RaftJohnson說他的團隊非常喜歡Raft的一個原因是Leader的故障恢復非常好定義,因為就是Quorum視圖的變化。話雖如此,他說這真的不比Multi-paxos簡單:

    我們不得不做大量的工作,從讓你異步讀寫磁盤到處理Follower忙于后臺事務等場景,因為服務器上有其它東西或者磁盤非常慢,錯誤檢查等等。

    第二個組件是存儲。目前主存儲基于RocksDB,是一種構建于Google LevelDBKey/Value存儲結構。雖然它是Key/Value存儲,Facebook使用它來模擬其它數據結構。Apollo被設計為可以存儲未知的結構,團隊也正在增加對MySQL的支持以作為一種替代存儲引擎。

    第三個組件是客戶端API,它擁有read()write()方法。ApolloShard層執行的所有操作都是原子操作,因此你可以描述前置條件,如果滿足,它返回readswrites。代碼示例如下:

    read(conditions : {map(m1).contains(x)},

         reads : {deque(d2).back()})

    上面的代碼表示如果Map m1包含x,就返回雙端隊列(Dequed2back上的值。

    你能將任意多個條件和任意數量的Read結合在一起。

    Write也非常類似,同樣允許你描述條件:

    write(conditions : {ver(k1) == v}, reads : {},

          writes : {val(k1) := x})

    最后一個組件是容錯狀態機(Fault Tolerant State MachineFTSM)。它們主要由系統代碼使用,但也可以被用戶代碼使用。每個FTSM都屬于Shard,例如,在一個有三臺機器的Shard中,它們全部同時執行相同的代碼。它們能存取每臺機器的持久化存儲。最重要的是,如果一個節點故障,代碼將按所有節點都同意的正確順序繼續執行。

    狀態機還被用于負載均衡、數據遷移、Shard創建和銷毀,以及協調跨Shard事務。狀態機也存在外部副作用,例如它們能發送RPC請求到遠程機器,但不論何時它們要變更持久化狀態,都必須提交給Raft以取得所有服務器的同意。

    Facebook目前將Apollo用于替換Memcached的一些應用場景,同時Johnson也明確表示Facebook大規模地使用了Memcached。該公司同時正在嘗試使用它作為一種可靠的隊列系統,用于發送Facebook消息到iOSAndroid和運營商SMS。它也可能用于更快速的分析。

    Apollo仍處于開發階段,還沒有開源,但Johnson說那是Facebook尋求并樂意去做的方式。Johnson的演示稿已經提供給QCon紐約的參會者,在適當的時候會發布給所有人。

    查看英文原文:Facebook Announces Apollo, a New NoSQL Database for On-line Low Latency Storage

     

    posted on 2014-08-16 09:50 憶風 閱讀(262) 評論(0)  編輯  收藏

    只有注冊用戶登錄后才能發表評論。


    網站導航:
     
    主站蜘蛛池模板: 亚洲人成色4444在线观看| 亚洲天堂一区在线| 人妻仑乱A级毛片免费看| 成人免费无码精品国产电影| 亚洲AV无码一区二区三区牛牛| 114一级毛片免费| 亚洲成人午夜电影| 成人特黄a级毛片免费视频| 亚洲欧美成人一区二区三区| 精品国产免费观看| 福利片免费一区二区三区| 亚洲国产精品尤物YW在线观看| 一级毛片aa高清免费观看| 亚洲精品国产字幕久久不卡| 免费观看男人吊女人视频| 亚洲gv猛男gv无码男同短文| 中文字幕亚洲免费无线观看日本| 亚洲欧洲日韩在线电影| 性色av免费观看| 男女猛烈无遮掩视频免费软件 | 亚洲精品9999久久久久无码| 免费观看的a级毛片的网站| 激情吃奶吻胸免费视频xxxx| 亚洲精品美女久久久久99| 最近中文字幕免费完整| 伊人久久亚洲综合影院首页| 亚洲精品国产精品乱码不卞| 国产偷伦视频免费观看| 亚洲成综合人影院在院播放| 日本人护士免费xxxx视频| 国产免费MV大全视频网站| 亚洲黄色免费观看| 日本免费网站观看| 91免费在线视频| 中文字幕乱码亚洲精品一区| 国产成人综合亚洲AV第一页| 精品香蕉在线观看免费| 一级毛片免费一级直接观看| 亚洲综合伊人制服丝袜美腿| 在线精品亚洲一区二区小说| 国产免费毛不卡片|