<rt id="bn8ez"></rt>
<label id="bn8ez"></label>
  • 

    • <span id="bn8ez"></span>
    

    <label id="bn8ez"><meter id="bn8ez"></meter></label>
    

    
    

    




    







												


        


    


    paulwong
    

    

    



    
	
					
	
    
		
    
			HBASE讀書筆記-基礎功能
		
    
		
      
     
    1. HBASE的SHELL命令使用
      
     
      
     
      2. 
     
    2. HBASE的JAVA CLIENT的使用

      新增和修改記錄用PUT。

      PUT的執行流程：
      首先會在內存中增加MEMSTORE，如果這個表有N個COLOUMN FAMILY，則會產生N個MEMSTORE，記錄中的值屬于不同的COLOUMN FAMILY的，會保存到不同的MEMSTORE中。MEMSTORE中的值不會馬上FLUSH到文件中，而是到MEMSTORE滿的時候再FLUSH，且FLUSH的時候不會寫入已存在的HFILE中，而是新增一個HFILE去保存。另外會寫WRITE AHEAD LOG，這是由于新增記錄時不是馬上寫入HFILE的，如果中途出現DOWN機時，則HBASE重啟時會根據這個LOG來恢復數據。

      刪除記錄用DELETE。

      刪除時并不會將在HFILE中的內容刪除，而是作一標記，然后在查詢的時候可以不取這些記錄。

      讀取單條記錄用GET。

      讀取的時候會將記錄保存到CAHE中，同樣如果這個表有N個COLOUMN FAMILY，則會產生N個CAHE
      ，記錄中的值屬于不同的COLOUMN FAMILY的，會保存到不同的CAHE中。這樣下次客戶端再取記錄時會綜合CAHE和MEMSTORE來返回數據。

      新增表用HADMIN。

      查詢多條記錄用SCAN和FILTER。
      
     
      
     
      3. 
     
    3. HBASE的分布式計算

      為什么會有分布式計算
      前面的API是針對ONLINE的應用，即要求低延時的，相當于OLTP。而針對大量數據時這些API就不適用了。
      如要針對全表數據進行分析時用SCAN，這樣會將全表數據取回本地，如果數據量在100G時會耗幾個小時，為了節省時間，引入多線程做法，但要引入多線程時，需遵從新算法：將全表數據分成N個段，每段用一個線程處理，處理完后，交結果合成，然后進行分析。

      如果數據量在200G或以上時間就加倍了，多線程的方式不能滿足了，因此引入多進程方式，即將計算放在不同的物理機上處理，這時就要考慮每個物理機DOWN機時的處理方式等情況了，HADOOP的MAPREDUCE則是這種分布式計算的框架了，對于應用者而言，只須處理分散和聚合的算法，其他的無須考慮。

      HBASE的MAPREDUCE
      使用TABLEMAP和TABLEREDUCE。

      HBASE的部署架構和組成的組件
      架構在HADOOP和ZOOPKEEPER之上。

      HBASE的查詢記錄和保存記錄的流程
      說見前一編博文。

      HBASE作為數據來源地、保存地和共享數據源的處理方式
      即相當于數據庫中JOIN的算法：REDUCE SIDE JOIN、MAP SIDE JOIN。
      4. 

    
		
    
			posted on 2013-02-06 09:53 paulwong 閱讀(611) 評論(0)  編輯  收藏  所屬分類: HADOOP 、云計算 、HBASE 
		
    
	
    
	
	





    
	    
    




    








    

				

    



    







    
        
	



主站蜘蛛池模板：
亚洲av无码一区二区三区天堂
|
亚洲午夜精品久久久久久人妖
|
国产免费久久久久久无码|
免费a在线观看播放|
精品在线观看免费|
国产人妖ts在线观看免费视频|
亚洲AV无码资源在线观看|
国产成人免费片在线观看|
美女露100%胸无遮挡免费观看|
日韩精品电影一区亚洲|
www免费插插视频|
国产亚洲精久久久久久无码|
免费一级毛片无毒不卡|
337p日本欧洲亚洲大胆艺术|
h视频在线观看免费网站|
2019亚洲午夜无码天堂|
国产午夜免费秋霞影院|
xxxx日本在线播放免费不卡|
久久精品国产96精品亚洲|
精品香蕉在线观看免费|
亚洲日韩一区精品射精|
国产精品亚洲二区在线观看
|
国产AV无码专区亚洲精品|
亚欧免费一级毛片|
国产AV旡码专区亚洲AV苍井空|
国产人成免费视频|
精品成人免费自拍视频|
亚洲av日韩av无码av|
免费一级毛片不卡不收费|
黄色网站软件app在线观看免费
|
久久精品免费一区二区|
色婷婷亚洲一区二区三区|
亚洲精品无码国产|
av大片在线无码免费|
相泽南亚洲一区二区在线播放|
亚洲乱码中文字幕综合|
国产人成免费视频网站|
一级毛片aaaaaa视频免费看
|
色噜噜的亚洲男人的天堂|
亚洲国产精品SSS在线观看AV|
2021免费日韩视频网|