tangtb

     摘要: Pig是一個基于Hadoop的大規(guī)模數(shù)據(jù)分析平臺對高級過程語言，適合于使用 Hadoop 和 MapReduce 平臺來查詢大型半結構化數(shù)據(jù)集。通過允許對分布式數(shù)據(jù)集進行類似 SQL 的查詢，該語言的編譯器會把類SQL的數(shù)據(jù)分析請求轉換為一系列經過優(yōu)化處理的MapReduce運算，Pig 可以簡化 Hadoop 的使用。  閱讀全文

     摘要: HBase是一個分布式的、面向列的開源數(shù)據(jù)庫，該技術來源于 Fay Chang 所撰寫的Google論文“Bigtable：一個結構化數(shù)據(jù)的分布式存儲系統(tǒng)”。就像Bigtable利用了Google文件系統(tǒng)（File System）所提供的分布式數(shù)據(jù)存儲一樣，HBase在Hadoop之上提供了類似于Bigtable的能力。HBase是Apache的Hadoop項目的子項目。HBase不同于一般的關系數(shù)據(jù)庫，它是一個適合于非結構化數(shù)據(jù)存儲的數(shù)據(jù)庫。另一個不同的是HBase基于列的而不是基于行的模式。  閱讀全文

     摘要: Redis是一個開源的使用ANSI C語言編寫、支持網絡、可基于內存亦可持久化的日志型、Key-Value數(shù)據(jù)庫，并提供多種語言的API。從2010年3月15日起，Redis的開發(fā)工作由VMware主持。
Redis 是一個高性能的key-value數(shù)據(jù)庫和Memcached類似，它支持存儲的value類型相對更多，包括string(字符串)、list(鏈表)、set(集合)、zset(sorted set --有序集合)和hash（哈希類型）。  閱讀全文

     摘要: 前置條件
成功安裝配置Hadoop集群
成功編譯安裝Hadoop Eclipse插件
本地有和服務器相同版本的Hadoop安裝包，并已解壓（本例使用hadoop-1.1.2）
  閱讀全文