目前分類:Hadoop & Hbase (6)

瀏覽方式: 標題列表 簡短摘要

Hbase是搭配在Hadoop上的Database

主要是implement Google的BigTable

這邊簡單紀錄一下安裝過程

環境

austintodo 發表在 痞客邦 PIXNET 留言(0) 人氣()

距離上次使用Hadoop也是好久以前的事了

瞬間Hadoop就從0.13標到現在的0.20了XD

但為了搭配Hbase使用,目前我安裝的是Hadoop-0.19.1

環境是Ubuntu 8.10

austintodo 發表在 痞客邦 PIXNET 留言(0) 人氣()

雲端技術這個詞在這幾年越來越紅,到底什麼是雲端設計?

簡單說就是把所有需要計算的東西丟到伺服器,讓伺服器去分配更多的電腦、空間去計算

而眼前的電腦只是扮演一個螢幕的角色而已

負責傳送、接收並顯示資訊,就像你口袋中的手機而已。

而雲端技術看似簡單,而後卻有著了不起的演算法,

austintodo 發表在 痞客邦 PIXNET 留言(0) 人氣()

之前安裝Hadoop時發現如果有太多的cluster,
就要將Hadoop複製一份放到這些node上面
一開始兩三台還好,那如果改成兩三百台就會死很慘
因此就開始試著想要把Hadoop放在NFS上面(Network File System)
如此一來我只需要建構一份Hadoop System

austintodo 發表在 痞客邦 PIXNET 留言(4) 人氣()

Hadoop 不僅僅提供了cluster之間互相溝通的平台
也提供了一台server自己內部互相平行化的平台
不過當然如果只有一台server
那平行化其實只是假的
但可以提供練習就是了!!

austintodo 發表在 痞客邦 PIXNET 留言(0) 人氣()

因為計中和IR lab好像都要用到hadoop這個東西
加上最近yahoo在我生活中整個很有名
所以想說來研究一下hadoop
筆記!Hadoop 簡單的說就是建立一個cluster平台
利用MapReduce的概念將一個工作分到很多個cluster去平行運算

austintodo 發表在 痞客邦 PIXNET 留言(0) 人氣()

找更多相關文章與討論