目前分類：Hadoop & Hbase (6)

瀏覽方式： 標題列表 簡短摘要

Hbase是搭配在Hadoop上的Database

主要是implement Google的BigTable

這邊簡單紀錄一下安裝過程

環境

(繼續閱讀...)

austintodo 發表在 痞客邦 留言(0) 人氣()

▲top

距離上次使用Hadoop也是好久以前的事了

瞬間Hadoop就從0.13標到現在的0.20了XD

但為了搭配Hbase使用，目前我安裝的是Hadoop-0.19.1

環境是Ubuntu 8.10

(繼續閱讀...)

austintodo 發表在 痞客邦 留言(0) 人氣()

▲top

雲端技術這個詞在這幾年越來越紅，到底什麼是雲端設計？

簡單說就是把所有需要計算的東西丟到伺服器，讓伺服器去分配更多的電腦、空間去計算

而眼前的電腦只是扮演一個螢幕的角色而已

負責傳送、接收並顯示資訊，就像你口袋中的手機而已。

而雲端技術看似簡單，而後卻有著了不起的演算法，

(繼續閱讀...)

austintodo 發表在 痞客邦 留言(0) 人氣()

▲top

之前安裝Hadoop時發現如果有太多的cluster，
就要將Hadoop複製一份放到這些node上面
一開始兩三台還好，那如果改成兩三百台就會死很慘
因此就開始試著想要把Hadoop放在NFS上面(Network File System)
如此一來我只需要建構一份Hadoop System

(繼續閱讀...)

austintodo 發表在 痞客邦 留言(4) 人氣()

▲top

Hadoop 不僅僅提供了cluster之間互相溝通的平台
也提供了一台server自己內部互相平行化的平台
不過當然如果只有一台server
那平行化其實只是假的
但可以提供練習就是了!!

(繼續閱讀...)

austintodo 發表在 痞客邦 留言(0) 人氣()

▲top
因為計中和IR lab好像都要用到hadoop這個東西
加上最近yahoo在我生活中整個很有名
所以想說來研究一下hadoop
筆記!Hadoop 簡單的說就是建立一個cluster平台
利用MapReduce的概念將一個工作分到很多個cluster去平行運算
(繼續閱讀...)

austintodo 發表在 痞客邦 留言(0) 人氣()

▲top