From:Click Here
作者 Scott Delap譯者 Jason Lai? 發(fā)布于 2007年3月29日 上午9時(shí)28分
IBM Alphaworks網(wǎng)站發(fā)布了一個(gè)新的Eclipse插件，使用開(kāi)源Java MapReduce框架Hadoop來(lái)簡(jiǎn)化應(yīng)用程序的開(kāi)發(fā)。Hadoop框架的產(chǎn)生最初是為了支持Nutch項(xiàng)目。Hadoop包含了一個(gè)分布式文件系統(tǒng)以及MapReduce編程結(jié)構(gòu)的一個(gè)實(shí)現(xiàn)，該實(shí)現(xiàn)被Google廣泛用于進(jìn)行跨集群海量數(shù)據(jù)集的并行處理。今年在Hadoop上所做的集成工作使得在Amazon的EC2平臺(tái)上運(yùn)行Hadoop MapReduce應(yīng)用和使用Amazon的S3平臺(tái)進(jìn)行存儲(chǔ)等更為容易。Amazon Web服務(wù)博客表示：“由于EC2實(shí)體和存儲(chǔ)于S3上的數(shù)據(jù)之間的帶寬尚未度量或發(fā)布，這是處理大量數(shù)據(jù)的一種很節(jié)約成本的方式”。
IBM MapReduce插件包含以下功能：
- 允許Java?項(xiàng)目以JAR（Java Archive）文件形式打包并部署到（本地和遠(yuǎn)程的）Hadoop服務(wù)器上
- 提供輔助開(kāi)發(fā)過(guò)程的備忘單（Cheat Sheets）
- 增加了一個(gè)獨(dú)立的Eclipse透視圖（Perspective），以及用于顯示Hadoop服務(wù)器、Hadoop分布式文件系統(tǒng)（DFS）和當(dāng)前任務(wù)狀態(tài)的視圖
- 提供了一些向?qū)В够贛apReduce框架的類(lèi)的開(kāi)發(fā)變得更加容易
此外，它還包括了改進(jìn)的備忘單，并且完全兼容OS X。插件使用SCP和SSH與Hadoop服務(wù)器進(jìn)行交互，通過(guò)HTTP協(xié)議獲取工作狀態(tài)。