[技術] 別再扯hadoop (?)

[realmeat (真肉)]

針對連結文中的人
他也說過他還卡在寫作job(map-reduce)碰到一堆泛型泛到不知道怎寫code的情況
導致大部份時間都在兜程式碼跟除錯,
然後hadoop發生錯誤又很難debug, 因為錯誤訊息不完整,
其實這也是一開始最難入手的部份
可以知道他hadoop還沒碰到很深,
沒熟到可以任意控制,
他缺少的是一個hadoop專門顧問,

我的第一篇回文只是把我碰過到的問題幾個大項條列出來,
僅只是工作內容的一部份, 這樣就被說扯一堆專業名詞,
想要控制job(map-reduce)的人 請先把那些問題釐清, 有幫助的,
換句話說, 想好好控制job, 這些都是會碰到的課題,
啥都不懂, 你又怎知道他的極限?

hadoop真的沒那麼強,
大多台面上看的到的應用根本沒辦法使用,
但台面下使用者看不到的資料,
量又大又難搞就很好運用,
資料的總運算量超過一定程度到需要分散處理的時候就可以考慮了,
--
去除情緒性字眼, 專業發文 =.=+
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 61.231.90.27
→ TonyQ:為了避免再度沒有交集的吵起來，抱歉得先用版規一鎖文～Orz
→ TonyQ:請大家繼續回歸主題討論～～有違規的部份請回報板務處理～
→ jlhc:要吵架私信好嗎.....
推 yauhh:有一次研討會跟一位研究生問問他hadoop用什麼技巧map-reduce
→ yauhh:結果回給我一句廢話. 我想也是,可能很多細節都藏起來了,表面
→ yauhh:只用好語言及library就OK. LinQ也差不多.
→ remmurds:基本上我同意哈杜並沒有某些人吹捧的那樣神通廣大
推 exoduschi:我覺得Hadoop的發展有點像Ethernet XD
→ exoduschi:滿多演算法在HADOOP上是不適合的，也因為這樣大家努力
→ exoduschi:改善他 這樣才有PAPER出啊 XD XD
推 exoduschi:Hadoop要跑的快很複雜 沒記錯有五十幾個參數可以調 XD
→ exoduschi:大家別傷和氣啦 他就是一套工具 not one fits all
→ exoduschi:回樓上的 Hadoop是利用P2P發展出來DHT來做的
→ exoduschi:現在P2P技術已經是everywhere了 XD XD
→ exoduschi:請大家不要想到P2P就想到BTXD P2P is more than that XD
→ realmeat:其實我並不是hadoop的教徒, 只是工作上要使用他罷了
→ realmeat:別人說它強到啥程度, 我根本就沒在理會
→ realmeat:我只專注在能把它發揮到啥種程度
→ markov:is this good web site? http://hadoop.apache.org/
→ markov:or PZ help me figure out right way of Hadoop.
推 markov:Thanks ~~~
※ 編輯: realmeat        來自: 61.228.21.188        (09/23 00:14)
→ viable:吵架吵贏是有什麼用
→ viable:連英文都看不懂
→ realmeat:還蠻爽的
→ viable:你對我們沒有用
→ gmoz:分散式引戰 hawarp
→ viable:真肉引戰還自己承認
推 gmoz:覺得原生的Hadoop麻煩可以花錢試試看MapR 據說不錯XD
→ TonyQ:戰沒有問題，人身攻擊才有問題。
→ viable:我說如果啊。 如果講的是負面的事實 那算不算人身攻擊
推 markov:Thanks again, i get it. now i more clear that.
→ TonyQ:@viable 我就不回答假設性問題了  XD
→ viable:連這都答不出來啊
→ viable:誇張
→ TonyQ:@viable 謝謝指教～
→ Lordaeron:版工,你跟我有梁子大家都知的.
→ Lordaeron:但一個人連基本的英文程度都沒有, 還說到多強,讀原始碼
→ Lordaeron:的,還自HIGH 贏呢
→ Lordaeron:碰到一堆泛型不知怎麼CODE 的文章, 還望英文高人指出呢.