[閒聊] 你所不知道的海量資料

[EijiHoba (Feel)]

以下是IBM的廣告文章------------------------------------------------------------

你所不知道的海量資料

探索奔流金脈，掌握瞬變商機

2012年05月23日

每天500萬筆信用卡交易，每秒12萬筆生理健康資訊，每天27億個讚。這些數字，僅是一間銀行、一間醫院、一個網站所面對的海量資料。善用海量資料即時性分析，這些資料就能轉變成金融詐騙的防火牆，早產兒重症感染預警資訊，或是無窮無盡的商機！


--------------------------------------------------------------------------------

全世界都在討論海量資料(Big Data)，卻沒有看見海量資料的全貌。當討論焦點集中在龐大資料量(Volume)與異質資料多樣性(Variety)時，經常忽略了另外一項差異化競爭的關鍵特性—即時性(Velocity)。

數億支智慧型手機、超過十億台電腦、數兆個感測器，每分每秒創造新的動態資訊。掌握這些動態資料串流(In-motion Streaming)，就能快人一步做出當下最有價值的決策。這些決策，將可能提升營收、防止客戶流失、紓解城市交通阻塞、甚至預防一場犯罪！

江河運算，以微秒為單位的動態淘金術
這種異動頻繁、流量極大、且須即時回應的海量資料應用，稱為「江河運算」(Streams Computing)。「江河運算」源自於IBM與美國國土安全部合作研發的反恐系統，能夠針對動態性質的海量資料進行即時性、高複雜度的分析，最快可在微秒內做出反應與決策。

「分析這些資料就好像在滾滾河流中篩取砂金，要在最短時間內分辨篩網中是泥沙還是金沙，並精準挑揀出來；」IBM軟體事業處副總經理林世偉形容，「如果錯失機會，下一秒就隨著河水流逝，不再復返。」

人命關天的醫療業，首先受惠於「江河運算」帶來的即時優勢。加拿大安大略理工大學醫院採用IBM「江河運算」技術來建立早產兒健康監護系統，每天監控分析超過十億條生理資訊，協助醫護人員提前24小時預防早產兒加護病房中敗血症引發的感染。

即時分析，當下創造最大價值
電子製造業也有龐大需求。林世偉表示，當製程微縮(Die Shrink)需求大增時，資料量與複雜度會瞬間擴大百倍以上。製造業慣用的EDA工程數據分析系統無法有效應用這些瞬間湧入的海量資料，交由「江河運算」便能協助製造業改善製程、提升良率、減少物料浪費。

政府機構更將江河運算發揮得淋漓盡致。犯罪率居高不下的紐約市與IBM合作，將犯罪資料系統、反恐監控與交通管制整合為獨立犯罪打擊系統，即時分析犯罪模式以決定最佳警力派遣規劃，紐約犯罪率因此下降40%！

掌握速度，抓住奔騰商機
資訊以超乎想像的速度產生、累積、消逝，商機亦然。海量資訊的即時性，對不同產業有不一樣的價值與意義。「企業與組織大可兩面兼顧，持續在既有資料金礦中挖掘價值，同時踏入動態資訊的巨流中，掌握瞬息萬變的奔騰商機！」林世偉建議。

http://www.appledaily.com.tw/appledaily/article/finance/20120523/34246192

http://goo.gl/gvEoJ

-------------------------------------------------------------------------------
在看完文章之後，我感覺和Data Mining的概念很接近

像是即時性的 Data Mining

--
※ 發信站: 批踢踢實業坊(ptt.cc) 
◆ From: 220.139.202.46
→ Ting1024:反正是電腦在跑，好像沒啥差..想撈就撈咩 :D
→ YunJonWei:問題在於，這種資料量你撈不動吧@@
推 lunastorm:大致上就是event processing啦
→ francej:跟古時候就有的平行運算好像沒甚麼不一樣
→ francej:不過反正這些資料都在google, fb雲端. 好像我們也不用操
→ francej:甚麼心. 畢竟你想mine也mine不到.