2013年5月9日 星期四

Fred 豢養的雲中象: 2013 台灣 Big Data 市場五大趨勢預測

Fred 豢養的雲中象: 2013 台灣 Big Data 市場五大趨勢預測:


System Administrator
相較於 Developer 學習 Hadoop 應用開發較低的門檻,要能夠部署、管理、營運一個自行搭建的 Hadoop 叢集,可就是一件難度相對高的任務。System Administrator (系統管理者) 必須從  Hadoop Core (HDFS + MapReduce) 系統架構與運作瞭解起,兼及資料來源如何蒐集、資料流程與資料倉儲系統如何管理、NoSQL 的儲存與查詢如何架構、網路環境如何搭配、如何與企業既有的 RDB/DW 串接,再加上安全性與 HA 等議題。在能夠成功搭建一組 Hadoop 叢集之前,不知道已經死了多少腦細胞?更遑論後續還有 Production 營運、維護、與最佳化的諸多議題。
所以,企業要能駕馭 Hadoop 這頭大象,擴及整個動物園,Hadoop 相關專業教育訓練課程的需求是具體存在的,端看企業目標,要養成的,是著重在 Developer,還是 System Administrator 上。課程的供給,在實際增加中。
從另一個角度來看,坐視 System Administrator 面對複雜的 Hadoop 叢集系統,看見困難與痛處,卻不思解決之道,將是 Hadoop 平台提供者的失敗。好在,從 Etu Appliance 產品身上,我們已經看到了念茲在茲的努力與希望。

沒有留言:

張貼留言