Bistro Hadoop Spark 大數據 資策會 巨量

資策會發表Bistro巨量資料管理平台 社群版便利產學應用

2015-08-24
資策會大數據所研發的「Bistro巨量資料管理平台(社群版)」,係整合Hadoop、Spark等兩大主流開源軟體,透過資料在記憶體的管理優化計算效能的Berkeley BDAS等開源套件,及簡化巨量分析運算所需基礎環境的部署與管理,未來不論巨量文字探勘分析與日誌數據分析,都可用以發展各式應用。
資策會MIC研究報告指出,巨量資料分析市場在雲端運算、行動應用、社群商務逐步發展成熟,以及企業採用意願提升等因素驅動下,預估2015年的服務市場將呈現穩定的成長趨勢,台灣巨量資料的市場規模預計將達新台幣81億元,較去年成長21.4%,2017年市場規模更上看新台幣111億元。巨量資料儼然成為下一波產業創新與企業競爭的主要動力。

目前巨量運算平台皆普遍建置於開源軟體之上,對於一般公司而言,分析巨量資料的門檻頗高-例如:開源軟體眾多,套件版本管理複雜、非結構化資訊的蒐存取用處理困難、計算資源利用欠缺彈性以及計算效能差等相關問題。有鑑於此,在法人科專支持下,資策會數據科技與應用研究所(大數據所)日前舉辦「Bistro巨量資料管理平台記者發表會暨論壇」,正式公開發表「Bistro巨量資料管理平台」社群版-Bistro Community產品,冀望改善上述問題,降低巨量資料開源軟體的技術門檻與投資門檻,促進國內在各領域巨量資料分析應用。

本次記者發表會活動由資策會大數據所特別邀請松崗國際、探網科技及新鼎系統共同舉辦,鼓吹網路開發社群能共同參與改進巨量資料開源軟體並探討相關應用機會。在Bistro巨量資料管理平台論壇安排了合作夥伴單位探網科技董事長孫貴章、新鼎系統副總經理陳振欽、松崗國際總經理呂蘊桐等,分別以「大數據資料探勘-網路新媒體之非結構化資料分析與應用」、「大數據分析於製程產業之應用」與「大數據到大知識及巨量數值分析」為題,發表專題演說。未來不論在巨量的文字探勘(text mining)分析與巨量的日誌數據(log data)分析,都可運用「Bistro巨量資料管理平台(社群版)」所提供的開源軟體套件,發展各式巨量資料分析應用。

資策會副執行長王可言指出,在法人科專支持下,由資策會大數據所研發之「Bistro巨量資料管理平台」,係為是一套兼顧實用、效能升級特色的簡易巨量資料平台,目前就業界或學界試用與教育用途,提供線上軟體下載、線上論壇及線上諮詢服務,對於想入門或從事巨量資料分析的單位來說,正是一大福音。

資策會大數據所所長林蔚君進一步補充表示,資策會大數據所研發的Bistro Community產品,係整合Hadoop、Spark等兩大主流巨量資料開源軟體,透過資料在記憶體的管理優化計算效能的Berkeley BDAS等開源軟體套件,以及簡化巨量資料分析運算所需基礎環境的部署與管理,提供彈性的軟體套件安裝與簡單易用的管理界面等等,都讓資料分析師可以專注在領域巨量資料分析的工作。

值得一提的是,資策會大數據所預計於今年(104)年底,將繼續推出功能強化的企業版,升級提供常用非結構化資料轉結構化資料之「資訊管理」與多叢集部署之「系統管理」等功能,企盼能夠協助產業界運用「Bistro巨量資料管理平台」、掌握國內外龐大市場商機。


追蹤我們Featrue us

本站使用cookie及相關技術分析來改善使用者體驗。瞭解更多

我知道了!