網路資訊/ 透過Hadoop 巨量資料蛻變巨大商機

網路資訊雜誌/曹乙帆

巨量資料來襲,它或許是個契機,但也可能是場災難,端看企業的心態及作為而定。趨勢科技董事長張明正大聲疾呼表示,如今正值雲端運算、巨量資料再加上物聯網?聚在一起的最佳時機點,無疑是再造台灣黃金30年的千載難逢大契機。台灣IT 發展會向上提升,還是向下沈淪,全在此一戰!

過去,有價值的資料都會被正規化地儲存在資料庫系統裡,進而成為整個IT系統運作所仰賴的結構化資料,反觀數量更加龐大的非/半結構性資料,在過去關聯式資料庫無法有效消化的情況下,只有被迫視之為敝屣地加以丟棄。但隨著Hadoop及NoSQL 等新技術的出現,過去堆積如山的「垃圾」,竟然搖身變為企業致勝於千里的關鍵寶礦。

事實證明,站在技術浪頭最尖端的Google、Yahoo、Amazon 及臉書,其在激烈商業大戰中所展現的「遠見」,竟然全都是從過去視之為敝屣的垃圾堆中萃取而出的。一時之間,巨量資料遂成為想要出人頭地也好、大賺其錢也對,甚至想絕地逢生企業們的仙丹妙藥。巨量資料的蒐集、儲存、建模(Modeling)、運算及分析因而成為當前最熱門的顯學,而Hadoop分散式平行運算架構及各類NoSQL分散式資料庫更成為其中的佼佼者, 進而成為讓企業擁有智慧及洞見, 並能發掘巨量價值、創造無窮商機的新利器。

面對巨量資料,企業可以正面對待,也可視而不見,全看企業的需求而定。所以巨量資料絕非非做不可的事情,而是要不要做的問題,換言之,如果覺得透過傳統資料庫便可在結構性資料中找到商業價值,那麼就不必在影像、圖檔或日誌中辛苦地翻箱倒櫃,尋找出可為企業增長智慧的蛛絲馬跡。

[廣告]請繼續往下閱讀...

但在激烈的商業戰爭中,一丁點寶貴的智慧及洞見,都可能讓原本僵侍的戰局出現戲劇化一面倒的局面,抑或讓原本委靡不振的頹勢出現出人意表的大翻盤。如果在原本傳統資料庫及結構性資料中無法生出更進一步的新意時,或許致敵於機先的錦囊妙計與答案就藏在巨量非/半結構性資料之中。對此,企業豈有如同縮頭烏龜般地視而不見,白白放過向上提升的機會?

張明正在由趨勢科技、國家高速網路與計算中心、騰雲計算公司主辦的Hadoop in Taiwan 2012盛會會後指出,物聯網所產生的巨量資料,再結合到後端雲端運算及Hadoop分散式平行運算平台,將勾勒出今後長達30年光景的新產業價值體系及供應鏈。在此體系及供應鏈中,不會再由過去商業軟體巨頭所能壟斷,轉而會是開原軟體主導的天下,這對台灣產業而言無疑會是千載難逢向上提升的大契機。

打造台灣專屬巨量資料產業價值體系

張明正認為台灣全新產業價值體系及供應鏈中擁有諸多無與倫比的優勢。首先,今後物聯網中Machine to Maching(M2M)網路,事實上會是裝置上感測器相互連結,並將蒐集資訊上傳雲端進行分析的網路架構。談到感測器,可說是台灣的強項及優勢所在,這是因為台灣過去從BIOS到各種類比感測元件之開發上,累積了全球無出其右的豐富經驗及Know-how,所以台灣絕對有能力在巨量資料這一波潮流當中,完成感測器子系統的建置。

過去台灣無法建立感測器子系統,而只能在OEM的微利中奮力周旋的原因,即在於缺乏後端可與之相連的運算平台。當前在生活週遭不乏許多感測元件的應用實例,例如現今ATM提款機的背後運作,即為感測器對感測器,以及對後端伺服器間的資料互通。

同樣的,機場通關的感測掃描元件,會將資料後傳至伺服器或資料中心做分析比對。隨著物聯網時代的到來,各類裝置間的互通有無將形成更加巨大可觀的資料,這中間需要藉助感測器將資料傳送到後端主機或雲端上,同時也要建置Hadoop儲存及運算平台,乃至NoSQL資料庫進行巨量資料的處理及分析。
過去從應用軟體到伺服器,莫不是大型廠商的禁臠,如今雲端運算不再如此,開放原始碼已經成為雲端運算中一股非常重要的勢力,其中尤以OpenStack及CloudStack 堪稱是今後開放原始碼雲端之兩大中流砥柱,今後不論私有雲端、公有雲端及混合雲端的建置,同為Apache基金會開放原始碼的OpenStack及CloudStack將成為商用方案之外的最佳選擇之一。

除此之外,目前一談到巨量資料,人們腦海中首現浮現的不再是過去制霸資料庫市場的甲骨文也不是軟體巨人微軟,卻是同為Apache基金會旗下的開放原始碼Hadoop平行運算暨儲存架構,以及HBase NoSQL分散式資料庫。

由此可見,從雲端運算,到巨量資料的儲存、運算及資料庫系統,不再是過去商業軟體所壟斷的局面,開放原始碼在其中發揮非常巨大的影響力。同樣的,台灣產業也可藉由開放原始碼發光發熱,藉此打造從感測子系統到後端雲端運算與Hadoop平台的產業價值供應鏈及生態體系。

張明正極富洞見地指出,身處巨量資料及物聯網的新世代裡,「資料」就等同於科技界的新能源,誰掌握的愈多、愈充份,誰就是這個世代的主宰者。

關鍵字: 網路資訊雜誌科技3CIT

分享給朋友:

※本文版權所有,非經授權,不得轉載。[ETtoday著作權聲明]

推薦閱讀

49萬股東注意!台新金撥配息約1元 配發率100%

49萬股東注意!台新金撥配息約1元 配發率100%

台新金(2887)今(2)日公告盈餘分配近1元,含0.4元股票、0.59999990元,略優於去年,以去年自結稅後純益(EPS)達1.01元估,配發率近100%。

2024-05-02 18:25

台積電熊本廠薪水太高 日企苦:薪資開到極限也沒人來

台積電熊本廠薪水太高 日企苦:薪資開到極限也沒人來

晶圓代工龍頭台積電(2230)在日本熊本縣建廠,為當地就業情況帶來了巨大的變化。根據日媒報導,由於異常優惠的待遇和對半導體日益增長不僅吸引了學生,也吸引了那些尋求職業轉變的人。然而,中小企業對薪資上漲的擔憂卻越來越高。

2024-05-02 15:59

快訊/70萬股民喜迎!00929每股配0.2元 年化報酬率飆近12%

快訊/70萬股民喜迎!00929每股配0.2元 年化報酬率飆近12%

70萬投資人喜迎!首檔月月配ETF復華台灣科技優息(00929)今(2)日公告預定配0.2元,以今日收盤價20.05元估算,年化報酬率11.97%,飆近12%。

2024-05-02 15:46

離婚父母爭子女綜所稅扶養抵扣 生活費匯款不如聯絡簿簽名

離婚父母爭子女綜所稅扶養抵扣 生活費匯款不如聯絡簿簽名

5月綜合所得稅(綜所稅)申報扶養親屬項目常常是申報諮詢的重點,稅務人員私下透露,很多離婚的父母搶著申報子女扶養,希望折得所得稅,但是因為稅法規定扣除額不能切割,就算主張「共同扶養」子女也只能給父或母其中一人抵稅,實務上就發生過離婚爸爸拿出匯錢付生活費的證明,扶養扣除額認定卻給媽媽,只因學校聯絡簿簽名欄、小孩考卷全是媽媽名字的關係。

2024-05-02 12:34

台股高息ETF募集喊卡! 新光投信曝尚未收到核准函

台股高息ETF募集喊卡! 新光投信曝尚未收到核准函

在統一台灣高息動能(00939)、元大台灣價值高息(00940)等多檔台股高息月月配ETF吸引投資人瘋狂投入下,金管會對ETF審查趨嚴,今(2)日新光投信確定審核中的商品「今年暫停募集」,未來再視市場情形募集。

2024-05-02 16:12

台股ETF受益人824萬創新高 一表看3檔人氣王漲粉破10萬

台股ETF受益人824萬創新高 一表看3檔人氣王漲粉破10萬

台股每周ETF集保戶股權分散統計出爐,根據4/26最新公布資料,台股ETF的受益人周增加10萬7728人,總受益人達824萬4635人續創歷史新高,今年以來也增加217萬4007人,其中,台股高息ETF受益人更是成長驚人,已達到599萬9562人,下周將挑戰600萬人大關,佔整體台股ETF受益人的73%。

2024-05-02 11:03

Fed利率連6凍  新債王:今年降息不會超過1次

Fed利率連6凍  新債王:今年降息不會超過1次

美國聯準會 (Fed) 周三 (1 日)會議中 決定維持利率不變,這也是自 2023 年 7 月以來連 6 次按兵不動,有華爾街「新債王」之稱的DoubleLine Capital執行長岡拉克(Jeffrey Gundlach)在受訪時表示,Fed今年降息不會超過1次。

2024-05-02 13:43

小資族愛00919勝台積電 今年來零股交易人氣王出爐

小資族愛00919勝台積電 今年來零股交易人氣王出爐

零股交易一直是小資族、存股族的重要指標,統計今年以來至4月底台股零股交易情況,其中擁有穩定高息配息政策的00919群益台灣精選高息ETF最受小資族投資人青睞,今年來零股交易日均量157萬股最具人氣,勝過台積電、鴻海,成為台股最佳小資人氣王。進一步觀察前十大排行中,高股息ETF就佔了6席,更彰顯出台股高息ETF的存股價值持續受投資人喜愛。

2024-05-02 11:21

聯準會鷹派放軟!日圓千億銀彈噴出 匯價飆升至153

聯準會鷹派放軟!日圓千億銀彈噴出 匯價飆升至153

受到美國聯準會(Fed)表態升息「不太可能」與市場盛傳日本政府趁勢出手干預的消息激勵,日圓今(2)日凌晨匯價一度由157回升衝上153.04的水準,惟因亞幣普遍轉穩,台銀日圓現鈔掛牌價持續在0.21附近表現,未再探底。

2024-05-02 10:24

央行揭經長王美花反對升息 主因「電價漲非AI廠商經營更困難」

央行揭經長王美花反對升息 主因「電價漲非AI廠商經營更困難」

中央銀行在上一個月理監事會議中意外宣布升息半碼(0.125個百分點),與會理事中僅經濟部長王美花反對升息,而央行今(2日)公布第一季理監事會議事錄摘要中,揭露王美花反對理由,她認為,廠商業績表現兩極化,電價調漲後,導致非AI題材的廠商製造成本增加,再調升利率,資金成本會隨之提高、經營更加困難,不建議調升利率。

2024-05-02 17:55

讀者迴響