網路資訊/ 透過Hadoop 巨量資料蛻變巨大商機

網路資訊雜誌/曹乙帆

巨量資料來襲,它或許是個契機,但也可能是場災難,端看企業的心態及作為而定。趨勢科技董事長張明正大聲疾呼表示,如今正值雲端運算、巨量資料再加上物聯網?聚在一起的最佳時機點,無疑是再造台灣黃金30年的千載難逢大契機。台灣IT 發展會向上提升,還是向下沈淪,全在此一戰!

過去,有價值的資料都會被正規化地儲存在資料庫系統裡,進而成為整個IT系統運作所仰賴的結構化資料,反觀數量更加龐大的非/半結構性資料,在過去關聯式資料庫無法有效消化的情況下,只有被迫視之為敝屣地加以丟棄。但隨著Hadoop及NoSQL 等新技術的出現,過去堆積如山的「垃圾」,竟然搖身變為企業致勝於千里的關鍵寶礦。

事實證明,站在技術浪頭最尖端的Google、Yahoo、Amazon 及臉書,其在激烈商業大戰中所展現的「遠見」,竟然全都是從過去視之為敝屣的垃圾堆中萃取而出的。一時之間,巨量資料遂成為想要出人頭地也好、大賺其錢也對,甚至想絕地逢生企業們的仙丹妙藥。巨量資料的蒐集、儲存、建模(Modeling)、運算及分析因而成為當前最熱門的顯學,而Hadoop分散式平行運算架構及各類NoSQL分散式資料庫更成為其中的佼佼者, 進而成為讓企業擁有智慧及洞見, 並能發掘巨量價值、創造無窮商機的新利器。

面對巨量資料,企業可以正面對待,也可視而不見,全看企業的需求而定。所以巨量資料絕非非做不可的事情,而是要不要做的問題,換言之,如果覺得透過傳統資料庫便可在結構性資料中找到商業價值,那麼就不必在影像、圖檔或日誌中辛苦地翻箱倒櫃,尋找出可為企業增長智慧的蛛絲馬跡。

[廣告]請繼續往下閱讀...

但在激烈的商業戰爭中,一丁點寶貴的智慧及洞見,都可能讓原本僵侍的戰局出現戲劇化一面倒的局面,抑或讓原本委靡不振的頹勢出現出人意表的大翻盤。如果在原本傳統資料庫及結構性資料中無法生出更進一步的新意時,或許致敵於機先的錦囊妙計與答案就藏在巨量非/半結構性資料之中。對此,企業豈有如同縮頭烏龜般地視而不見,白白放過向上提升的機會?

張明正在由趨勢科技、國家高速網路與計算中心、騰雲計算公司主辦的Hadoop in Taiwan 2012盛會會後指出,物聯網所產生的巨量資料,再結合到後端雲端運算及Hadoop分散式平行運算平台,將勾勒出今後長達30年光景的新產業價值體系及供應鏈。在此體系及供應鏈中,不會再由過去商業軟體巨頭所能壟斷,轉而會是開原軟體主導的天下,這對台灣產業而言無疑會是千載難逢向上提升的大契機。

打造台灣專屬巨量資料產業價值體系

張明正認為台灣全新產業價值體系及供應鏈中擁有諸多無與倫比的優勢。首先,今後物聯網中Machine to Maching(M2M)網路,事實上會是裝置上感測器相互連結,並將蒐集資訊上傳雲端進行分析的網路架構。談到感測器,可說是台灣的強項及優勢所在,這是因為台灣過去從BIOS到各種類比感測元件之開發上,累積了全球無出其右的豐富經驗及Know-how,所以台灣絕對有能力在巨量資料這一波潮流當中,完成感測器子系統的建置。

過去台灣無法建立感測器子系統,而只能在OEM的微利中奮力周旋的原因,即在於缺乏後端可與之相連的運算平台。當前在生活週遭不乏許多感測元件的應用實例,例如現今ATM提款機的背後運作,即為感測器對感測器,以及對後端伺服器間的資料互通。

同樣的,機場通關的感測掃描元件,會將資料後傳至伺服器或資料中心做分析比對。隨著物聯網時代的到來,各類裝置間的互通有無將形成更加巨大可觀的資料,這中間需要藉助感測器將資料傳送到後端主機或雲端上,同時也要建置Hadoop儲存及運算平台,乃至NoSQL資料庫進行巨量資料的處理及分析。
過去從應用軟體到伺服器,莫不是大型廠商的禁臠,如今雲端運算不再如此,開放原始碼已經成為雲端運算中一股非常重要的勢力,其中尤以OpenStack及CloudStack 堪稱是今後開放原始碼雲端之兩大中流砥柱,今後不論私有雲端、公有雲端及混合雲端的建置,同為Apache基金會開放原始碼的OpenStack及CloudStack將成為商用方案之外的最佳選擇之一。

除此之外,目前一談到巨量資料,人們腦海中首現浮現的不再是過去制霸資料庫市場的甲骨文也不是軟體巨人微軟,卻是同為Apache基金會旗下的開放原始碼Hadoop平行運算暨儲存架構,以及HBase NoSQL分散式資料庫。

由此可見,從雲端運算,到巨量資料的儲存、運算及資料庫系統,不再是過去商業軟體所壟斷的局面,開放原始碼在其中發揮非常巨大的影響力。同樣的,台灣產業也可藉由開放原始碼發光發熱,藉此打造從感測子系統到後端雲端運算與Hadoop平台的產業價值供應鏈及生態體系。

張明正極富洞見地指出,身處巨量資料及物聯網的新世代裡,「資料」就等同於科技界的新能源,誰掌握的愈多、愈充份,誰就是這個世代的主宰者。

關鍵字: 網路資訊雜誌科技3CIT

分享給朋友:

追蹤我們:

※本文版權所有,非經授權,不得轉載。[ETtoday著作權聲明]

推薦閱讀

快訊/45年老牌紡織廠新昕纖龜山廠驚爆熄燈! 近90名員工資遣

快訊/45年老牌紡織廠新昕纖龜山廠驚爆熄燈! 近90名員工資遣

擁有45年歷史的紡織廠新昕纖(4406)今(24)日突然公告桃園龜山廠員工大量解僱案,震驚市場。業界預估受影響員工不到90人,而新昕纖桃園龜山廠現有4000坪廠房將再另做規劃。

2025-12-24 14:47

月薪37K起跳!台電2026年招考769名僱員 1/6起開放報名

月薪37K起跳!台電2026年招考769名僱員 1/6起開放報名

台電今(24)日公告2026年新進僱用人員甄試簡章,本次大舉釋出769個職缺,涵蓋配電、輸電、變電、電機等14類職務,高中職畢業即可報考。報名時間自2026年1月6日至1月19日,初試預定於5月10日在台北、台中、高雄及花蓮四地同步舉行。

2025-12-24 10:20

台灣2025年「人均所得」119萬超車南韓! 亞洲經濟體排第4

台灣2025年「人均所得」119萬超車南韓! 亞洲經濟體排第4

根據《新聞週刊》(Newsweek)報導,國際貨幣基金(IMF)統計數據顯示,受惠於全球對先進半導體的強勁需求,台灣今年(2025年)在「人均所得」的達到3萬7827美元(約折合新台幣119萬元),在亞洲經濟體排第4,超越經濟強國南韓。

2025-12-24 12:04

12月台股高檔震盪 一表看漲贏大盤9檔高息ETF

12月台股高檔震盪 一表看漲贏大盤9檔高息ETF

12月以來,台股先跌後漲高檔震盪劇烈,統計至23日大盤漲2.48%,反而是今年來一直備感壓力的台股高息ETF逆轉翻揚,觀察同期間共有9檔台股高息ETF漲幅勝大盤,其中群益台灣精選高息ETF(00919) 上漲7.21%漲幅居冠表現最出色;另外,國泰股利精選30(00701)、凱基優選高股息30(00915)也有5%以上的好表現。

2025-12-24 10:54

中國狂炒日本升息「世界末日」 老謝一句話點破:其實是在怕自己

中國狂炒日本升息「世界末日」 老謝一句話點破:其實是在怕自己

為什麼中國這麼在乎日本升息?財信傳媒董事長謝金河(老謝)直言,答案恐怕不在日本,而在中國自己。

2025-12-24 10:17

比黃金猛!鉑金單日飆171美元刷天價 市場驚喊「沉睡巨人醒來」

比黃金猛!鉑金單日飆171美元刷天價 市場驚喊「沉睡巨人醒來」

國際貴金屬市場再掀狂潮,這回主角不是黃金,而是長期被忽視的鉑金。引述據國際貴金屬經銷機構《KITCO》資料,鉑金期貨近日出現驚人漲勢,單日大漲171美元、漲幅近8%,價格一度衝上每盎司2,323美元,改寫歷史新高,市場驚呼「沉睡巨人正式甦醒」。

2025-12-24 09:42

「Pay姊」輾壓! 聯卡中心曝女性刷卡3大指標全面超車男性

「Pay姊」輾壓! 聯卡中心曝女性刷卡3大指標全面超車男性

聯合信用卡處理中心(簡稱聯卡中心)今(24)日最新公布信用卡大數據分析,發現近一年女性在刷卡金額、刷卡筆數、使用卡數3大指標通通贏過男性,「Pay姊」正式站上消費C位。

2025-12-24 12:02

AI股大黑馬!日系外資首評勤誠「買進」 目標價直指1200元

AI股大黑馬!日系外資首評勤誠「買進」 目標價直指1200元

AI需求持續火熱,日系外資最新出爐研究報告首度點名伺服器機殼與機架設計製造商勤誠(8210),不僅正式納入個股追蹤名單,還一口氣給出未來12個月目標價1200元、投資評等「買進」,看好勤誠將成為AI伺服器成長浪潮下的最大受惠者之一。

2025-12-24 11:39

散戶對華爾街影響力升溫!今年加碼美股刷新高 最愛輝達等3檔

散戶對華爾街影響力升溫!今年加碼美股刷新高 最愛輝達等3檔

分析師表示,由於個人投資者成為推動股市上漲的主要力量,預計今(2025)年流入美國股市的零售資金將創下歷史新高。而受降息預期的影響,股市上漲行情可能會延續到明年;輝達、特斯拉和Palantir則名列今年散戶最愛持股。

2025-12-24 10:57

記憶體股利空罩頂!華東大股東接力申讓漲不動 力積電虧損一度翻黑

記憶體股利空罩頂!華東大股東接力申讓漲不動 力積電虧損一度翻黑

受惠記憶體因缺貨價格走揚,華新集團旗下記憶體封測廠華東(8110)股價近期大幅上漲,主要股東華邦電(2344)也趁勢調整投資部位,以一般交易方式轉讓華東持股5000張,處分金額約2.7億元。

2025-12-24 09:59

讀者迴響

最夯影音

更多