巨量資料 企業競爭力DNA養成關鍵! 智慧應用 影音
Microchip Computex
member

巨量資料 企業競爭力DNA養成關鍵!

  • DIGITIMES企劃

巨量資料須經由焠煉,方能產生巨量價值!
巨量資料須經由焠煉,方能產生巨量價值!

回顧2011年、檢視2012年、展望2013年的IT應用市場,「巨量資料(Big Data)」異軍突起,表現絲毫不遜於雲端運算,成為業者的新寵。但不免好奇,實際用戶市場的反應究竟為何?DIGITIMES特別舉行「2013企業巨量資料應用調查」活動,鎖定中華徵信所5000、及台灣知名企業為對象,透過電訪、問卷EDM邀約,最終回收1,031份有效問卷。讀者回應情況較預期為佳,使DIGITIMES有幸掌握第一手巨量資料市場脈動。接下來的篇幅,就讓我們共同見證這份調查結果,探索台灣企業IT人對於Big Data應用之意向。

企業生存之目的,正是為了謀求利潤,而創造利潤的來源,就在於促使客戶願意購買其提供的產品;因此世界上最長的距離,無非就是「從你的口袋到我的口袋」,而任何消費者決定採購行為,皆有其心路歷程,如何引導他們縮短這段歷程,並紮紮實實成為企業的客戶,即是最大的價值所在,透過巨量資料,即有助效展現此一價值。

曾有某企業的CIO認為,現今大家討論得如此熱烈的巨量資料,儘管涉及了企業以往鮮少碰觸的非結構式資料,然論及後續的分析應用,似乎萬變不離其宗,仍延續了過去商業智慧(BI)的思維;那麼,既有BI已經存在商業社會,長達至少20年之久,為何今天還需要繁衍出巨量資料這門新興學問?

這個解答就是,已在過去很長一段時間,一路相隨於企業營運發展的BI,肯定有所缺陷或盲點,而這個盲點便在於,BI系統所賴以分析的標的,全都圍繞在「已經完成交易的資料」,而這些資料,最多僅佔總體資料量的三成不到,即使竭盡所能榨乾這些資料的殘餘價值,也彷彿只是侷限在浮出海面的冰山打轉,難怪談來談去,總是不脫降低成本、提升效率等議題,了無創新意涵。

長此以往,企業就算把檯面上冰山整個撈走,成效也是一般而已,並未形塑出真能翻轉整個商業世界、造就長遠競爭優勢的DNA!該如何打破這層梏桎?便是鑽入海面,挖掘潛藏在下半部的8成冰山,也就是諸如語音、圖像或影像…等許許多多非結構性數據,它們所蘊含的價值,絕對比企業總以為如獲至寶、拼命抱著不放的結構式資料,要來得更加巨大。

這也就是為什麼,巨量資料能迅速展現秋風掃落葉的驚人聲勢,在2012年短短一年當中,便由1項期初大家還懵懵懂懂的話題,成為產官學研用各界卯勁簇擁的IT顯學;它的爆紅,絕非只是奠基於炒作,只因環顧世界上包括WalMart、Google、Amazon...等成功企業,早已充分運用巨量資料,做出了最佳的示範,意即英雄不論出身低,只要能夠洞悉別人尚且渾然不覺的真實脈絡,繼而採取正確的決策與行動,終究會以小蝦米之姿擊退大鯨魚,躋身新一代的商業巨擘!

時值2012年歲末年終之際,經濟部技術處舉辦了一連兩天的「前進2013智慧產業 x Big Data國際高峰暨新秀論壇」活動,會中參與演說的資策會技術長暨副執行長王可言,便傳達出1個非常重要的訊息,根據海外研究機構預測,全球五百大企業當中,將有高達85%以上,最終將無法有效利用龐大資料帶來競爭優勢,倘若他們不能、而你做得到,那怕你現在所操持的只是名不見經傳的企業,靠著巨量資料這道大補帖,今後就可望拾級而上,一步步打敗高達85%比例的Top500巨擘,成為舉世聞名的頂尖企業;巨量資料最吸引力的地方,無疑就在於此!

Big Data,並不等於Big Value
所以說,企業如何重塑出極具競爭力的嶄新DNA,關鍵就在於巨量資料。於是乎,一些出身於技術背景的企業IT人員,一經看到Big Data這個全新的大勢所趨,就像是獵鷹見到肥嫩的小兔子一樣,話不多說即想大快朵頤,導致滿口都是類以像Hadoop、MapReduce等艱深辭彙。

但問題來了,Hadoop、MapReduce等技術,不過是幫助你享用美食的「餐具」而已,絕非帶給你飽足感的主要來源,一味鑽進這個深奧的世界,似乎流於本末倒置、見樹不見林之盲點;殊不知「Big Data,絕不等於Big Value」,光是撈到這些Big Data還不夠,若未能加以分析,並將分析成果以高度視覺化方式,清清楚楚地展現在最終使用者的眼前,讓最終使用者能信手拈來把玩這些巨量資料,何來Big Value?

曾有1位教授感嘆,因為巨量資料成為大熱門,使得「資料科學家」成為未來饒富身價的行業,所以不少學子受此影響,紛紛對於與巨量資料息息相關的資料探勘(Data Mining)投以高度興趣,選課情況愈趨踴躍,但反問他們意欲鑽研的研究方向,卻遲疑許多答不出所以然來,如果任由這個現象發展,最終頂多培養出一批空有一身統計技能的工匠而已,並無法將巨量資料真正轉化為巨量價值。

有1位來自運輸服務業的資訊主管,對於這位教授的說法,也感到心有戚戚焉,他透露,其實該公司非常重視巨量資料的價值,亦深覺應及早為此進行必要準備,所以資訊部門開遍尋相關解決方案,並試圖引進深諳資料探勘的合作夥伴,結果忙了半天,遲遲未能找到合適之標的,其間最大癥結點,就在於未能與Domain Know-how掛鉤,導致淪於抽象表徵,這般解決方案,可以肯定難以發揮價值。

欲使巨量價值得以展現,企業管理者不能僅僅偏安於巨量資料管理等單一層次,另須融入資料視覺化、分析等技巧,且務必清楚認知,這些技巧,全都必須奠基在豐富的產業Domain Know-how之上,唯有如此,才能真真正正地以企業業務發展為依歸,從巨量資料茫茫大海中,撈出閃閃發亮的金針。

換言之,舉凡Hadoop叢集規劃、部署、管理與系統調校等技術工作,不能說不重要,但只是巨量資料應用的起始點,而非終點,企業要靠巨量資料搖身變為產業巨擘,仍有亟待持續學習與努力的空間。

巨量資料浪潮 方興未艾且遠景無限
可以預期的是,炒了一整年的巨量資料議題,它不過是一場暖身的前戲,真正的壓軸戲碼,肯定還將繼續上演,所以展望2013年,絕不會戛然而止、無疾而終。

既然如此,預期在2013年期間,部分企業必將從一旁看戲的觀眾,著手準備道具、苦練台詞,逐漸成為舞台上的要角之一,意即可望開始入相關的解決方案或服務,正式踏上巨量資料應用這條道路。

著眼於此,DIGITIMES遂精心推動「2013年企業巨量資料應用」調查活動,希冀藉由不同的問題構面,藉由答案一步步抽絲剝繭,終至還原出最可能發展出來的巨量資料應用樣貌。

首先第一道問題,為巨量資料與雲端運算、情境與社群使用經驗、行動為主的應用程式與介面、平板媒體與未來產品、物聯網(IoT)…等一干新技術比鄰而坐,一併接受受訪者的考驗,以瞭解在眾多新興技術的左右包抄之下,巨量資料仍將脫穎而出?深受排擠效應而遭淹沒?

緊接著,包括企業每日需要處理多大資料量,如何看待巨量資料向來強調的3V(Volume、Velocity與Variety),面對Web Logs、XML檔案、地理資訊?GPS點位、感應器記錄、RFID Tags、圖形、影片、聲音…等一缸子非結構式資料,認為哪些項目最具分析價值,又或者,哪些因素可能阻礙公司導入巨量資料解決方案,Big Data可望為公司創造何等效益,最感興趣與需求的Hadoop相關技術項目,以及如何藉由檢索查詢、網路探勘(Web Mining)、點擊流(Click-stream)分析、報表產出、環境感測、社群分析…等眾多應用行為,延展最終應用價值;凡此種種,皆已融入本次調查的問題設計之中。

當然,不管是企業用戶、解決方案或服務供應商,備感關注的主題,仍在於多數企業對於導入巨量資料解決方案的時程規劃,以及企業最亟需引進的巨量資料解決方案型態,這兩大主軸,亦已被列為本次調查訪談的重點所在。