2014年大數據分析趨勢展望
Posted on 2014年01月8日 by DinK in 行業資訊
http://www.199it.com/archives/185758.html
市場研究公司IDC預測,2015年大數據市場規模將從2010年的32億美元增長到170億美元,復合年增長率為40%。大數據是一個龐大的新的領域,其中的數據集可以增長的非常龐大,以至于使用傳統的數據庫管理工具也很難處理。處理這種問題所需要的新工具、框架、硬件、軟件和服務是一個巨大的市場機會。隨著企業用戶越來越多地需要連續不斷地訪問數據,好的大數據工具集將以最低的成本和接近實時的速度提供可伸縮的、高性能的分析。通過分析這種數據,企業可得到更大的智能以及競爭優勢。下面是Hadoop和大數據專業廠商MapR共同創始人和首席執行官約翰·施羅德(John Schroeder)對2014大數據市場的預測。
1. SQL擁有大數據的最大潛力
用于 Hadoop(分布式計算)的SQL的發展能夠讓商業分析師利用自己的技能和選擇的SQL工具執行大數據項目。開發人員可以選擇Hive、Drill和 Impala等Apache項目,以及選擇Hadapt、HAWQ和Splice Machine等公司的專有技術。
2. 盡管如此 SQL還面臨挑戰
SQL需要數據結構。而集中的結構化數據可引起延遲并且需要人工管理。SQL還限制分析類型。過分強調SQL將延遲機構全面利用其數據價值的努力和延遲反應。
3. 身份識別是主要的數據安全問題
隨著Hadoop(分布式計算)中提供的接入控制能力的猛烈攻擊,機構迅速認識到線路級身份識別是必要的基礎。沒有充分的身份識別,任何更高級的控制都很容易被繞過,妨礙預定的安全計劃。
4. 數據錯誤變成學習機會
2014年機構將出現許多數據錯誤。數據錯誤將表明基礎的來源系統的問題嗎?數據錯誤是在下游分析中出現偏差導致的數據提取問題嗎?數據錯誤將表明定義差異或者缺少跨部門和業務部門的一致性嗎?2014年將看到解決數據異常問題。
5. 出現可運行的Hadoop
2014年將看到Hadoop在各個行業中的生產部署顯著增加。這將顯示出Hadoop在運營中的實力。在那里,生產應用與分析結合在一起能夠提供可以衡量的商業優勢,如在客戶化零售建議、詐騙檢測和試驗傳感器數據進行規范的維護等應用中提供這些優勢。
6. 更多的數據倉庫將部署企業數據中心
數據中心把數據提取處理和數據從企業數據倉庫卸載到Hadoop。作為一個核心的中心企業中心,數據中心要便宜10倍,能夠對額外的處理或者新的應用進行更多的分析。
7. 新的以數據為中心的應用將成為強制性的
利用大數據的能力將在2014年成為競爭的武器。更多的公司將使用大數據和Hadoop準確地針對個人消費者的偏愛追逐賺錢的追加銷售和交叉銷售的機會,更好地緩解風險以及減少生產和開銷成本。
8. 數據成為數據中心的核心
機構將從開發者過渡到大數據計劃中。IT部門將越來越多地擔負定義支持多種應用的數據基礎設施的任務,把重點集中在部署、處理和保護一個機構的核心資產所需要的基礎設施方面。
9. 搜索將成為非結構化的查詢語言
2013年有大量的用于Hadoop的SQL計劃。2014年將是這種非結構化查詢語言成為重點的一年。把搜索集成到Hadoop將為查找重要信息的企業用戶提供一種簡單和直觀的方法。搜索引擎還是包括推薦引擎在內的許多發現和分析應用的核心。
10. Hadoop將獲得地位
Hadoop將繼續取代其它IT開支,顛覆企業數據倉庫和企業存儲。例如,甲骨文的主要營收目標在過去的10個季度里有5個季度沒有實現。Teradata在過去的5個季度有4個季度沒有實現營收和利潤目標。
11. Hadoop仍需要幫助才能成為主流應用
更多的機構認識到Apache Hadoop本身還沒有準備好在企業應用。Apache Hadoop不是為系統管理或者災難恢復等統一企業IT流程設計的。企業將繼續推進混合的解決方案,把架構技術創新與Apache Hadoop的開源軟件結合在一起。
英文http://www.cio.com.au/slideshow/534054/pictures_12_big_data_predictions_2014/?image=3
譯文http://www.csdn.net/article/2013-12-25/2817926-pictures-12-big-data-predictions-2014
2014的12個大數據趨勢:Hadoop繼續升溫,R將進入主流
當下,“大數據”已成為2013年最火的技術詞匯之一;而在過去一年,這個市場的增速和改變也不可謂不大。同時,我們還看到了Hadoop及其生態系統的使用門檻從頂尖技術人才到數據科學家的改變。越來越多的企業擁抱大數據技術,并將其運用到生產環境中。那么,在2014年大數據的發展趨勢又會如何,這里不妨看一下來自CIO的12項預測:
1. 人們不再止步于大數據的談論
2014年,大數據止于說的情況將發生改變,人們將致力于從中獲益,所有大數據的炒作也將“煙消云散”。從Gainsight了解到,大數據本身也將成為桌面上的籌碼,Gainsight在其IaaS平臺中利用大數據分析被其稱之為“customer success management”的服務。Gainsight認為,在2014年,每家云應用程序提供商都將會讓其后端基礎設施支持大數據。
2. Hadoop將成為企業的關鍵組件
Hadoop將普及,大數據也不會再繼續止步于云服務。Alteryx認為,2014年,Hadoop的適用場景將超越批處理和存儲,將成為企業數據架構中通用的核心組件,這意味著數據分析將繼續成為大數據的首要用例。
3. 企業將更加鐘情于用戶數據
從Gainsight了解到,各個機構將對用戶數據充滿熱情,企業將充分利用客戶與其在線產品或服務交互產生的數據,并從中獲取價值。為了實現這點,數據分析能力將比BI團隊更受重視,為企業提供更多的價值。
4. 大數據玩轉市場決策
Alteryx認為,在2014年,大數據將首次正式登陸市場營銷,用于市場營銷的大數據技術將在這一年扮演重要角色——影響著廣告、產品推銷和消費者行為,World Cup及Winter Olympics將是其最大的舞臺。
5. 海量的數據將超越數據科學家的意識
lteryx認為,新型的數據分析需求將超越人力可為,有些情況下大數據技術將堪比成千上萬的數據科學家。該公司預測,這將會毫無疑問的拉低數據科學家薪酬。
6. 物聯網將進軍網絡
IEEE的專業協會認為,2014年,可識別事物將無縫的連接到信息網絡,實現真正意義上的Web of Things。The Web of Things將會充分利用移動設備和傳感器的監控能力,增強現實世界中的物體與Web副本之間的協同性。
The Web of Things將會生成大量與現實世界相關的數據,因而會需求智能化的解決方案在現實世界與相對應的數字世界資源之間賦予連接性、網際互連和相關性。
7. 從大數據到海量數據
數據的體積、速度和類型(volume、velocity和variety)在2014年將會繼續呈指數級增長,因此需要更簡單的分析工具來駕馭這些“數據洪流”。
IEEE稱,“不止是3個V讓大數據成了非常難以制服的老虎,數據科學家及行業所需簡單工具也是個難題,許多行業尚無獨立提取數據價值的能力。當前已出現的海量數據時代更需求數據管理和分析上新的范式和實踐。2014年,這個領域將上演群雄爭霸。”
8. R語言將取代傳統SAS解決方案
Alteryx認為,基于R編程語言的分析將數據科學家“御用”模式,這種分析在2014年將成為主流,將替代傳統的SAS及SPSS模式。Alteryx說道:“超過200萬用戶和300萬的分析師都在尋找更好的解決方案,R恰逢其時。”
9. Hadoop將增加實時特性
SQL-on-Hadoop供應商Splice Machine共同創始人兼CEO Monte Zweben指出,未來1年建立在Hadoop平臺上的交互式應用程序將呈爆發式增長,其中包括Web應用、移動應用和社交應用,人們可以與之進行實時的交互。
Zweben說道:“2014將帶來實時大數據應用程序平臺,企業將不會只能像當下一樣分析歷史數據,你將有能力分析5分鐘,甚至是1分鐘之內的數據;企業將擁有交互式應用程序,以便實時的制定決策。”
10. Hadoop將得到企業級強化
Splice Machine的Zweben說:“毋庸置疑,Hadoop是個了不起的平臺,但是仍然有許多工作要做。”
他認為,在2014,你將看到Hadoop向安全、運營管理、資源管理及多站點響應方向發展。Zweben補充道:“你將看到所有的企業級需求,我認為這些將是未來主要的焦點。”
11. 2014年底,至少有一家NoSQL IPO
大數據及云環境安全解決方案Gazzang董事長兼CEO Larry Warnock預測,在2014,至少有一家Hadoop或者NoSQL供應商會IPO,這標志著大數據平臺已被廣泛認可。
Warnock說道:“我不會去預測哪家會IPO,但是至少會有一家Hadoop或NoSQL供應商IPO。通過Wikibon了解到,在2012年,NoSQL軟件和服務創造了2.86億美元的稅收,而在2017年,這個數據被預測為18.25億。商場被不斷增長的企業需求推動,他們需要靈活、可擴展及負擔得起的數據管理解決方案,為新時代的云及大數據設計。”
12. 一個新的分析堆棧將誕生
Alteryx 預測,2014年,將出現一個新的數據及分析堆棧,為數據庫、分析、可視化提供新的解決方案,這將直接威脅到傳統的供應商巨頭,而這些供應商也會在匆忙中推出新的解決方案。