大數據技術：技術和業(yè)務分析的融合

大數據技術簡介

很久很久以前，人們在逐漸轉向農業(yè)之前過著游牧生活。輪子、火和蒸汽機的發(fā)明通常被認為是人類向機械化和提高生活舒適度方向發(fā)展的轉折點。
同樣，傳奇的牛頓運動定律和引力定律、愛因斯坦的相對論（現在正在慶祝其100周年）或熱力學定律都徹底改變了科學，并影響了應用科學。計算機的發(fā)明、個人計算機的到來和圖形用戶界面（GUI）都是數字時代發(fā)展的里程碑。二進制數0和1是匯編語言的核心。

Hadoop、數據科學、統(tǒng)計和；其他

二進制到大數據技術

在硬件層面，零和一為計算機電路提供動力，在業(yè)務層面，大數據技術正在使公司如何設計營銷戰(zhàn)略以保持競爭力發(fā)生巨大變化。它可以由單個數字和多個數字組成，所有數字都包含有關市場、機器功能、人體、電子商務交易或任何可能與買賣有關的日常活動的重要信息。
企業(yè)和會計專業(yè)人士通常會談論資產和負債。傳統(tǒng)上，資產指機械、技術、專有技術、人力資源、基礎設施以及金融資產。
現在，隨著組織和市場規(guī)模的增長，隨著這些有形資產的出現，一些單個和多個數字或數據已經成為最寶貴的資產。從營銷和大數據戰(zhàn)略的角度來看，數據已經成為最重要的資產。
企業(yè)的規(guī)模正在擴大。不再是小而美麗或可行。跨國經營、大型購物中心和大批量電子商務業(yè)務在全球范圍內形成了一種新趨勢。為了在這一大業(yè)務中取得成功，數據和數據分析變得至關重要。企業(yè)正在追求大數據Hadoop，以利用它獲得市場情報并了解客戶需求。

技術與數據分析的融合

圖像來源：皮克斯灣。com

組織擁有的大數據技術將毫無意義，除非有一種支持技術來挖掘、處理和組織數據，以便企業(yè)利用這一重要資產。著名作家和分析師伯納德·馬爾（Bernard Marr）曾表示，無論企業(yè)規(guī)模大小，無論是財富500強企業(yè)還是小型夫妻店，都將要求使用Hadoop大數據——看看它給企業(yè)帶來的變化。
大數據技術是大型數據集的集合，它們數量龐大，需要復雜的程序來分析并從中創(chuàng)建有意義的信息。可能是購買習慣、看電影的頻率、登錄網站的頻率、在線購買、訂購雜貨、更換手機的頻率等等。
各種工具、框架和技術被用于分析大型數據集，它們已成為業(yè)界的熱門產品。據專家稱，重要的不是數據，而是公司如何處理這些數據。
在各種技術和平臺中，Hadoop最受歡迎，盡管它可能有其缺點。它是一個開源的開發(fā)平臺，它是用C、C++、java編寫的，幫助組織實時分析大量的數據。

實時大數據技術

收集、存儲、移動和分析不是靜態(tài)的活動，而是涉及實時環(huán)境的動態(tài)活動。不斷收集飛機、汽車發(fā)動機、連接到醫(yī)院病人的監(jiān)視器、在線信用卡或借記卡交易的數據，所有這些都需要復雜的算法、程序、大數據體系結構和強大的內存處理能力。
MapR首席執(zhí)行官約翰·施羅德（John Schroeder）表示，他們擁有大數據應用程序，可以保護數百萬美國運通卡持卡人免受欺詐交易，在醫(yī)療保健領域，他們正致力于為癌癥患者提供更好的治療程序。
微軟、甲骨文、SAP、IBM等全球IT巨頭都在云平臺上，也支持大數據技術解決方案

大數據技術與物聯網

網絡和嵌入式技術的快速變化使許多設備能夠相互連接，從而能夠實時發(fā)送數據。一個由“物”而非人和計算機組成的互聯網已經出現。
我們佩戴或使用的每一件設備都能夠終結數據，而這反過來又將在大數據營銷、設計、醫(yī)療保健等領域有廣泛的應用。

數據挖掘

現在，強大的超級計算機被部署來從關系數據庫中挖掘數據，并幫助統(tǒng)計學家和分析師創(chuàng)建模型。幾位創(chuàng)新者已經提出了開發(fā)預測性大數據分析模型的工具，以便企業(yè)更好地做出決策。它們還提供了一個簡單的圖形用戶界面（GUI），非常友好

事業(yè)

自然，大數據技術的革命催生了一批全新的專家，他們與大數據分析和技術的特定領域相關。熱門的技術技能包括Apache Hadoop、Apache Spark、NoSQL、機器學習和數據挖掘、統(tǒng)計和定量分析、SQL、數據可視化、數據科學家、通用編程語言技能。據分析人士稱，由于該領域的快速發(fā)展，未來十年的機會肯定會增加。
《福布斯》雜志在一次年中評估中稱，2015年對大數據技術相關專業(yè)知識的需求確實很大，IBM在6月份的過去12個月里招聘了2307個職位。接受大數據培訓的專業(yè)技術人員的廣告薪酬為104850美元。最受歡迎的技能是VMWare專業(yè)技能、應用程序開發(fā)、開源技術、數據倉庫和Python編程技能。

從行業(yè)角度來看，在利用大數據技術和服務方面，占需求25%的專業(yè)、科學和技術服務是最重要的。在其他領先類別中，信息技術占17%，制造業(yè)占15%，金融和保險占9%，零售占8%

優(yōu)勢

以下是大數據分析的優(yōu)勢。

1）數據的存儲、挖掘和分析
大數據技術使存儲和實時數據能夠部署到各種業(yè)務和任務關鍵型應用程序中

2）市場預測；預測

在前大數據技術時代，公司被迫實時進行有意義的數據分析，或在缺乏技術的情況下進行預測分析。抽樣調查和客戶反饋是策略師創(chuàng)新市場新產品的唯一解決方案。
3） 大量數據是由企業(yè)產生的，在過去幾年中，由于沒有足夠的大數據工具來收集和分析數據，企業(yè)未能使用重要的資產。
4） 在實時大數據業(yè)務環(huán)境中，黑客和數據盜竊會嚴重影響組織的工作、客戶的信心，并使其容易受到后續(xù)攻擊。大數據和Hadoop已經被證明可以幫助組織檢測數據盜竊。數據盜竊方法的發(fā)展速度快于防盜方法或預防活動。

大數據技術是成功的唯一要求嗎

一些批評人士指出，大數據在行業(yè)中的應用存在一些問題，但他們對大數據的炒作并不滿意。一些分析人士質疑，投資回報率（RoI）是否為正，是否值得投入時間和精力來實施。第二個是關于大量的數據和分析，這些數據和分析可能無法解釋發(fā)生這種消費行為的“原因”。
大數據分析可以有效地與傳統(tǒng)的調查方法（厚數據）結合使用，這些方法可以繪制各地區(qū)儲蓄、投資、購買和消費行為的人口統(tǒng)計模式，從而更廣泛地了解市場。對大數據工具持懷疑態(tài)度的人表示，大數據工具可能會給出一幅發(fā)生了什么以及如何發(fā)生的畫面，但只有根據人口統(tǒng)計資料、生活方式偏好、消費習慣等，對特定消費者或地區(qū)進行廣泛了解，才能理解“為什么”會發(fā)生。

大數據技術的主要前景

根據提供大數據解決方案的MapR公司首席執(zhí)行官兼聯合創(chuàng)始人約翰·施羅德（John Schroeder）的說法，他預測了2015年的新興趨勢，其中大多數趨勢似乎是正確的。
從數據集線器到數據湖：具有可擴展基礎設施的數據湖似乎受到青睞，因為它們具有經濟吸引力，每TB的成本更低）。
自助服務：自助服務大數據工具將使開發(fā)者、數據科學家和數據分析師能夠在