數(shù)據(jù)的操作語(yǔ)言是SQL，因此很多工具的開(kāi)發(fā)目標(biāo)自然就是能夠在Hadoop上使用SQL。這些工具有些只是在MapReduce之上做了簡(jiǎn)單的包裝，有些則是在HDFS之上實(shí)現(xiàn)了完整的數(shù)據(jù)倉(cāng)庫(kù)，而有些則介于這兩者之間。這樣的工具有很多，來(lái)自于Shoutlet的軟件開(kāi)發(fā)工程師Matthew Rathbone最近發(fā)表了一篇文章，他列舉了一些常用的工具并對(duì)各個(gè)工具的應(yīng)用場(chǎng)景和未來(lái)進(jìn)行了分析。Apache Hiv…

集成策略 ? ? ? ? 數(shù)據(jù)集成是指將來(lái)源于不同系統(tǒng)的數(shù)據(jù)組合在一起，供業(yè)務(wù)用戶研究不同的行業(yè)行為及客戶行為的數(shù)據(jù)處理方式。在數(shù)據(jù)集成應(yīng)用早期，數(shù)據(jù)僅限于交易系統(tǒng)及其應(yīng)用。業(yè)務(wù)決策的制定以決策平臺(tái)為指導(dǎo)，而有限的數(shù)據(jù)集提供了創(chuàng)建決策平臺(tái)的基礎(chǔ)。 數(shù)據(jù)容量與數(shù)據(jù)類(lèi)型在過(guò)去三十年里大幅增長(zhǎng)，數(shù)據(jù)倉(cāng)庫(kù)技術(shù)從無(wú)到有，基礎(chǔ)架構(gòu)和技術(shù)的發(fā)展?jié)M足了分析和數(shù)據(jù)存儲(chǔ)需求。這一切徹底改變了數(shù)據(jù)集成的前景。 傳統(tǒng)數(shù)據(jù)…

對(duì)數(shù)據(jù)可視化的需求正急劇增長(zhǎng)。一部分原因是更多的公司正在尋求通過(guò)對(duì)大數(shù)據(jù)分析來(lái)獲得可視化的業(yè)務(wù)洞察力。 ? ? ? ? 大數(shù)據(jù)的可視化個(gè)人認(rèn)為還是以儀表盤(pán)為展現(xiàn)的最終載體，當(dāng)然儀表盤(pán)會(huì)包含移動(dòng)端、云端和企業(yè)端。那么，儀表盤(pán)中的內(nèi)容應(yīng)該包含哪些？ ? ? ? ? 1、單純的數(shù)字展示 ? ? ? ? 大數(shù)據(jù)的最終分析結(jié)果，其中有一種是對(duì)關(guān)鍵指標(biāo)的計(jì)算結(jié)果，如：市場(chǎng)模糊占有率，總體情感指數(shù)，用戶粘度系數(shù)…

我是IT從業(yè)者，俗稱(chēng)“程序猿”，而且大學(xué)學(xué)計(jì)算機(jī)專(zhuān)業(yè)也是自己尋死覓活一定要讀的專(zhuān)業(yè)，可以說(shuō)從一開(kāi)始就是我自己的選擇，機(jī)緣巧合之下一直從事數(shù)據(jù)技術(shù)相關(guān)的工作，尤其是這幾年大數(shù)據(jù)技術(shù)、概念、名詞風(fēng)起云涌后，我作為站在風(fēng)口的豬，雖然沒(méi)有被吹上天，不過(guò)也僥幸的一直活下來(lái)了。 然而，個(gè)人認(rèn)為最近幾年大數(shù)據(jù)概念幾乎充斥了所有領(lǐng)域，就像當(dāng)年的云計(jì)算一樣一樣的，真正落地的反而沒(méi)多少。 從技術(shù)上來(lái)說(shuō)，過(guò)往做互聯(lián)網(wǎng)信…