我是IT從業(yè)者，俗稱“程序猿”，而且大學(xué)學(xué)計(jì)算機(jī)專業(yè)也是自己尋死覓活一定要讀的專業(yè)，可以說(shuō)從一開(kāi)始就是我自己的選擇，機(jī)緣巧合之下一直從事數(shù)據(jù)技術(shù)相關(guān)的工作，尤其是這幾年大數(shù)據(jù)技術(shù)、概念、名詞風(fēng)起云涌后，我作為站在風(fēng)口的豬，雖然沒(méi)有被吹上天，不過(guò)也僥幸的一直活下來(lái)了。 然而，個(gè)人認(rèn)為最近幾年大數(shù)據(jù)概念幾乎充斥了所有領(lǐng)域，就像當(dāng)年的云計(jì)算一樣一樣的，真正落地的反而沒(méi)多少。 從技術(shù)上來(lái)說(shuō)，過(guò)往做互聯(lián)網(wǎng)信…

數(shù)據(jù)的操作語(yǔ)言是SQL，因此很多工具的開(kāi)發(fā)目標(biāo)自然就是能夠在Hadoop上使用SQL。這些工具有些只是在MapReduce之上做了簡(jiǎn)單的包裝，有些則是在HDFS之上實(shí)現(xiàn)了完整的數(shù)據(jù)倉(cāng)庫(kù)，而有些則介于這兩者之間。這樣的工具有很多，來(lái)自于Shoutlet的軟件開(kāi)發(fā)工程師Matthew Rathbone最近發(fā)表了一篇文章，他列舉了一些常用的工具并對(duì)各個(gè)工具的應(yīng)用場(chǎng)景和未來(lái)進(jìn)行了分析。Apache Hiv…

原文作者：曹格 ??http://blog.sina.com.cn/caojiangppt 在傳遞信息時(shí)，有數(shù)據(jù)比沒(méi)數(shù)據(jù)更有說(shuō)服力，而一旦有了數(shù)據(jù)，那就牽涉到如何呈現(xiàn)。PowerPoint為我們提供了諸多圖表，它們?cè)谝欢ǔ潭壬弦呀?jīng)可以滿足我們平時(shí)需求。當(dāng)然，若能夠有更加簡(jiǎn)潔清晰的選擇（并且又不會(huì)增加太多的負(fù)擔(dān)），我們又何樂(lè)而不為。 （一）單一數(shù)據(jù)的表示 有些時(shí)候（演講類居多），我們只用提供一個(gè)最重…

2014年，我們會(huì)聽(tīng)到關(guān)于可視化數(shù)據(jù)、云計(jì)算和移動(dòng)應(yīng)用的更高呼聲，人們對(duì)這些技術(shù)的熱情會(huì)超過(guò)2013年。而大數(shù)據(jù)領(lǐng)域，還將獲得持續(xù)關(guān)注，但用戶考慮更多的是切合業(yè)務(wù)需求的落地方法。簡(jiǎn)言之，云計(jì)算和移動(dòng)技術(shù)將引起2014年的BI二次革命。 可視化數(shù)據(jù)和自助式BI 2013年，可視化數(shù)據(jù)已進(jìn)入了探索征程，專業(yè)供應(yīng)商在畫(huà)面場(chǎng)景、QlikView、TIBCO Spotfire平臺(tái)分析等方面的應(yīng)用開(kāi)始增多。諸…

準(zhǔn)備環(huán)境 192.168.80.10 Master Master.Hadoop192.168.80.11 Slave1 Slave1.Hadoop192.168.80.12 Slave2 Slave2.Hadoop三臺(tái)機(jī)器均為Centos_x64_6.5 Master主節(jié)點(diǎn)配置4G內(nèi)存 另兩臺(tái)Slave配置為2G內(nèi)存由于通過(guò)在線安裝的方式未能安裝成功，轉(zhuǎn)換思路將在本地建yum源的方式來(lái)安裝，個(gè)人覺(jué)…

1. 概述 ODI11G默認(rèn)提供了WebService的調(diào)用接口，供其他各種應(yīng)用程序通過(guò)接口控制、訪問(wèn)ODI自身的同步任務(wù)。 ODI11G在安裝完成，啟動(dòng)代理后，會(huì)自動(dòng)啟動(dòng)webservice的服務(wù)端口，對(duì)外提供WSDL文件服務(wù)，外部應(yīng)用可以通過(guò)WSDL文件利用各種技術(shù)反向生成自身應(yīng)用程序所需要的調(diào)用代碼，本文將以Axis作為WebService容器來(lái)介紹，如何生成代碼并調(diào)用ODI接口。 2.??…

集成策略 ? ? ? ? 數(shù)據(jù)集成是指將來(lái)源于不同系統(tǒng)的數(shù)據(jù)組合在一起，供業(yè)務(wù)用戶研究不同的行業(yè)行為及客戶行為的數(shù)據(jù)處理方式。在數(shù)據(jù)集成應(yīng)用早期，數(shù)據(jù)僅限于交易系統(tǒng)及其應(yīng)用。業(yè)務(wù)決策的制定以決策平臺(tái)為指導(dǎo)，而有限的數(shù)據(jù)集提供了創(chuàng)建決策平臺(tái)的基礎(chǔ)。 數(shù)據(jù)容量與數(shù)據(jù)類型在過(guò)去三十年里大幅增長(zhǎng)，數(shù)據(jù)倉(cāng)庫(kù)技術(shù)從無(wú)到有，基礎(chǔ)架構(gòu)和技術(shù)的發(fā)展?jié)M足了分析和數(shù)據(jù)存儲(chǔ)需求。這一切徹底改變了數(shù)據(jù)集成的前景。 傳統(tǒng)數(shù)據(jù)…

對(duì)數(shù)據(jù)可視化的需求正急劇增長(zhǎng)。一部分原因是更多的公司正在尋求通過(guò)對(duì)大數(shù)據(jù)分析來(lái)獲得可視化的業(yè)務(wù)洞察力。 ? ? ? ? 大數(shù)據(jù)的可視化個(gè)人認(rèn)為還是以儀表盤(pán)為展現(xiàn)的最終載體，當(dāng)然儀表盤(pán)會(huì)包含移動(dòng)端、云端和企業(yè)端。那么，儀表盤(pán)中的內(nèi)容應(yīng)該包含哪些？ ? ? ? ? 1、單純的數(shù)字展示 ? ? ? ? 大數(shù)據(jù)的最終分析結(jié)果，其中有一種是對(duì)關(guān)鍵指標(biāo)的計(jì)算結(jié)果，如：市場(chǎng)模糊占有率，總體情感指數(shù)，用戶粘度系數(shù)…

我是IT從業(yè)者，俗稱“程序猿”，而且大學(xué)學(xué)計(jì)算機(jī)專業(yè)也是自己尋死覓活一定要讀的專業(yè)，可以說(shuō)從一開(kāi)始就是我自己的選擇，機(jī)緣巧合之下一直從事數(shù)據(jù)技術(shù)相關(guān)的工作，尤其是這幾年大數(shù)據(jù)技術(shù)、概念、名詞風(fēng)起云涌后，我作為站在風(fēng)口的豬，雖然沒(méi)有被吹上天，不過(guò)也僥幸的一直活下來(lái)了。 然而，個(gè)人認(rèn)為最近幾年大數(shù)據(jù)概念幾乎充斥了所有領(lǐng)域，就像當(dāng)年的云計(jì)算一樣一樣的，真正落地的反而沒(méi)多少。 從技術(shù)上來(lái)說(shuō)，過(guò)往做互聯(lián)網(wǎng)信…