資料分析師如何選擇合適的資料分析工具

時間 2021-10-14 23:25:31

1樓:袋鼠雲

其實題主需要搞清楚以下幾個問題,搞清楚了,其實問題的答案也就有了:

1、是從個人學習成長的角度想搭建平臺自學?還是現在的公司需要大資料技術進行分析?——如果是從個人學習成長的角度,建議直接按照hadoop或者spark的官網教程安裝即可,建議看官網(英文),在大資料技術領域,英語的掌握是非常重要的,因為涉及到元件選型、日後的安裝、部署、運維,所有的任務執行資訊、報錯資訊都是英文的,包括遇到問題的解答,所以還是非常重要的。

如果是公司需要進行大資料分析,那麼還要研究以下幾個問題:為什麼需要搭建大資料分析平臺?要解決什麼業務問題?

需要什麼樣的分析?資料量有多少?是否有實時分析的需求?

是否有bi報表的需求?——這裡舉一個典型的場景:公司之前採用oracle或mysql搭建的業務資料庫,而且有簡單的資料分析,或者可能採購了bi系統,就是直接用業務系統資料庫進行支援的,現在隨著資料量越來越大,那麼就需要採用大資料技術進行擴容。

搞清楚需求之後,按照以下的步驟進行:

1、整體方案設計;整體方案設計時需要考慮的因素:資料量有多少:幾百gb?

幾十tb?資料儲存在**:儲存在mysql中?

oracle中?或其他資料庫中?資料如何從現在的儲存系統進入到大資料平臺中?

如何將結果資料寫出到其他儲存系統中?分析主題是什麼:只有幾個簡單指標?

還是說有很多統計指標,需要專門的人員去梳理,分組,並進行產品設計;是否需要搭建整體數倉?是否需要bi報表:業務人員有無操作bi的能力,或團隊組成比較簡單,不需要前後端人員投入,使用bi比較方便;是否需要實時計算?

2、元件選型;架構設計完成後就需要元件選型了,這時候最好是比較資深的架構師參與設計,選型包括:離線計算引擎:hadoop、spark、tez……實時計算引擎:

storm、flink、samza、spark

streaming……bi軟體:tableau、qlikview、帆軟……

3、安裝部署;選型完成後,就可以進行安裝部署了,這部分其實是最簡單的,直接按照每個元件的部署要求安裝即可。

4、另一種選擇:採用商用軟體如果是企業需要搭建大資料平臺,那麼還有一種選擇是直接採用商用的資料平臺。市面上有很多成熟的商用大資料平臺,cloudera、星環、華為、亞信等等,都有對應的產品線,像我們袋鼠雲就有一款非常優秀的大資料平臺產品:

數棧。主要有以下幾個特點:

1.一站式。一站式資料開發產品體系,滿足企業建設資料中臺過程中的多樣複雜需求。

2.相容性強。支援對接多種計算引擎,使更多企業「半路上車」。

3.開箱即用。基於web的圖形化操作介面,開箱即用,快速上手。

4.價效比高。滿足中小企業資料中臺建設需求,降低企業投入成本。

可以瞭解下。

2樓:

個人推薦你使用觀向資料,是很不錯的一款電商資料採集軟體,這款軟體可以快速部署,並且可以採集到全網多平臺、多維度資料,根據商品類目等要求,形成視覺化報表,希望能幫到你。

企業資料分析工具怎麼選?

3樓:匿名使用者

對於企業來說,大資料應用的價值在於面對海量的各種**的資料,如何對這些零散的資料進行有效的分析,得到有價值的資訊。首先要明確業務需求場景以及使用者的需求。其次想要從大資料平臺中得到哪些有價值的資訊,需要接入的資訊有哪些。

最後選擇的大資料平臺是否能全方位滿足企業的需求。

億信華辰一站式資料分析平臺億信abi融合了資料來源適配、etl資料處理、資料建模、資料分析、資料填報、工作流、門戶、移動應用等核心功能。其中資料分析模組支援報表分析、敏捷看板、即席報告、幻燈片、酷屏、資料填報、資料探勘等多種分析手段對資料進行分析、展現、應用。

4樓:rock奶爸

現在這方面的軟體工具很多,大概分為收費和開源軟體兩大類.收費的如tablau和powerbi都是很流行的,開源的也有不少。但是開源的需要企業自身有強大的技術團隊

5樓:匿名使用者

資料程式設計工具有python、r、sas等,目前用得多的是python,如果有語言基礎的小夥伴上手很快,語法、函式、物件導向這些都比較簡單,沒有基礎的小夥伴也可以自學,不是很難。

大資料技術:這個相對來說有些難度,不過有專業的工具讓我們用,比如第四正規化的產品和阿里雲的機器學習pan都是可以直接出結果的工具;

分析&ai:這部分先了解資料分析的基本流程和分析手法;上面的如果都學了,可以到阿里雲大學上面去做幾個資料分析方面的案例,增加對資料分析的流程理解和相關技術應用,但是要注意的是阿里案例都是用阿里的工具來實現的,比較簡單,建議大家自己程式設計實現,也可以到九道門商業資料分析實訓中心上去看一些案例,自己做做訓練。

資料分析師的面授課可以不上嗎,CDA資料分析師考試必須要參加培訓課,然後才能參加考試嗎?

要上的,而且你交了費用不去學習豈不是很虧哦,資料分析師的本來就是要多學習的,而且面授的課程一開始學的是基礎的內容的,你需要打好基礎的啊是吧,所以在能去上課的情況下還是去上課的好,我考的時候我是每節課都有去上課的。我建議是可以直接的諮詢他們的授課老師或者是班主任老師,要是考試培訓要求的話,那就是要上課...

如何快速成為資料分析師 看這裡

入行資料分析師,不外乎兩種方式 自學和報班。這兩種方式各有利弊,但是你說的快速入行這個要因人而異,你說的快是多快?一個月?還是一年?資料分析師作為一個高薪的工作,想學幾天學點工具就入行肯定是不太可能的,這兩種學習方法的利弊我也總結了一下,你可以看看。自學。自學的話,學習時間比較自由 不用受到任何約束...

資料分析師,資料探勘師,大資料工程師,三者的工作有何區別

大資料是網際網路上海量的資料探勘,而資料探勘更多的是針對企業內部的小資料探勘,資料分析是進行有針對性的分析和診斷,大資料需要分析的是趨勢和發展趨勢,資料探勘主要是發現問題和診斷。資料分析更多采用統計學的知識,對原資料進行描述性和探索性分析,從結果中發現價值資訊來評估和修正現狀。資料探勘不僅僅用到統計...