etl是什麼,ETL是什麼的簡稱

時間 2022-02-14 23:55:08

1樓:

etl,extraction-transformation-loading的縮寫,中文名稱為資料提取、轉換和載入

2樓:豎著走的螃蟹

etl,是英文 extract-transform-load 的縮寫,用來描述將資料從**端經過萃取(extract)、轉置(transform)、載入(load)至目的端的過程。etl一詞較常用在資料倉儲,但其物件並不限於資料倉儲。

finebi工具的etl處理做的不錯,可以試用一下!

3樓:匿名使用者

是指資料抽取-轉換-載入

4樓:

資料探勘的資料抽取,轉換和裝載過程。

5樓:匿名使用者

finebi提供了各種常見的olap分析操作,除2023年之前出現的基本的分組彙總外,還可以進行任意多維度的分析,鑽取分析、排序、過濾等等分析功能。

6樓:派可資料

對於做過 bi 開發的朋友,etl 並不陌生,只要涉及到資料來源的資料抽取、資料的計算和處理過程的開發,都是 etl,etl 就這三個階段,extraction 抽取,transformation 轉換,loading 載入。

從不同資料來源抽取資料 extraction ,按照一定的資料處理規則對資料進行加工和格式轉換 trasformation,最後處理完成的輸出到目標資料表中也有可能是檔案等等,這個就是 loading。

再通俗一點講,etl 的過程就跟大家日常做菜一樣,需要到菜市場的各個攤位買好菜,把菜買回來要摘一下,洗一洗,切一切最後下鍋把菜炒好端到飯桌上。菜市場的各個攤位就是資料來源,做好的菜就是最終的輸出結果,中間的所有過程像摘菜、洗菜、切菜、做菜就是轉換。

在開發的時候,大部分時候會通過 etl 工具去實現,比如常用的像 kettle、pentaho、ibm datastage、infornaica、微軟 sql server 裡面的 ssis 等等,在結合基本的 sql 來實現整個 etl 過程。

也有的是自己通過程式開發,然後控制一些資料處理指令碼跑批,基本上就是程式加 sql 實現。

哪種方式更好,也是需要看使用場景和開發人員對那種方式使用的更加得心應手。我看大部分軟體程式開發人員出身的,碰到資料類專案會比較喜歡用程式控制跑批,這是程式思維的自然延續。純 bi 開發人員大部分自然就選擇成熟的 etl 工具來開發,當然也有一上來就寫程式指令碼的,這類 bi 開發人員的師傅基本上是程式人員轉過來的。

用程式的好處就是適配性強,可擴充套件性強,可以整合或拆解到到任何的程式處理過程中,有的時候使用程式開發效率更高。難就難在對維護人員有一定的技術要求,經驗轉移和可複製性不夠。

用 etl 工具的好處,第一是整個 etl 的開發過程視覺化了,特別是在資料處理流程的分層設計中可以很清晰的管理。第二是連結到不同資料來源的時候,各種資料來源、資料庫的連結協議已經內建了,直接配置就可以,不需要再去寫程式去實現。第三是各種轉換控制元件基本上拖拉拽就可以使用,起到簡化的代替一部分 sql 的開發,不需要寫**去實現。

第四是可以非常靈活的設計各種 etl 排程規則,高度配置化,這個也不需要寫**實現。

所以在大多數通用的專案中,在專案上使用 etl 標準元件開發會比較多一些。

etl 從邏輯上一般可以分為兩層,控制流和資料流,這也是很多 etl 工具設計的理念,不同的 etl 工具可能叫法不同。

控制流就是控制每一個資料流與資料流處理的先後流程,一個控制流可以包含多個資料流。比如在資料倉儲開發過程中,第一層的處理是ods層或者staging 層的開發,第二層是dimension維度層的開發,後面幾層就是dw 事實層、dm資料集市層的開發。通過etl的排程管理就可以讓這幾層串聯起來形成一個完整的資料處理流程。

資料流就是具體的從源資料到目標資料表的資料轉換過程,所以也有 etl 工具把資料流叫做轉換。在資料流的開發設計過程中主要就是三個環節,目標資料表的連結,這兩個直接通過 etl 控制元件配置就可以了。中間轉換的環節,這個時候就可能有很多的選擇了,調 sql 語句、儲存過程,或者還是使用 etl 控制元件來實現。

有的專案上習慣使用 etl 控制元件來實現資料流中的轉換,也有的專案要求不使用標準的轉換元件使用儲存過程來呼叫。也有的是因為資料倉儲本身這個資料庫不支援儲存過程就只能通過標準的sql來實現。

我們通常講的bi資料架構師其實指的就是etl的架構設計,這是整個bi專案中非常核心的一層技術實現,資料處理、資料清洗和建模都是在etl中去實現。一個好的etl架構設計可以同時支撐上百個包就是控制流,每一個控制流下可能又有上百個資料流的處理過程。之前寫過一篇技術文章,大家可以搜尋下關鍵字 biwork etl 應該在網上還能找到到這篇文章。

這種框架設計不僅僅是etl框架架構上的設計,還有很深的etl專案管理和規範性控制器思想,包括後期的運維,基於bi的bi分析,etl的效能調優都會在這些框架中得到體現。因為大的bi專案可能同時需要幾十人來開發etl,框架的頂層設計就很重要。

什麼是「etl」?

7樓:

etl(資料倉儲技術)

etl,是英文 extract-transform-load 的縮寫,用來描述將資料從**端經過抽取(extract)、轉換(transform)、載入(load)至目的端的過程。etl一詞較常用在資料倉儲,但其物件並不限於資料倉儲。

etl是構建資料倉儲的重要一環,使用者從資料來源抽取出所需的資料,經過資料清洗,最終按照預先定義好的資料倉儲模型,將資料載入到資料倉儲中去。

參考資料

8樓:派可資料

etl,是英文extract-transform-load的縮寫,用來描述將資料從**端經過抽取(extract)、轉換(transform)、載入(load)至目的端的過程。etl一詞較常用在資料倉儲,但其物件並不限於資料倉儲。

資料倉儲是為企業所有級別的決策制定過程,提供所有型別資料支援的戰略集合。它是單個資料儲存,出於分析性報告和決策支援目的而建立。 為需要業務智慧的企業,提供指導業務流程改進、監視時間、成本、質量以及控制。

etl是將業務系統的資料經過抽取、清洗轉換之後載入到資料倉儲的過程,目的是將企業中的分散、零亂、標準不統一的資料整合到一起,為企業的決策提供分析依據, etl是bi(商業智慧)專案重要的一個環節。

etl是什麼的簡稱

9樓:水劃過

etl是資料倉儲技術的簡稱。

etl常用於工程認證。etl是北美最具活力的安全認證標誌,它可以追溯到2023年托馬斯愛迪生建立的電氣測試實驗室。它在北美廣受歡迎和認可。

etl標誌是天祥集團的獨家標誌,天祥集團是世界領先的質量安全組織。獲得etl標誌的產品代表符合北美強制性標準,能夠順利進入北美市場銷售。

凡有etl檢測標誌的機電產品,均表明其經檢測符合相關行業標準。每個行業都有不同的測試標準,因此對特定產品的要求必須諮詢專業人士。etl檢測標誌廣泛應用於電纜產品中,表明其已通過相關檢測。

10樓:安徽新華電腦專修學院

etl是資料抽取(extract)、清洗(cleaning)、轉換(transform)、裝載(load)的過程。是構建資料倉儲的重要一環,使用者從資料來源抽取出所需的資料,經過資料清洗,最終按照預先定義好的資料倉儲模型,將資料載入到資料倉儲中去。

11樓:匿名使用者

etl,extraction-transformation-loading的縮寫,中文名稱為資料提取、轉換和載入。 etl工具有:owb(oracle warehouse builder)、odi(oracle data integrator)、informatic powercenter、aicloudetl、datastage、repository explorer、beeload、kettle、dataspider

etl是什麼

12樓:匿名使用者

etl認證的話,就是指產品的安全認證,北美包括美國和加拿大的

13樓:匿名使用者

資料抽取、轉換、載入的過程

就是將資料有一種形式轉換為另一種形式

14樓:派可資料

etl,是英文extract-transform-load的縮寫,用來描述將資料從**端經過抽取(extract)、轉換(transform)、載入(load)至目的端的過程。etl一詞較常用在資料倉儲,但其物件並不限於資料倉儲。

資料倉儲是為企業所有級別的決策制定過程,提供所有型別資料支援的戰略集合。它是單個資料儲存,出於分析性報告和決策支援目的而建立。 為需要業務智慧的企業,提供指導業務流程改進、監視時間、成本、質量以及控制。

etl是將業務系統的資料經過抽取、清洗轉換之後載入到資料倉儲的過程,目的是將企業中的分散、零亂、標準不統一的資料整合到一起,為企業的決策提供分析依據, etl是bi(商業智慧)專案重要的一個環節。

etl是什麼意思

15樓:大野瘦子

etl是指獲取原始大資料流,然後對其進行解析,併產生可用輸出資料集的過程。

從資料來源中提取(e)資料,然後經過各種聚合、函式、組合等轉換(t),使其變為可用資料。最終,資料會被載入(l)到對它進行具體分析的環境中,這就是etl流程。

全寫是 extract-transform-load。

1、e:extract資料抽取

2、t:transform轉換

3、l:load裝載

16樓:派可資料

etl,是英文extract-transform-load的縮寫,用來描述將資料從**端經過抽取(extract)、轉換(transform)、載入(load)至目的端的過程。etl一詞較常用在資料倉儲,但其物件並不限於資料倉儲。

資料倉儲是為企業所有級別的決策制定過程,提供所有型別資料支援的戰略集合。它是單個資料儲存,出於分析性報告和決策支援目的而建立。 為需要業務智慧的企業,提供指導業務流程改進、監視時間、成本、質量以及控制。

etl是將業務系統的資料經過抽取、清洗轉換之後載入到資料倉儲的過程,目的是將企業中的分散、零亂、標準不統一的資料整合到一起,為企業的決策提供分析依據, etl是bi(商業智慧)專案重要的一個環節。

etl是什么,etl是什麼

推薦一款比較好的etl bi的解決方案,finebi!etl extract transform load的縮寫,即資料抽取 轉換 裝載的過程 作為bi dw business intelligence 的核心和靈魂,能夠按照統一的規則整合並提高資料的價值,是負責完成資料從資料來源向目標資料倉儲轉化...

pos是什麼的簡稱,POS是什麼的簡稱?

袖底風 什麼是pos?所謂pos是英文point of sales的簡稱,中文我們稱為 時點銷售情報系統 利用前臺的收銀裝置及前臺收銀系統,將每一筆銷售的商品資料詳細記錄下來並傳輸到後臺,經過資料轉換後可供後臺系統做各項的銷售分析。什麼叫pos pos 介面介紹 1.sonet sdh sonet ...

isp是什麼的簡稱啊,ISP是什麼的簡稱啊

天磊諮詢服務號 isp網際網路接入服務業務,是指利用接入伺服器和相應的軟硬體資源建立業務節點,並利用公用通訊基礎設施將業務節點與網際網路骨幹網相連線,為各類使用者提供接入網際網路的服務,使用者可以利用公用通訊網或其他接入手段連線到其他業務節點,並通過該節點接入網際網路。申請isp許可證有哪些相關要求...