ETL este prescurtarea de la extragere, transformare, încărcare. Acesta a fost modelul standard pentru mutarea datelor în depozite timp de decenii. Extragerea extrage datele din sistemele sursă. Transformarea le curăță, le validează și le remodelează în schema țintă. Încărcarea le scrie în depozit. Transformarea are loc înainte de încărcare, pe un server de procesare separat. Depozitul primește date curate și structurate.

Instrumentele ETL au evoluat. ETL-ul timpuriu era codificat manual în SQL și scripturi. Instrumente comerciale precum Informatica și DataStage au adăugat interfețe grafice și programare. Opțiunile open-source precum Apache NiFi și Talend au extins accesul. Modelul rămâne același: extragere, transformare, încărcare. ETL este încă alegerea potrivită atunci când sistemul țintă nu poate gestiona sarcini de lucru de transformare, când volumele de date trebuie reduse înainte de încărcare sau când cerințele de reglementare impun ca datele sensibile să fie transformate înainte de a părăsi un mediu controlat. Este, de asemenea, comun în mediile vechi, unde depozitul este un dispozitiv tradițional cu putere de calcul limitată. Creșterea depozitelor în cloud și a ELT-ului a redus dominația ETL, dar nu a eliminat-o. Multe organizații rulează ambele. ETL pentru sisteme vechi și date sensibile. ELT pentru conducte native în cloud. Modelul nu este învechit. Este o opțiune printre multe altele.

Caracteristicile ETL

• Transformare prima — datele sunt curățate înainte de încărcare
• Procesare separată — transformare pe un server dedicat
• Volum redus — doar datele necesare ajung în depozit
• Consacrată — decenii de instrumente și practici
• Compatibil cu depozitele tradiționale - compatibil cu depozitele tradiționale

ETL este modelul clasic. Încă funcționează. Nu este întotdeauna cea mai bună alegere, dar rareori este greșit.