용어정리

CDC, ETL, ELT 간단 용어 정리

용어에 대해 정리한 글입니다. 향후 CDC에 대해 자세하게 정리할 것입니다. ETLExtract(추출), Transform(변경), Load(적재)를 뜻하며원천데이터에서 필요한 부분을 Extract 추출하여, Transform(클렌징,형식변환,표준화,통합 등)의 비즈니스룰을 적용한후, 특정 시스템에 Load(적재)하는 방식이다.주로 배치성으로 작업을 하며, 솔루션으로는 개인적으로 아는것은 AWS Glue, Spring Batch로 처리하는 방법이 존재합니다.  하둡의 등장으로 쌓아둘수있어서 쌓아두는걸 먼저하자 ELT하둡의 등장으로 쌓아둘수 있어서 쌓아두는걸 먼저하는 경우가 생겼다고 한다.ELT란 데이터를 먼저 추출 적재한 이후 변환을 하는 프로세스를 의미한다. ELT에서는 데이터 웨어하우스에서 데이터 변..