일반적으로 데이터를 가공하는 시점인 DW를 진행하기 전에 우리는 ETL 작업을 한다. 하지만 요즘 추세가 ELT로 바뀌고 있다. 개발을 진행하기 앞서, 요구사항 등을 협의 할 때 어떤 방식의 작업이 개발할 때 적합할지 파악해야 한다. ETL/ELT는 세가지 단계를 포함한다. (ELT와 순서만 다르고 개념은 같으므로, 모든 설명은 ETL 순서에 맞게 진행하겠다.) E: Extract 추출 - 원본 데이터베이스 또는 데이터 소스에서 데이터를 가져오는 것을 말한다. ETL을 사용하면 데이터가 임시 스테이징 영역으로 들어가고, ELT를 사용하면 즉시 데이터가 Lake 스토리지 시스템으로 이동한다. T: Transform 가공/변환 - 데이터의 구조를 변경하는 프로세스를 의미한다. 용도에 맞는 필터링, Resah..
