dbt를 활용한 분석 엔지니어링: 데이터 모델 구축, 테스트 및 문서화

현대 데이터 팀은 중요한 비즈니스 결정을 내리기 위해 깨끗하고 안정적이며 잘 문서화된 데이터 세트가 필요합니다. 이 텍스트 기반 과정은 웨어하우스의 원시 데이터를 프로덕션 준비가 된 분석 테이블로 변환하는 업계 표준인 dbt를 소개합니다. 서면 설명, 구조화된 SQL 코드 예제 및 실습을 통해 수동적이고 분리된 쿼리 작성을 확장 가능하고 자동화된 데이터 파이프라인 구축으로 전환할 것입니다. 모듈식 데이터 모델링, 버전 관리 및 자동화된 데이터 품질 테스트를 포함한 분석 엔지니어링의 기본 사항을 마스터하게 됩니다. 학습 내용: - 분석 엔지니어링의 기본 개념과 dbt 워크플로우 이해 - dbt 프로젝트 구성 및 최신 데이터 웨어하우스에 연결 - SQL, ref 함수 및 Jinja 템플릿을 사용하여 모듈식 데이터 모델 구축 - 데이터 품질을 검증하고 파이프라인 안정성을 보장하기 위해 자동화된 테스트 적용 - 데이터 모델에 대한 대화형 문서 생성 및 게시 - Git을 사용하여 파이프라인 변경 사항을 안전하게 관리하고 추적하기 위한 버전 관리 구성 핵심 용어 및 데이터베이스 개념을 마스터한 후 첫 dbt 환경을 설정하게 됩니다. 거기서부터 모듈식 SQL 모델 구축, 데이터 테스트 작성 및 파이프라인 단계별 문서화를 진행하게 됩니다. 이 과정은 SQL에 대한 기본적인 이해가 있는 초보자, 데이터 분석가 및 지망하는 데이터 엔지니어를 위해 설계되었습니다. dbt 또는 데이터 파이프라인 도구에 대한 사전 경험은 필요하지 않습니다. 오늘부터 읽기를 시작하여 안정적이고 프로덕션 등급의 데이터 파이프라인을 자신 있게 구축하세요.