Data-Engineering
Kimball DW/BI Lifecycle (feat. 킴벌 데이터 웨어하우스 툴킷)
Jun 8, 2025
Kimball DW/BI Lifecycle
Kimball DW/BI Lifecycle
Accumulating Snapshot Fact Table과 Factless Fact Table의 활용 + 교육 기관, 특히 대학에서 발생하는 다양한 데이터를 어떻게 모델링할 수 있는지를 설명
Surrogate Key 개념부터, dbt에서 Surrogate Key 생성 전략에 대해 정리하였습니다.
CKA 시험 후기
EKS - IAM Role과 Kubernetes ServiceAccount를 연결하는 과정 (+IRSA)
Datahub가 메타 데이터를 저장하는 방식 (ElasticSearch, MetaDB)
Airflow worker node dns resolution 문제 (Airflow Worker 로그 접근 문제 해결방법)
Airflow DagFile Processing error 해결 및 파싱 안정화 (DagBag import timeout, EFS를 얹은)
EKS - External Secrets Operator를 활용한 AWS Secret manager 연동