Published on2026년 3월 17일데이터 엔지니어링 & AI 파이프라인: Spark부터 Kafka까지 완전 가이드data-engineeringapache-sparkkafkaairflowdbtdata-pipeline2026-032026-03-17AI를 위한 데이터 엔지니어링 완전 가이드. Apache Spark, Kafka, Airflow, dbt, Delta Lake, 피처 스토어까지 대규모 데이터 파이프라인 설계와 구현을 다룹니다.
Published on2026년 3월 17일Apache Spark 실전 운영 가이드: 성능 튜닝, 셔플, 스큐, AQE, 스트리밍 운영apache-sparkspark-tuningdata-engineeringshuffleadaptive-query-executionstructured-streaming2026-032026-03-17Apache Spark를 프로덕션에서 안정적으로 운영하기 위해 꼭 알아야 할 실행 모델, 셔플과 데이터 스큐, AQE, 캐시 전략, Structured Streaming 운영 체크리스트를 정리합니다.