Data Pipeline on Jay's Bloghttps://jaylab.blog/tags/data-pipeline/Recent content in Data Pipeline on Jay's BlogHugoko-krMon, 14 Sep 2026 00:00:00 +0000테이블이 늘어도 코드는 그대로인 Glue + Iceberg 배치https://jaylab.blog/glue-iceberg-sql-driven-batch/Mon, 14 Sep 2026 00:00:00 +0000https://jaylab.blog/glue-iceberg-sql-driven-batch/서비스 DB를 매일 복사해 집계하는 Glue 배치에서 테이블 추가를 SQL 파일과 설정 몇 줄로 끝내는 구조, 그리고 끝내 고치지 않은 write_mode 버그를 정리했다.Java 라이브러리 대신 kms:Decrypt 권한 하나로 푼 암호문https://jaylab.blog/aws-encryption-sdk-kms-decrypt-glue/Tue, 07 Jul 2026 00:00:00 +0000https://jaylab.blog/aws-encryption-sdk-kms-decrypt-glue/다른 팀이 준 Spring 암호화 라이브러리를 옮기는 대신 표준 ESDK 포맷을 이용해 Glue에서 kms:Decrypt만으로 복호화하고 집계 SQL은 그대로 뒀다.