Hajin Note

Data Engineer. 배우고 기록합니다.

Category

Data Engineering

Infra & Architecture

Computer Science

Main

All

Airflow 안정화 프로젝트를 마치며: 알람 지옥에서 벗어나기

데이터팀 인프라 모니터링: CloudWatch에서 Grafana로

Airflow 파이프라인 코드 개선기

ETL에서 자주 발생하는 데이터 문제와 처리 방식

데이터 엔지니어 3개월 온보딩 회고

Flink Hands-on Workshop 후기

Git Hook과 Pylint를 활용한 코드 품질 관리

데이터 엔지니어 이직 준비 과정과 후기

36시간 걸리던 배치를 1시간으로 줄인 방법(Python In-Memory Join)

Clickhouse 데이터 웨어하우스로서의 한계와 단점

MySQL(InnoDB)인덱스 구조와 쿼리 분할 성능 최적화

BigQuery에서 ClickHouse로 이벤트 로그 데이터 분석 환경 개선하기

유저의 액션 이벤트 로그 설계와 개선 과정

데이터베이스 index와 구조

파이썬 가비지 컬렉터

파이썬의 동기와 비동기 처리

Kafka 파이프라인에 따른 DB 부하줄이기 여정

생애 첫 ETL 파이프라인 구축기