About me

안녕하세요 Data Engineer 이병우입니다.

좋은 제품과 데이터 인프라를 구성할 수 있는 Data engineer가 되기 위해 여러 분야(Data, Infrastructure, Backend)의 관심을 가지고 개발을 하고 있습니다.

Contact: bomwo25@gmail.com

Linkedin: https://www.linkedin.com/in/byeongwoo-lee-702b291a4/

Work Experience

Banksalad (2019.10 ~)

이벤트 기반의 분석 환경 구축

구축 목적: 뱅크샐러드 앱에서 발생하는 이벤트들을 third party(ex google analytics, amplitude)를 이용하지 않고 직접 이벤트를 정의하고 분석할 수 있도록 내재화 하고 사내 이벤트 분석환경 구축

사용 기술: Protocol buffer, Python, Airflow, kafka, Spark, Pyspark, S3, Glue,

사내 구성원들의 SQL기반으로 일할 수 있는 Airflow 서비스 구축 및 RBAC 권한 설계

구축 목적: 다양한 직군들이 데이터 파이프라인에 대한 지식이 없이 SQL과 DAG template을 통해 Airflow DAG을 구성하여 주기적으로 파이프라인을 구축 하기위한 사내 Airflow 서버 구축(30 DAG, 1200 task 운영)

사용 기술: Airflow(Kubernetes executor 1.10.13), EFS, S3, EMR, Glue, Pyspark, Python, Github Action, FusionAuth

데이터 AWS 환경 구축

구축 목적: 마이데이터 사업을 진행하기위해 기존 AWS 환경에서 서비스 계정과 분리된 안전한 데이터 분석 환경을 위한 AWS 인프라 구축 및 서비스(AWS,Airflow) 마이그레이션

사용 기술: AWS(EMR, EC2, Privatelink, routetable, Subnet,VPC, routetable, Transit GateWay, MSK), Kubernetes, Airflow, Terraform

눈누 (2018 ~ 2021) 상업적 이용 가능한 무료 한글 폰트 사이트