박상원 깃헙블로그
홈
카테고리
About
아카이브
태그
검색
잘했어요! 총 54개의 포스트 포스트를 마저 작성하세요
2024
[spark] Skew Join 적용하기
11-23
Airflow Operator Init
06-25
2023
[AWS] MSK Consumer 띄우기
05-21
[Airflow] Airflow의 하루(Airflow DAG 시간 지정하기)
04-02
[Airflow] 큰 DAG 분리하기 1. 코드 분리
02-22
2022
[sql] Like 연산자 알아보기
12-19
[Airflow] Airflow on Kubernetes - 1. Minikube
11-21
[Airflow] MWAA Stuck in queue
10-25
[Airflow] Executor Deep Dive 2-2. CeleryExecutor 2
05-29
[Airflow] Executor Deep Dive 2. CeleryExecutor
05-01
2022
[Airflow] Airflow 컨트리뷰터가 되었습니다!
04-05
[Airflow] Executor Deep Dive 1-2. LocalExecutor.LimitedParallelism
03-26
[Kafka] 2. 카프카 기본 개념과 구조
03-21
[kafka] 1 카프카 개요
03-11
[Airflow] Executor Deep Dive 1-1. LocalExecutor.UnLimitedParallelism
03-01
[Airflow] Executor Deep Dive 1. LocalExecutor
02-23
[Data Enginnering] ETL의 데이터 소스가 RDB일 때, 멱등성은?
01-16
2021
[Airflow] 코드 리팩토링 2. TaskFactory
12-24
[Airflow] 코드 리팩토링 1. DAGFactory
12-11
[AWS] MWAA 사용기
09-27
2021
[AWS] Kinesis 도입기 2. Lambda, Glue
08-19
[AWS] Kinesis 도입기 1. Data Stream과 Firehose
08-03
[daily] 책 리뷰 - 프로그래머를 위한 파이썬
07-20
[spark] spark sql
05-19
[spark] Docker Ubuntu 컨테이너로 Spark 실습환경 만들기 3. spark application 실행
05-14
[spark] Docker Ubuntu 컨테이너로 Spark 실습환경 만들기 2. master - worker 환경 구성
05-09
[spark] Docker Ubuntu 컨테이너로 Spark 실습환경 만들기 1. 컨테이너 준비
05-08
[airflow] Airflow - PythonOperator에서 execution_date 사용하기
05-01
[AWS] glue에서 내 프로젝트 import하기
04-02
[Spark] reduce / fold
03-16
2021
[airflow] airflow - depends_on_past / wait_for_downstream
03-13
[airflow] airflow 사용기 2. docker/airflow 설정 파일
03-06
[airflow] airflow 사용기 1. 소개
03-06
[Spark] map, flatMap
02-25
[카카오] 2021 블라인드 공채 - 순위 검색
02-02
[Spark] Window function in Pyspark
01-29
서른 즈음에
01-26
[Python] 함수에서 다른 함수 변수 접근하기(c 포인터처럼 사용해보기)
01-21
[Pandas] DataFrame iterate 7가지 방법 비교
01-12
[Spark] Execution Plan: Stage, Task
01-08
2021
[Spark] Execution Plan: Job
01-07
2020
[AWS] Lake Formation Error Case
12-23
[AWS] Lake Formation Blueprint 설정
12-23
[AWS] Glue Use Case
12-13
[AWS] Glue Job
12-10
[AWS] Glue Crawler
12-09
[Python] 리스트에서 메모리 할당에 대한 생각
12-05
[AWS] Glue 사용 사전조사
12-05
[Data Engineering] ETL
12-03
[Python] Mutable / Immutable
11-29
2020
[코딩 테스트] 2020 카카오 인턴십 동굴탐험
11-29
[Python] Python의 자료형과 크기
11-29
[자료구조] queue 구현
11-28
컴퓨터는 왜 2진수를 사용할까
11-27