All Stories

Aws Redshift Env&Architecture

Aws Redshift Env&Architecture

Redshift Architecture Wclub 1Leader Node 3Compute Node Cluster Database Slice 각각 메모리, Disk, Cpu 할당 독립적인 워크로드로 병렬 실행 Leader Node query 실행 및 데이터 분산 처리 담당 Client와 Communicate...

Kimuksung Kimuksung
16 May 2023
Python PEP8

Python PEP8

안녕하세요 오늘은 Python 기본 코드 가이드라인으로 유명한 PEP8에 대해서 알고 있는 바를 공유 드리려고 합니다.

Kimuksung Kimuksung
16 May 2023

AWS EC2 접근 With Bastion

안녕하세요 오늘은 AWS EC2 Service에 접근하기 위한 방법을 알려드리려고 합니다. 일반적으로 EC2 Service는 Private Subnet에 구성되어, 외부에서 접근이 불가능합니다.

Kimuksung Kimuksung
16 May 2023
Airflow Mongodb

Airflow Mongodb

안녕하세요 오늘은 Mongodb와 연동하여 데이터 가져오는 파이프라인 구축 관련해서 이야기 해보려고 합니다.

Kimuksung Kimuksung
15 May 2023
Airflow를 활용하여 S3 Parquet 데이터 Redshift 적재

Airflow를 활용하여 S3 Parquet 데이터 Redshift 적재

안녕하세요 오늘은 S3 Parquet 데이터를 Redshift에 적재하는 방법에 대해 공유드리려고 합니다.

Kimuksung Kimuksung
15 May 2023
Airflow Dag Factory

Airflow Dag Factory

Dag Factory란?

Kimuksung Kimuksung
12 May 2023