SQL에서 User-Defined Variable 사용하기

SQL에서 User Defined Variable 다루는 법을 알아본다. SQL 문제를 풀다보면 쿼리가 매우 길어지는 경우가 있다. Use...

# SQL PostgreSQL MySQL variable

Airflow의 시간정보에 대한 정리

Airflow의 시간정보에 대한 정리해본다. Airflow는 UTC TIMEZONE으로 처리 Airflow는 aware datetime ...

# DataOps Airflow TIMEZONE

Airflow 보안 설정하기 (with RBAC)

FAB가 제공하는 기능을 통해 Airflow에 기본 보안을 설정한다. 1.10.3 기준 Airflow를 설치할 경우, 기본적으로 보안 ...

# DataOps Airflow RBAC FERNET_KEY

소소하게 2019 블로그 결산

소소하게 2019년 블로그 운영 결산을 해본다. 개요 포트폴리오를 만들겠다는 이유로 시작하여, 2017년 11월 블로그에 처음 글을 업로...

# Note

MySQL과 PostgreSQL Query 차이점 정리

MySQL과 PostgreSQL Query의 차이점을 정리해본다. (상시 업데이트) 참고 : 전문적인 내용보다는 참고 용도로 정리하고 있다...

# SQL MySQL PostgreSQL

Pyspark에서 AWS S3 데이터 읽기

Pyspark에서 AWS S3 데이터 읽는 법을 알아본다. Spark에서 S3 데이터를 읽는 방법 설명 Spark는 Hadoop File...

# ETL Pyspark AWS S3