[Python] datetime 모듈, time, datetime,timedelta,timezone class 그리고 time 모듈, pendulum 모듈 다루기 예제
1. datetime 모듈 파이썬 내장모듈인 datetime은 날짜, 시간과 관련된 유용한 메소드를 지원 자주 사용하는 class는 datetime, date, time, timedelta, timezone 2. datetime class datetime 모듈의 datetime class을 불러오는 일반적인 방법 1 #아래와 같이 모듈을 import할 경우 from datetime import datetime #다음과 같이 호출 print(datetime(2022, 3, 3)) datetime 모듈의 datetime class을 불러오는 일반적인 방법 2 #datetime 모듈은 파이썬 내장모듈이기 때문에 바로 import해와도 된다. import datetime #다음과 같이 호출 print(datet..
2022. 3. 3.
[Project] ETL Daily batch project(공공데이터 코로나 API, Python, PySpark, Airflow, AWS) 5. aws cli configure, airflow dag 구성 및 S3로 데이터 보내기, ec2 자동으로 종료하기
이번 포스트에는 airflow dag를 구성하여 pyspark job을 실행시킨 후, S3에 데이터를 복사해 넣고 EC2를 자동으로 종료하겠습니다. 어떤 프로젝트인지 잘 모르시는 분은 아래의 링크를 참고해주세요. 2022.02.17 - [BigData/Project] - [Project] ETL Daily batch project(공공데이터 코로나 API, Python, PySpark, Airflow, AWS) 1. 프로젝트 개요 EC2에 환경 구성이 되지 않으신 분은 아래의 링크를 참고해주세요 2022.02.17 - [BigData/Project] - [Project] ETL Daily batch project(공공데이터 코로나 API, Python, PySpark, Airflow, AWS) 4. EC..
2022. 2. 17.