Aurora MySQL 스냅샷을 Parquet 로 S3 에 Export
2020-04-12
Amazon RDS/Aurora Snapshot 을 S3 에 Apache Parquet 로 Export 하는 기능이 지난 1월에 출시되었습니다. Aurora MySQL 에 대해 직접 실습해보고 내용을 정리해봤습니다.
Fake Nerd
Amazon RDS/Aurora Snapshot 을 S3 에 Apache Parquet 로 Export 하는 기능이 지난 1월에 출시되었습니다. Aurora MySQL 에 대해 직접 실습해보고 내용을 정리해봤습니다.
글또 4기 활동을 하면서는, 운영진 팀 2개 중 운영 자동화 팀의 일원으로도 활동합니다. 글 제출/피드백 여부 확인, 리뷰어 지정 등의 글또 운영 업무를 자동화 하는 genie 프로젝트를 관리하고 개선하는 것이 운영 자동화 팀의 역할입니다. 그 일환으로 주기적으로 Slack API 로 데이터를 받아와서 (글또 활동은 Slack 에서 이뤄짐) 처리하는 작업을 실행해야 합니다.
글또 2기, 3기에 이어 4기에도 참여합니다. 글또 활동의 시작은 역시 다짐글입니다.
이전 글에서 서버 로그 수집에 Fluent Bit 를 도입할 수 있을지 탐색할 계획이라고 얘기하며, EKS 로 클러스터를 띄우고 간단한 Flask 어플리케이션을 배포해봤습니다. 이번에는 Fluent Bit 으로 로그를 수집하는 간단한 데모를 진행하고 관련 내용을 정리해봤습니다.
서버 로그 수집에 Fluent Bit 를 도입할 수 있을지 탐색할 계획입니다. 현재 소속된 팀의 서버 개발자 분들은 Amazon EKS 로 Kubernetes 클러스터를 운영하고 있습니다. 그래서 일단 Kubernetes 에 대해 어느정도 이해가 필요할 것 같아서 직접 써보며 익혀보려고 합니다.