끄적이는 보송

오늘은 깊게 분석할 것 없이 아래의 간단한 실습을 해볼 생각이다. 1. CloudTrail 생성 및 로그가 S3에 쌓이도록 구성 2. S3에 쌓인 로그 파일을 Athena로 분석하기 굳이 CloudTrail 로그를 S3에 올리는 이유는 CloudTrail의 최대 로그 보존 기간이 90일이기 때문이다. 그 이전의 데이터는 유지하지 않기에 간혹 과거의 데이터를 조회하지 못해 난감한 경우가 있었다. (누가 어떤 작업을 했는지, CreateInstance 로그 등등) 또한 로그 파일이 쌓이다 보면 일일이 수많은 파일을 열어 확인해야 하는 번거로움이 있는데 이를 Athena를 활용해 쿼리를 날려 내가 원하는 데이터를 추릴 수 있다. 오늘은 이 실습을 해보려 한다. 1. CloudTrail 생성 및 로그가 S3에 ..

AWS Athena 란 AWS Athena 서비스는 표준 SQL을 이용해 S3 Bucket 저장된 데이터를 직접 분석할 수 있는 대화식 서버리스 쿼리 서비스이다. Athena 서비스 자체만 보면 별도의 추가 인프라는 필요 없으며 실행한 쿼리당 과금이 발생한다. 원한다면 실행된 쿼리의 결과 창을 csv파일로 저장할 수도 있다. 요금은 작성일 기준으로 TB당 $5.00라고 한다. (https://aws.amazon.com/ko/athena/pricing/?nc=sn&loc=3) 준비물 1. Athena (별도의 준비 필요 없음) 2. S3 Bucket (테스트 데이터 저장용) 3. 테스트 CSV 파일 (테스트 데이터 파일은 하기와 같이 임의로 작성했다. 큰 의미는 없다.) 실습 준비물은 위와 같고, 실습 순..