🔍 AWS Monitoring, Troubleshooting & Audit#

CloudWatch Metrics#

• AWS 모든 서비스에서 지표(Metric) 제공
• Namespace 단위로 지표 그룹화
• Dimension: 지표의 속성 (Instance ID, 환경 등), 지표당 최대 30개 Dimension
• 지표에 Timestamp 포함
• Custom Metrics 생성 가능 (예: RAM 사용률 — 기본 제공 안 됨)

CloudWatch Metric Streams#

• CloudWatch Metrics를 Near real-time으로 대상에 지속 스트리밍
• 대상: Kinesis Data Firehose (→ S3, Redshift 등)
• 3rd party: Datadog, Dynatrace, New Relic, Splunk, Sumo Logic

CloudWatch Logs#

CloudWatch Logs 전송 대상:

• Amazon S3 (Export)
• Kinesis Data Streams
• Kinesis Data Firehose
• AWS Lambda
• OpenSearch

주요 Log Sources:

• SDK, CloudWatch Logs Agent, CloudWatch Unified Agent
• Elastic Beanstalk, ECS, Lambda, VPC Flow Logs, API Gateway, CloudTrail, Route 53

CloudWatch Logs Agent vs. Unified Agent#

Unified Agent 수집 지표: CPU, Disk metrics/IO, RAM, Netstat, Processes, Swap Space → EC2 기본 Out-of-the-box Metrics(Disk, CPU, Network)보다 상세한 수준

CloudWatch Logs Insights#

• CloudWatch Logs에서 SQL 유사 쿼리로 로그 분석
• AWS 서비스 및 JSON 로그에서 필드 자동 검색
• 여러 Log Group, 여러 계정 동시 쿼리 가능
• 쿼리 저장 및 Dashboard 추가 가능
• ⚠️ Query Engine — 실시간 엔진 아님 (과거 데이터만 조회)

CloudWatch Logs S3 Export#

• 로그 데이터를 S3로 내보내기 (API: CreateExportTask)
• 데이터 가용까지 최대 12시간 소요
• Near real-time 또는 실시간 아님 → 실시간이 필요하면 Subscriptions Filter 사용

CloudWatch Logs Subscriptions#

• 실시간 로그 이벤트 처리 및 분석용
• 대상: Kinesis Data Streams, Kinesis Data Firehose, Lambda
• Subscription Filter: 특정 조건의 로그만 대상으로 전달
• Cross-Account Subscription: 다른 계정의 KDS/KDF로 전달 가능

CloudWatch Alarms#

Alarm States:

• OK / INSUFFICIENT_DATA / ALARM

Alarm Targets:

• EC2 Instance: 중지/종료/재부팅/복구
• Auto Scaling Action 트리거
• SNS Topic 알림 → 이를 통해 사실상 모든 것 가능

Composite Alarms:

• 여러 알람 상태를 AND/OR 조건으로 조합
• “알람 노이즈(Alarm Noise)” 감소에 효과적

EC2 Instance Recovery:

• StatusCheckFailed_System Alarm → 복구 실행
• 복구 후: Private/Public/Elastic IP, Metadata, Placement Group 동일 유지

알람 테스트 (CLI):

1
aws cloudwatch set-alarm-state \
2
  --alarm-name "myalarm" \
3
  --state-value ALARM \
4
  --state-reason "testing purposes"

CloudWatch 특화 Insights 서비스#

CloudWatch Network Synthetic Monitor#

• On-premises ↔ AWS 애플리케이션 간 네트워크 성능 문제 감지
• Agent 설치 불필요
• ICMP/TCP 트래픽 테스트 (Direct Connect 또는 Site-to-Site VPN 경유)
• 패킷 손실, 지연, Jitter 측정 → CloudWatch Metrics로 발행

핵심 기능#

Event Bus 유형#

• Event Bus는 Resource-based Policy로 다른 계정에 공유 가능
• 이벤트 아카이브(Archive) + Replay 가능

Schema Registry#

• EventBridge가 Event Bus의 이벤트 스키마를 자동 분석/추론
• 스키마 기반 애플리케이션 코드 자동 생성 (이벤트 구조 사전 파악)
• 스키마 버저닝 지원

EventBridge Resource-based Policy#

• 특정 Event Bus의 권한 관리
• 다른 계정/리전의 이벤트 허용/거부
• Use Case: AWS Organization 전체 이벤트를 단일 계정/리전으로 집계

EventBridge 보안 (Target 별 권한)#

CloudTrail 이벤트 유형#

CloudTrail Insights#

• 비정상 활동 감지:
  • 부정확한 리소스 프로비저닝
  • 서비스 한도 도달
  • IAM 작업 급증
  • 주기적 유지보수 누락
• 정상 Management Event로 Baseline 생성 → Write Event 지속 분석
• 이상 탐지 결과: CloudTrail 콘솔 + S3 이벤트 + EventBridge 이벤트 생성

CloudTrail 이벤트 보존#

• 기본 보존: 90일
• 90일 이상 보존: S3 로그 저장 + Athena 분석 조합

CloudTrail + EventBridge 패턴#

1
[사용자 API 호출]
2
      │
3
      ▼
4
[CloudTrail 기록]
5
      │
6
      ▼
7
[EventBridge 이벤트]
8
      │
9
      ▼
10
[SNS 알림 또는 자동화]

예시:

• DeleteTable (DynamoDB) → CloudTrail → EventBridge → SNS 경보
• AssumeRole (IAM) → CloudTrail → EventBridge → SNS 경보
• AuthorizeSecurityGroupIngress (EC2) → CloudTrail → EventBridge → SNS 경보

Config Rules#

• AWS Managed Rules: 75개 이상 기본 제공
• Custom Rules: Lambda 기반 커스텀 평가 로직
• 트리거: 설정 변경 시 또는 주기적 평가
• ⚠️ Config Rules는 예방(Deny) 기능 없음 — 규정 준수 평가만

가격: Free Tier 없음, 리전당 설정 항목 $0.003, 규칙 평가$0.001

Config 리소스 뷰#

• 특정 리소스의 규정 준수 변화 타임라인
• 특정 리소스의 설정 변경 타임라인
• 특정 리소스 관련 CloudTrail API 호출 타임라인

Config Rules — Remediations (자동 수정)#

• 비준수 리소스를 SSM Automation Document로 자동 수정
• AWS Managed Automation Document 또는 Custom Document (Lambda 호출 가능)
• Remediation Retry 설정 가능 (자동 수정 후에도 비준수 시)

예시:

1
IAM Access Key 만료 (NON_COMPLIANT)
2
    → Auto Remediation: AWSConfigRemediation-RevokeUnusedIAMUserCredentials

Config Rules — Notifications#

• EventBridge: 비준수 리소스 발생 시 트리거 → 자동화
• SNS: 설정 변경 + 규정 준수 상태 알림 (SNS Filtering 또는 클라이언트 측 필터 활용)

ELB 관점에서 세 서비스 역할#