2장. 개략적인 규모 추정

• 시스템 용량이나 성능 요구사항을 개략적으로 추정하기 위해서는 규모 확장성을 표현하는 방식을 알아야 함
• 기본적으로 2의 제곱수나 응답지연 값, 가용성에 관계된 수치 등이 있음

2의 제곱수

• 2의 제곱수로 표현한 데이터 볼륨의 단위

응답지연 값

• 통상적인 컴퓨터에서 구현된 연산들의 응답지연 값

• 위의 데이터를 시각화한 수치

제시된 수치들을 분석한 결과

• 메모리는 빠르지만 디스크는 아직도 느리다.
• 디스크 탐색은 가능한 피하라.
• 단순한 압축 알고리즘은 빠르다.
• 데이터를 인터넷으로 전송하기 전에 가능하면 압축하라.
• 데이터 센터는 보통 여러 지역에 분산되어 있고, 센터들 간에 데이터를 주고받는 데는 시간이 걸린다.

 

가용성에 관계된 수치들

• 고가용성: 시스템이 오랜 시간 동안 지속적으로 중단 없이 운영될 수 있는 능력

---

예제: 트위터 QPS와 저장소 요구량 추정

가정

• 월간 능동 사용자수(MAU, Monthly Active User)는 3억 명
• 50%의 사용자가 트위터를 매일 사용
• 평균적으로 각 사용자는 매일 2건의 트윗을 게시
• 미디어를 포함하는 트윗은 10%
• 데이터는 5년간 보관

추정

• QPS(Query Per Second) 추정
  • DAU = 3억 x 50% = 1.5억
  • QPS = 1.5억 x 2트윗 / 24시간 / 3600초 = 약 3500
  • 최대 QPS (Peek QPS) = 2 x QPS = 약 7000

미디어 저장을 위한 저장소 요구량

• 평균 트윗 크기
  • tweet_id: 64바이트
  • 텍스트: 140바이트
  • 미디어: 1MB
• 미디어 저장소 요구량: 1.5억 x 2 x 10% x 1MB = 30TB / 일
• 5년간 미디어를 보관하기 위한 저장소 요구량: 30TB x 365 x 5 = 55PB