Proxmox VE 서버 사양 계산기 (3노드부터)

가상머신 수와 사양, 노드 수(3대부터)를 넣으면 Proxmox VE 클러스터의 노드별 CPU, 메모리, NVMe, 네트워크 권장 사양과 노드 수별 비교를 계산합니다. Ceph 필수 요건과 노드 추가 시 확인 사항을 포함합니다.

가상머신 수와 평균 사양, 노드 수를 넣으면 Proxmox VE 클러스터(3노드부터 노드를 늘릴 때까지)에 필요한 노드별 CPU, 메모리, 디스크, 네트워크를 계산합니다. 노드 1대가 고장 나도 나머지 노드가 모든 가상머신을 감당하는 기준이며, MOAVI 관리 VM도 포함합니다.

3노드에서 노드를 추가할 때

  • 3노드 풀 메시로 구성했다면 4번째 노드를 넣기 전에 Ceph 네트워크를 25GbE 스위치 2대로 바꿉니다. 메시는 3노드 구성용입니다.
  • 새 노드에도 기존 노드와 같은 수·같은 용량의 OSD 디스크를 넣습니다.
  • OSD를 추가하면 데이터 재배치(리밸런싱)로 네트워크·디스크 부하와 메모리 사용이 늘어납니다. 업무 외 시간에 진행합니다.
  • CPU 세대가 다른 서버를 섞으면 VM CPU 유형을 공통 기준(x86-64-v2/v3 등)으로 맞춰야 라이브 마이그레이션이 됩니다.
  • 새 노드도 corosync 전용 링크와 다른 물리망의 두 번째 링크로 클러스터에 가입합니다.
  • 새 노드는 기존 노드와 같은 Proxmox VE·Ceph 버전으로 맞춘 뒤 가입합니다.

Ceph 구성 시 필수 요건

  • NVMe SSD를 쓰고, 전원 손실 보호(PLP)가 있는 엔터프라이즈급만 사용합니다. 일반 소비자용 SSD는 쓰지 않습니다.
  • Ceph 전용 저지연 네트워크를 둡니다. NVMe 구성은 25GbE 이상(최소 10GbE)을 권장하며, 포트와 스위치를 이중화합니다.
  • 3노드는 25GbE 스위치가 없어도 노드끼리 직접 연결(풀 메시)할 수 있습니다. 4노드 이상이거나 늘릴 계획이면 스위치를 씁니다.
  • 클러스터 통신(corosync)은 전용 1GbE 링크로 분리합니다. Ceph 트래픽과 섞이면 지연 때문에 클러스터 쿼럼을 잃을 수 있습니다.
  • RAID 컨트롤러 대신 HBA 또는 NVMe 직결을 씁니다. Ceph가 디스크를 직접 관리해야 합니다.
  • 노드마다 같은 수, 같은 용량의 OSD 디스크를 넣고, 클러스터 전체 12개 이상(노드당 4개 이상)으로 구성합니다.
  • OSD 1개당 메모리 8GB 이상과 CPU 1코어(스레드) 이상을 잡습니다. 고성능 NVMe OSD는 4~6스레드까지 씁니다.
  • 복제 수 3, 최소 복제 수 2로 운영하고(1로 내리지 않음), 사용률은 경고 기준(85%)보다 충분히 낮게 유지합니다.

클러스터 공통 권장 사항

  • 가능하면 3대 모두 같은 사양의 서버로 구성합니다.
  • Intel VT-x 또는 AMD-V를 지원하는 64비트 서버 CPU를 씁니다.
  • 관리, 가상머신, 스토리지 네트워크를 나누고 NIC를 이중화합니다.
  • ECC 메모리와 이중화 전원 공급 장치를 씁니다.
  • 부팅 디스크는 PLP SSD 2개를 미러로 구성합니다.
  • 외부 SAN을 쓸 때는 경로를 이중화(멀티패스)합니다.

계산 기준

  • 노드 1대가 고장 나도 남은 노드가 모든 가상머신을 실행할 수 있게 계산합니다(N+1).
  • CPU는 입력한 과할당 비율을 적용하고, 메모리는 과할당하지 않습니다.
  • Proxmox VE 호스트 몫으로 노드마다 CPU 2코어와 메모리 4GB를 뺍니다.
  • Ceph는 MON·MGR에 2코어·4GB, NVMe OSD 1개에 2코어(4스레드)·8GB를 잡습니다.
  • Ceph 목표 사용률은 3노드 70%(OSD 1개 고장 여유)입니다. 4노드 이상은 노드 1대의 데이터를 나머지 노드로 다시 복제해도 85% 경고 아래가 되도록 4대 63%, 5대 68%, 6대 이상 70%로 잡습니다.
  • 3노드 Ceph는 노드 1대가 고장 나면 복구 전까지 2중 복제로 운영됩니다. 빠른 교체 계획이 필요합니다.
  • ZFS 복제는 가상머신마다 다른 노드 1곳에 복제하고, 미러 구성과 사용률 80% 이하, 사용 1TB당 메모리 1GB를 기준으로 합니다.
  • NVMe는 1.92·3.84·7.68·15.36TB 중에서 노드당 4~8개가 되도록 고릅니다.
  • MOAVI 관리 VM을 포함합니다. VM 1,000대 이하는 4 vCPU·8GB·100GB, 초과하면 8 vCPU·16GB·200GB입니다.
  • 결과는 추정치입니다. 실제 구성은 사전 진단으로 확정합니다.