Service Fabric Cluster Resource Manager 제한

  • 아티클

클러스터 Resource Manager를 올바르게 구성한 경우에도 클러스터가 중단될 수 있습니다. 예를 들어 동시 노드 및 장애 도메인 오류가 있을 수 있습니다. 업그레이드 중에 이러한 문제가 발생하면 어떻게 하나요? Cluster Resource Manager는 항상 모든 항목을 수정하려고 시도하며 클러스터의 리소스를 사용하여 클러스터를 다시 구성하고 문제를 해결하려고 합니다. 제한은 클러스터가 리소스를 사용하여 안정화(노드 다시 작동, 네트워크 파티션 정상화, 수정된 비트 배포)할 수 있도록 방어벽을 제공하는 데 도움이 됩니다.

이러한 상황을 위해 Service Fabric 클러스터 Resource Manager는 여러 가지 제한을 포함합니다. 이러한 제한은 꽤 큰 장애물입니다. 일반적으로 신중한 계획 및 테스트 없이 변경해서는 안 됩니다.

Cluster Resource Manager의 제한을 변경하는 경우 예상되는 실제 부하에 맞게 조정해야 합니다. 일부 상황에서 클러스터 안정화에 시간이 더 오래 걸리더라도 일부 제한을 설정해야 하는지 결정할 수 있습니다. 올바른 제한 값을 결정하기 위한 테스트가 필요합니다. 제한은 클러스터가 적절한 시간 내에 변경에 응답할 수 있을 만큼 충분히 크고, 너무 많은 리소스 소비를 실제로 방지할 만큼 충분히 작아야 합니다.

대부분의 경우 고객은 이미 리소스 제약 환경을 사용하고 있기 때문에 예전부터 제한을 사용하고 있습니다. 몇 가지 예로 개별 노드 또는 디스크로 제한된 네트워크 대역폭이 있습니다. 이 경우 처리량 제한으로 인해 많은 상태 저장 복제본을 동시에 만들 수 없습니다. 제한을 사용하지 않으면 리소스에 비해 작업이 너무 많아져 실패하거나 느려질 수 있습니다. 이러한 상황에서 고객은 제한을 사용하면서 클러스터가 안정적인 상태에 도달하는 데 걸리는 시간이 더 길어진다는 것을 알게 됩니다. 고객은 또한 제한된 상태에서는 전반적인 안정성이 낮은 상태로 실행될 수 있다는 사실도 알고 있습니다.

제한 구성

Service Fabric에는 복제본 이동 수를 제한하는 두 가지 메커니즘이 있습니다. Service Fabric 5.7 이전에 존재하던 기본 메커니즘은 이러한 제한을 허용되는 절대 이동 횟수로 나타냅니다. 이러한 방식이 모든 규모의 클러스터에 맞지는 않습니다. 특히 대규모 클러스터의 경우는 이 기본값이 너무 작을 수 있으며 반드시 필요한 경우에도 더 작은 클러스터에는 영향을 미치지 않으면서 부하 분산 작업을 상당히 느려지게 할 수 있습니다. 이러한 이전 메커니즘은 동적 클러스터에서 더 잘 확장되는 비율 기반 제한으로 대체되었습니다. 이 제한에서는 서비스 및 노드 수가 정기적으로 변경됩니다.

이러한 제한은 클러스터에 있는 복제본의 수 비율을 기준으로 합니다. 비율 기반 제한을 사용하면 "10분 간격으로 복제본의 10% 이상 이동 안 함"과 같은 규칙을 나타낼 수 있습니다.

비율 기반 제한에 대한 구성 설정은 다음과 같습니다.

  • GlobalMovementThrottleThresholdPercentage - 클러스터에 있는 복제본의 총 수에 대한 비율로 표시되는 클러스터에 한 번에 허용되는 최대 이동 횟수. 0은 제한하지 않음을 나타냅니다. 기본값은 0입니다. 이 설정 및 GlobalMovementThrottleThreshold를 둘 다 지정하는 경우 좀 더 일반적인 제한이 사용됩니다.
  • GlobalMovementThrottleThresholdPercentageForPlacement - 클러스터에 있는 복제본의 총 수에 대한 비율로 표시되는 배치 단계 동안 허용되는 최대 이동 횟수. 0은 제한하지 않음을 나타냅니다. 기본값은 0입니다. 이 설정 및 GlobalMovementThrottleThresholdForPlacement를 둘 다 지정하는 경우 좀 더 일반적인 제한이 사용됩니다.
  • GlobalMovementThrottleThresholdPercentageForBalancing - 클러스터에 있는 복제본의 총 수에 대한 비율로 표시되는 부하 분산 단계 동안 허용되는 최대 이동 횟수. 0은 제한하지 않음을 나타냅니다. 기본값은 0입니다. 이 설정 및 GlobalMovementThrottleThresholdForBalancing을 둘 다 지정하는 경우 좀 더 일반적인 제한이 사용됩니다.

제한 비율을 지정할 때 5%를 0.05로 지정합니다. 이러한 제한이 관리되는 간격은 GlobalMovementThrottleCountingInterval(초)입니다.

<Section Name="PlacementAndLoadBalancing">
     <Parameter Name="GlobalMovementThrottleThresholdPercentage" Value="0" />
     <Parameter Name="GlobalMovementThrottleThresholdPercentageForPlacement" Value="0" />
     <Parameter Name="GlobalMovementThrottleThresholdPercentageForBalancing" Value="0" />
     <Parameter Name="GlobalMovementThrottleCountingInterval" Value="600" />
</Section>

독립 실행형 배포의 경우 ClusterConfig.json 또는 Azure 호스티드 클러스터의 경우 Template.json를 통해 수행됩니다.

"fabricSettings": [
  {
    "name": "PlacementAndLoadBalancing",
    "parameters": [
      {
          "name": "GlobalMovementThrottleThresholdPercentage",
          "value": "0.0"
      },
      {
          "name": "GlobalMovementThrottleThresholdPercentageForPlacement",
          "value": "0.0"
      },
      {
          "name": "GlobalMovementThrottleThresholdPercentageForBalancing",
          "value": "0.0"
      },
      {
          "name": "GlobalMovementThrottleCountingInterval",
          "value": "600"
      }
    ]
  }
]

기본 횟수 기반 제한

이 정보는 이전 클러스터가 있거나 클러스터가 업그레이드된 후에도 이러한 구성을 계속 유지하는 경우에 제공됩니다. 일반적으로 이러한 제한은 위의 비율 기반 제한으로 바꾸는 것이 좋습니다. 비율 기반 제한은 기본적으로 사용되지 않도록 설정되므로 이러한 제한은 사용하지 않도록 설정하거나 비율 기반 제한으로 바꿀 때까지 클러스터의 기본 제한으로 유지됩니다.

  • GlobalMovementThrottleThreshold – 일정 시간 동안 클러스터 내에서 발생하는 총 이동 수를 제어합니다. 기간은 GlobalMovementThrottleCountingInterval(초)로 지정됩니다. GlobalMovementThrottleThreshold의 기본값은 1000이고 GlobalMovementThrottleCountingInterval의 기본값은 600입니다.
  • MovementPerPartitionThrottleThreshold – 일정 시간 동안 서비스 파티션에 대해 발생하는 총 이동 수를 제어합니다. 기간은 MovementPerPartitionThrottleCountingInterval(초)로 지정됩니다. MovementPerPartitionThrottleThreshold의 기본값은 50이고 MovementPerPartitionThrottleCountingInterval의 기본값은 600입니다.

이러한 제한의 구성은 비율 기반 제한과 같은 패턴을 따릅니다.

다음 단계

  • 클러스터 Resource Manager가 클러스터의 부하를 관리하고 분산하는 방법을 알아보려면 부하 분산
  • Cluster Resource Manager에는 클러스터를 설명하기 위한 많은 옵션이 있습니다. 이에 대해 자세히 알아보려면 Service Fabric 클러스터 설명에 대한 문서를 확인하세요.