Аварийные сигналы метрики CWAgent, созданные с помощью Terraform, не получают собранных точек данных (остаются в поле «Недостаточно данных»)

Я создал сигнализацию CloudWatch для использования памяти с помощью Terraform, но сигнализация не переходит в состояние OK (остается в INSUFFICIENT_DATA). Но когда я вручную создал тот же сигнал тревоги с такой же точной конфигурацией из консоли управления AWS, он перешел в состояние OK, и я вижу точку данных.

Я успешно установил агент CloudWatch в экземпляр EC2, в котором я пытаюсь создать сигналы тревоги, и я могу видеть показатели в разделе CloudWatch Metrics.

Мой код Terraform:

resource "aws_cloudwatch_metric_alarm" "memory" {
  alarm_name = "memory-utilization-alarm-${var.env}"
  comparison_operator = "GreaterThanOrEqualToThreshold"
  evaluation_periods  = "1"
  metric_name = "mem_used_percent"
  namespace = "CWAgent"
  period = "300"
  statistic = "Average"
  threshold = "${var.alarms_memory_threshold}"
  alarm_description = "This metric monitors ec2 memory utilization"
  alarm_actions = [ "${aws_sns_topic.sns_topic.arn}" ]

  dimensions = {
    InstanceId = "${var.instance_id}"
    ImageId = "${var.ami_id}"
  }

  tags = {
    Environment = "${var.env}"
    Project = "${var.project}"
    Provisioner="cloudwatch"
    Name = "${local.name}.memory"
  }
}

Вывод AWS CLI из описания аварийного сигнала, созданного с помощью Terraform:

aws cloudwatch describe-alarms --alarm-names memory-utilization-alarm-dev
{
    "MetricAlarms": [
        {
            "EvaluationPeriods": 1, 
            "TreatMissingData": "missing", 
            "AlarmArn": "arn:aws:cloudwatch:us-west-2:289914521333:alarm:memory-utilization-alarm-dev", 
            "StateUpdatedTimestamp": "2019-07-12T08:45:07.020Z", 
            "AlarmConfigurationUpdatedTimestamp": "2019-07-12T08:45:07.020Z", 
            "ComparisonOperator": "GreaterThanOrEqualToThreshold", 
            "AlarmActions": [
                "arn:aws:sns:us-west-2:289914521333:sns-topic"
            ], 
            "AlarmDescription": "This metric monitors ec2 memory utilization", 
            "Namespace": "CWAgent", 
            "Period": 300, 
            "StateValue": "INSUFFICIENT_DATA", 
            "Threshold": 80.0, 
            "AlarmName": "memory-utilization-alarm-dev", 
            "Dimensions": [
                {
                    "Name": "InstanceId", 
                    "Value": "i-03417f2d90d3dc6ca"
                }, 
                {
                    "Name": "ImageId", 
                    "Value": "ami-09d1383e2a5ae8a93"
                }
            ], 
            "Statistic": "Average", 
            "StateReason": "Unchecked: Initial alarm creation", 
            "InsufficientDataActions": [], 
            "OKActions": [], 
            "ActionsEnabled": true, 
            "MetricName": "mem_used_percent"
        }
    ]
}

Вывод AWS CLI из описания аварийного сигнала, созданного с помощью консоли AWS:

aws cloudwatch describe-alarms --alarm-names memory-utilization-alarm
{
    "MetricAlarms": [
        {
            "Dimensions": [
                {
                    "Name": "InstanceId", 
                    "Value": "i-03417f2d90d3dc6ca"
                }, 
                {
                    "Name": "ImageId", 
                    "Value": "ami-09d1383e2a5ae8a93"
                }, 
                {
                    "Name": "InstanceType", 
                    "Value": "t3.large"
                }
            ], 
            "Namespace": "CWAgent", 
            "DatapointsToAlarm": 1, 
            "ActionsEnabled": true, 
            "MetricName": "mem_used_percent", 
            "EvaluationPeriods": 1, 
            "StateValue": "OK", 
            "StateUpdatedTimestamp": "2019-07-12T09:49:28.749Z", 
            "AlarmConfigurationUpdatedTimestamp": "2019-07-12T09:47:55.914Z", 
            "AlarmActions": [
                "arn:aws:sns:us-west-2:289914521333:sns-topic"
            ], 
            "InsufficientDataActions": [], 
            "AlarmArn": "arn:aws:cloudwatch:us-west-2:289914521333:alarm:memory-utilization-alarm", 
            "StateReasonData": "{\"version\":\"1.0\",\"queryDate\":\"2019-07-12T09:49:28.746+0000\",\"startDate\":\"2019-07-12T09:44:00.000+0000\",\"statistic\":\"Average\",\"period\":300,\"recentDatapoints\":[61.253520518958474],\"threshold\":80.0}", 
            "Threshold": 80.0, 
            "StateReason": "Threshold Crossed: 1 out of the last 1 datapoints [61.253520518958474 (12/07/19 09:44:00)] was not greater than or equal to the threshold (80.0) (minimum 1 datapoint for ALARM -> OK transition).", 
            "OKActions": [], 
            "AlarmDescription": "memory-utilization-alarm", 
            "Period": 300, 
            "ComparisonOperator": "GreaterThanOrEqualToThreshold", 
            "AlarmName": "memory-utilization-alarm", 
            "Statistic": "Average", 
            "TreatMissingData": "missing"
        }
    ]
}

person Mahela Wickramasekara    schedule 12.07.2019    source источник
comment
Можете ли вы поделиться кодом Terraform, который создает сигнал тревоги? И каков результат описания тревоги, создаваемой Terraform и созданной консолью? Вы можете получить это от aws cloudwatch describe-alarms --alarm-names [ALARM NAME]   -  person ydaetskcoR    schedule 12.07.2019
comment
Я добавил сюда код, раньше были проблемы с форматированием :)   -  person Mahela Wickramasekara    schedule 12.07.2019
comment
mem_used_percent имеет дополнительное измерение InstanceType   -  person ydaetskcoR    schedule 12.07.2019
comment
Я добавил то, что вы просили. description-alarms для обоих созданных алармов. Отсутствует ли что-нибудь еще, кроме InstanceType?   -  person Mahela Wickramasekara    schedule 12.07.2019
comment
добавление InstanceType сработало! @ydaetskcoR большое спасибо за помощь   -  person Mahela Wickramasekara    schedule 12.07.2019


Ответы (1)


Метрика mem_used_percent из агента Cloudwatch имеет 3 измерения: InstanceId, ImageId и InstanceType. Размеры для каждой метрики в настоящее время не указаны в Руководство пользователя AWS, но вы можете узнать это с помощью следующей команды интерфейса командной строки AWS:

$ aws cloudwatch list-metrics --namespace CWAgent --metric-name mem_used_percent --query 'Metrics[0].Dimensions[].Name'
[
    "InstanceId", 
    "ImageId", 
    "InstanceType"
]

Чтобы исправить вашу тревогу, вам нужно изменить определение тревоги, включив в нее измерение InstanceType:

resource "aws_cloudwatch_metric_alarm" "memory" {
  alarm_name = "memory-utilization-alarm-${var.env}"
  comparison_operator = "GreaterThanOrEqualToThreshold"
  evaluation_periods  = "1"
  metric_name = "mem_used_percent"
  namespace = "CWAgent"
  period = "300"
  statistic = "Average"
  threshold = "${var.alarms_memory_threshold}"
  alarm_description = "This metric monitors ec2 memory utilization"
  alarm_actions = [ "${aws_sns_topic.sns_topic.arn}" ]

  dimensions = {
    InstanceId = "${var.instance_id}"
    ImageId = "${var.ami_id}"
    InstanceType = "${var.instance_type}"
  }

  tags = {
    Environment = "${var.env}"
    Project = "${var.project}"
    Provisioner="cloudwatch"
    Name = "${local.name}.memory"
  }
}
person ydaetskcoR    schedule 12.07.2019