☰

Мониторинг и оповещение о трафике приложений

tag-icon • tag-icon monitoring alerts statsd
Мониторинг и оповещение о трафике приложений

В настоящее время я помещаю почасовой трафик (общее количество входных запросов) моего сайта в таблицу MySQL. Я храню данные за последние 90 дней.

Я хочу проверять каждый час, скажем, 6-й час, увеличился/уменьшился ли трафик сверх некоторого порогового значения, чем за последние 7 дней или за последние 30 дней 6-й час трафика. По сути, я вижу закономерность трафика. Разные часы имеют разные значения.

Для генерации оповещений я хочу найти различные статистические метрики. Немного почитав, я узнал, что Statsdможно использовать для этой цели.

Правильно ли использовать things для отправки таких оповещений? Есть ли лучшее/более простое решение для этого?

Я не собираюсь создавать никаких панелей мониторинга.

Мои текущие данные выглядят так:

+---------------------+---------------------+-----------+----------+
| startTime           | endTime             | component | traffic  |
+---------------------+---------------------+-----------+----------+
| 2015-05-01 00:00:00 | 2015-05-01 01:00:00 | rest      | 29090345 |
| 2015-05-01 01:00:00 | 2015-05-01 02:00:00 | rest      | 32224087 |
| 2015-05-01 02:00:00 | 2015-05-01 03:00:00 | rest      | 35165799 |
| 2015-05-01 03:00:00 | 2015-05-01 04:00:00 | rest      | 36903464 |
| 2015-05-01 04:00:00 | 2015-05-01 05:00:00 | rest      | 40394130 |
| 2015-05-01 05:00:00 | 2015-05-01 06:00:00 | rest      | 44874862 |
| 2015-05-01 06:00:00 | 2015-05-01 07:00:00 | rest      | 49988600 |
| 2015-05-01 07:00:00 | 2015-05-01 08:00:00 | rest      | 52240544 |
| 2015-05-01 08:00:00 | 2015-05-01 09:00:00 | rest      | 54517705 |
| 2015-05-01 09:00:00 | 2015-05-01 10:00:00 | rest      | 55277967 |
| 2015-05-01 10:00:00 | 2015-05-01 11:00:00 | rest      | 55285309 |
| 2015-05-01 11:00:00 | 2015-05-01 12:00:00 | rest      | 55572614 |

решение1

ВозможноInfluxDBможет быть вам интересно. InfluxDB — это база данных временных рядов.

Вы можете передать свои данные напрямую в InfluxDB через

  • statsd
  • бинарный интерфейс collectedd
  • графитовый протокол
  • REST-API

Вы можете запросить InfluxDB через REST-API, и вам не понадобится графический интерфейс. НоГрафанаотлично с ним работает.

решение2

Для сравнения трафика вы можете использовать следующий скрипт SQL.

set @threshold = 50;  /*threshold for comparing the traffic*/
set @limit = 30  /*how many days to consider while generating avg value*/

/*calculate the time range, comparison is done for the last hour*/
set @end_time = current_timestamp();  
set @end_time = timestamp(date(@end_time), maketime(hour(@end_time), 0, 0));
set @start_time = date_sub(@end_time, interval 1 hour);

/*find out the traffic for the last hour*/
select traffic
        from test.traffic_stats
        where startTime >= @start_time
            and endTime <= @end_time
    into @curr_traffic;

/*now find out the avg traffic for the past @limit days*/
select ifnull(avg(traffic), 0)
        from test.traffic_stats
        where startTime < @start_time
            and startTime >= date_sub(@start_time, interval @limit day)
            and time(startTime) >= time(@start_time)
            and time(endTime) <= time(@end_time)
    into @avg_traffic;

/*generate the report*/
select concat(
        'Current traffic '
        @curr_traffic,
        ' is '
        if(@curr_traffic > @avg_traffic + @threshold,
            'more',
            if(@curr_traffic < @avg_traffic - @threshold,
                'less',
                'same'
            )
        ), 
        ' compared to the avg traffic ', 
        @avg_traffic
    ) as result;

Скрипт сгенерирует отчет на основе среднего трафика за последние 30 дней, запросив test.traffic_statsтаблицу. Измените скрипт в соответствии с вашими требованиями. Теперь сохраните этот скрипт SQL как report.sqlи вы можете использовать Cronего для запуска через определенные интервалы времени с помощью командной строки mysql, как указано ниже.

mysql -hhost -uuser -ppassword -s <report.sql | awk '{print $1}'

Это извлечет результат и выведет его на stdout. Теперь вы можете использовать GNU Mailutils для отправки оповещения на свой адрес электронной почты.

mail -s "$(mysql -hhost -uuser -ppassword -s <report.sql | awk '{print $1}')" [email protected]

Связанный контент