AWS: 502 ошибка на Application Load balancer

Автор: | 10/08/2018
Нет комментариев
 

Имеется ALB, на который постоянно срабатывает Alertmanager с ошибкой 502:

В CloudWatch видно, что ошибка возникает спорадически, и только один раз:

При этом в логах NGINX никаких ошибок нет

Первым делом — включаем логи ALB:

Не то что бы они чем-то реально помогли — но по крайне мере теперь можно увидеть ошибку «вживую» :

52.***.***.142 — — [07/Aug/2018:11:18:21 +0300] «GET /site/login HTTP/1.1» 301 178 «-» «Go-http-client/1.1»
52.***.***.142 — — [07/Aug/2018:11:18:21 +0300] «GET /site/login HTTP/1.1» 200 1120 «http://admin.domain.com/site/login» «Go-http-client/1.1»
52.***.***.142 — — [07/Aug/2018:11:18:36 +0300] «GET / HTTP/1.1» 302 5 «-» «Go-http-client/1.1»
52.***.***.142 — — [07/Aug/2018:11:18:36 +0300] «GET /site/login HTTP/1.1» 301 178 «-» «Go-http-client/1.1»
52.***.***.142 — — [07/Aug/2018:11:18:36 +0300] «GET /site/login HTTP/1.1» 200 1124 «http://admin.domain.com/site/login» «Go-http-client/1.1»
52.***.***.142 — — [07/Aug/2018:11:18:51 +0300] «GET / HTTP/1.1» 302 5 «-» «Go-http-client/1.1»
52.***.***.142 — — [07/Aug/2018:11:18:51 +0300] «GET /site/login HTTP/1.1» 301 178 «-» «Go-http-client/1.1»

Потом нагугливаем документацию по траблшутингу ALB, и там находим упоминание о KeepAlive:

The target closed the connection with a TCP RST or a TCP FIN while the load balancer had an outstanding request to the target. Check whether the keep-alive duration of the target is shorter than the idle timeout value of the load balancer.

Значение по умолчанию на ALB — 50 секунд, как видно на скрипшоте выше, а у NGINX (см. документацию):

Default: 
keepalive_timeout 75s;

Добавим keep_alive в NGINX со значением в 30 секунд — для нашего приложения этого будет достаточно:

server {

    charset utf-8;
    listen 80;
    server_name admin.domain.com;

    if ($http_x_forwarded_proto = 'http') {
        return 301 https://admin.domain.com$request_uri;
    }

    set $root_path /data/projects/domain/backend/web;
    root $root_path;
    index index.php;

    error_log /var/log/nginx/admin.domain.com-error.log;
    access_log /var/log/nginx/admin.domain.com-access.log;

    keepalive_timeout 30;
...

И ждём результата.

P.S. Таки да — ошибка пропала.