Sincronize estados de interfaces de ponte

Question

Temos links de fibra 10G redundantes para nosso provedor de Internet upstream em uma configuração ativa/failover. Entre nosso roteador e o roteador upstream, temos um par de firewalls executando o Vyos em modo transparente. Usamos BGP para divulgação de rotas e não podemos alterar a maioria dos parâmetros.

Desenho:

Se o link para um dos roteadores cair (por exemplo, aquele com xno desenho - esse é o nosso tipo de falha mais comum), toda a rede ficará inacessível até o tempo limite do BGP (até 150 segundos). Eu já sei que se forçarmos a queda do link do outro lado da ponte, nossos roteadores começarão imediatamente a encaminhar o tráfego através do outro link.

Existe alguma maneira de derrubar automaticamente um lado da ponte no firewall se o outro lado cair?

Existem armadilhas ocultas nessa solução?

Answer 1

Eu executaria um script nas máquinas VyOS que verifica o estado da conexão upstream e então faz ifdown/ ifupdo outro lado conforme necessário.

A maneira mais simples de fazer isso é colocar scripts /etc/network/if-down.d(verificar se a interface que caiu é o lado atualizado e derrubar o outro lado) e /etc/network/if-up.d(verificar se a interface que subiu é o lado atualizado e trazer o outro lado disso é).
Como alternativa, você pode executar um script de monitoramento uma vez por minuto com cron (ou Systemd Timers, ou qualquer agendador semelhante) ou pode escrevê-lo como um loop infinito que fica suspenso por alguns segundos para obter verificação de subminutos.

Answer 2

Eu escrevi um script que verifica as interfaces /syspara determinar se elas são membros da ponte e, em seguida, desvia a ponte. O VyOS usa netplugdpara monitorar interfaces e por algum motivo meu script o confunde (provavelmente escreverei uma pergunta separada para isso), mas acho que é uma boa solução geral.

#!/bin/bash

## This script will bounce a br interface if a member interface goes down.
## This will cause router BGP timers to reset, making outages last only seconds instead of minutes.
##
## This script is called by netplug on Vyos:
## /etc/netplug/linkdown.d/my-brdown
##
## Version History
## 1.0 - Initial version
##

LOCKDIR=/var/run/my-bridge-ctl

# Since we only have one br, not going to implement this right now.
#IGNORE_BRIDGES=()

IFACE=$1

#Remove the lock directory
function cleanup {
    if rmdir $LOCKDIR; then
        logger -is -t "my-bridge-ctl" -p "kern.info" "Finished"
    else
        logger -is -t "my-bridge-ctl" -p "kern.error" "Failed to remove lock directory '$LOCKDIR'"
        exit 1
    fi
}

if mkdir $LOCKDIR; then
    #Ensure that if we "grabbed a lock", we release it
    #Works for SIGTERM and SIGINT(Ctrl-C)
    trap "cleanup" EXIT

    logger -is -t "my-bridge-ctl" -p "kern.info" "Acquired lock, running"

    # Processing starts here

    IFACE_DESC=$(<"/sys/class/net/${IFACE}/ifalias")
    IFACE_BR_DIR="/sys/class/net/${IFACE}/brport"

    if [ ! -d "$IFACE_BR_DIR" ]; then
        logger -is -t "my-bridge-ctl" -p "kern.warning" "Interface ${IFACE} (${IFACE_DESC-no desc}) went down. Not a member of a bridge. Skipping."
    else
        IFACE_BR_LINK=$(realpath "/sys/class/net/${IFACE}/master")
        IFACE_BR_NAME=$(basename $IFACE_BR_LINK)
        IFACE_BR_DESC=$(<"${IFACE_BR_LINK}/ifalias")
        logger -is -t "my-bridge-ctl" -p "kern.warning" "Interface ${IFACE} (${IFACE_DESC:-no desc}) went down. Member of bridge ${IFACE_BR_NAME} (${IFACE_BR_DESC:-no desc})."

        # TODO: Insert IGNORE_BRIDGE check here

        find "${IFACE_BR_LINK}/brif" -type l -print0 | while IFS= read -r -d $'\0' IFACE_BR_MEMBER_LINK; do
            IFACE_BR_MEMBER_NAME=$(basename $IFACE_BR_MEMBER_LINK)
            logger -is -t "my-bridge-ctl" -p "kern.info" "Handling ${IFACE_BR_NAME} member interface ${IFACE_BR_MEMBER_NAME} (${IFACE_BR_MEMBER_LINK})."

            # Actually do the bounce
            ip link set dev ${IFACE_BR_MEMBER_NAME} down && sleep 2 && ip link set dev ${IFACE_BR_MEMBER_NAME} up

            logger -is -t "my-bridge-ctl" -p "kern.info" "Interface ${IFACE_BR_MEMBER_NAME} bounced."
        done
    fi

    sleep 5
else
    logger -is -t "my-bridge-ctl" -p "kern.info" "Could not create lock directory '$LOCKDIR'"
    exit 1
fi