Daniel Allaire
f2c580235d
D-87 disait que l hebergeur n a pas le droit de voir les journaux de ses
locataires. La decision avait une face cachee : a force de refuser de voir
ceux des autres, le site s etait prive des siens. Ses sept machines
n expediaient nulle part.
Il prend donc sa propre pile : prometheus, loki et grafana sur site-mon-01,
sans aucun lien avec ceux d un tenant. L exemption qui bloquait portait sa
propre condition de levee, ecrite cinq jours plus tot dans le plan.
Grafana au site n a pas de SSO, et le role l ignorait : il reclamait l IdP
avant de regarder s il en voulait un. L interrupteur existait, il n etait
pas honore. Le role refuse desormais SSO eteint ET formulaire local eteint
- la combinaison deploie un Grafana en sante ou personne ne peut entrer -
et le reglage du formulaire sort du if du SSO, ou il disparaissait en
laissant le defaut amont decider en silence.
Deux manques se cachaient l un l autre dans le devis de la frontiere, et
Prometheus voyait 1 cible sur 7 :
- le devis derivait les groupes d une machine du site de applications.yml
seul, et ne voyait donc aucune integration universelle - alors que
client_metrique ouvre un port d ecoute ;
- une sortie vers un role du site visait !SETOPS_INTERNES, qui exclut
precisement la machine nommee. Le devis autorisait a expedier les
journaux du site a n importe quel Loki du monde, et a nul autre endroit
qu a celui-la. Neuf flux dans ce cas.
Et deux declarations justes ne font qu une regle : appliquer_opnsense pose
tout en direction: in (D-61).
Les deux agents se supervisent enfin eux-memes. La sonde des journaux ne
demande pas si Alloy tourne, elle lit ce qu il a du JETER. Elle a fait ses
preuves le jour meme : Alloy actif, /-/ready a 200, et cinquante lignes
perdues sur six machines.
Mesure : metriques 7/7 vert, journaux 1/7 - les six autres attendent la
regle de frontiere, et le disent. prouver 64 OK, ansible-lint 0 defaut.
Reste a la main de l exploitant : make frontiere-appliquer CONFIRMER=true,
et le secret vault_grafana_admin a deposer dans underlay.vault.yml.
Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_01Crgis8CxCWkAGFA1ecBz3q
52 lines
2.1 KiB
Django/Jinja
52 lines
2.1 KiB
Django/Jinja
#!/bin/bash
|
|
# GENERE par Set-OPS (role client_journal). Ne pas editer a la main.
|
|
#
|
|
# SONDE « journaux » — les lignes SORTENT-ELLES vers Loki ?
|
|
#
|
|
# Contrat : docs/supervision-conception.md (API des greffons Nagios) — une ligne, 0/1/2.
|
|
# Mise en defaut PAR PARAMETRE : `client_journal_sonde_url` (port ferme).
|
|
set -uo pipefail
|
|
|
|
URL={{ client_journal_sonde_url }}
|
|
ETAT={{ client_journal_sonde_etat }}
|
|
|
|
corps=$(curl -s --max-time 10 "${URL}/metrics" 2>/dev/null)
|
|
if [[ -z "${corps}" ]]; then
|
|
echo "Alloy ne repond pas sur ${URL} : impossible de savoir si les journaux partent."
|
|
exit 2
|
|
fi
|
|
|
|
# CE QU'ALLOY A DU JETER. On somme tous les motifs : `ingester_error` (le collecteur
|
|
# refuse ou reste injoignable), `rate_limited`, `queue_is_full`… La distinction interesse
|
|
# le diagnostic, pas la question « des lignes sont-elles perdues ? ».
|
|
jetees=$(printf '%s\n' "${corps}" \
|
|
| awk '/^loki_write_dropped_entries_total\{/ {s += $2} END {printf "%d", s+0}')
|
|
envoyees=$(printf '%s\n' "${corps}" \
|
|
| awk '/^loki_write_sent_entries_total\{/ {s += $2} END {printf "%d", s+0}')
|
|
|
|
# LA MEMOIRE D'UN PASSAGE : sans elle, un compteur cumulatif ne dit pas QUAND.
|
|
precedent=0
|
|
[[ -r "${ETAT}" ]] && precedent=$(cat "${ETAT}" 2>/dev/null | tr -cd '0-9')
|
|
: "${precedent:=0}"
|
|
printf '%s' "${jetees}" > "${ETAT}" 2>/dev/null || true
|
|
|
|
perf="envoyees=${envoyees} jetees=${jetees}"
|
|
nouvelles=$(( jetees - precedent ))
|
|
|
|
if (( nouvelles > 0 )); then
|
|
echo "PERTE EN COURS : ${nouvelles} ligne(s) de journal jetees depuis le dernier passage (${jetees} au total). | ${perf}"
|
|
exit 2
|
|
fi
|
|
# UN COMPTEUR QUI RECULE veut dire qu'Alloy a redemarre — ses compteurs repartent de
|
|
# zero. Ce n'est pas une perte, c'est une remise a zero, et la dire pour ce qu'elle est
|
|
# evite de chercher une panne la ou il y a eu un redemarrage.
|
|
if (( nouvelles < 0 )); then
|
|
echo "Alloy a redemarre (compteurs remis a zero) ; ${jetees} ligne(s) jetees depuis. | ${perf}"
|
|
exit 1
|
|
fi
|
|
if (( jetees > 0 )); then
|
|
echo "Journaux expedies ; ${jetees} ligne(s) perdues par le passe, plus rien depuis. | ${perf}"
|
|
exit 1
|
|
fi
|
|
echo "Journaux expedies vers Loki, aucune ligne perdue. | ${perf}"
|
|
exit 0
|