CluPilotCloud/tests/Feature/Provisioning/BridgeScriptTest.php

1107 lines
45 KiB
PHP

<?php
use Illuminate\Support\Facades\Process;
/*
|--------------------------------------------------------------------------
| bridge.sh, gegen eine echte Shell gefahren
|--------------------------------------------------------------------------
|
| Der Rest der Testsuite liest die Befehle dieses Schritts als Zeichenketten —
| FakeRemoteShell führt keinen davon aus. Die Strophe, die diese Bibliothek
| schreibt, ist aber genau das, was eine Maschine umbringt, wenn sie falsch
| ist. Deshalb wird bridge.sh hier mit `sh` wirklich ausgeführt, gegen
| aufgezeichnete Ausgaben von `ip` statt gegen einen Host.
|
| `CLUPILOT_IP` zeigt dabei auf ein Attrappen-Skript, `CLUPILOT_SYS_NET` auf
| einen Baum aus Textdateien. Beides ist die einzige Berührung mit dem System,
| die die Bibliothek hat.
*/
/**
* Legt eine `ip`-Attrappe an, die auf feste Argumentmuster feste Ausgaben gibt.
*
* @param array<string, string> $answers Argumentmuster => Ausgabe
*/
function fakeIp(string $dir, array $answers): string
{
$cases = '';
foreach ($answers as $pattern => $output) {
$cases .= " '{$pattern}') cat <<'OUT'\n{$output}\nOUT\n ;;\n";
}
$script = "#!/bin/sh\ncase \"\$*\" in\n{$cases} *) exit 1 ;;\nesac\n";
file_put_contents("{$dir}/ip", $script);
chmod("{$dir}/ip", 0o755);
return "{$dir}/ip";
}
/**
* Fährt eine Zeile Shell mit bridge.sh im Rücken und gibt stdout zurück.
*
* `$pre` läuft VOR dem Sourcen. Damit kann ein Test `log` oder `http_get` selbst
* definieren — bridge.sh legt beide unter einem `command -v`-Schutz an, wer
* zuerst da ist, behält recht. Das ist zugleich die Probe auf diesen Schutz und
* spart dem Test eine Abhängigkeit von curl im Container.
*/
function runBridgeSh(string $body, array $env = [], string $pre = ''): string
{
$lib = base_path('deploy/bootstrap/lib/bridge.sh');
$exports = '';
foreach ($env as $key => $value) {
$exports .= "export {$key}=".escapeshellarg($value)."\n";
}
$result = Process::input("{$exports}{$pre}\n. '{$lib}'\n{$body}\n")->run('sh');
return trim($result->output());
}
/**
* Baut einen Testrumpf, der JA oder NEIN meldet — und FEHLT, wenn es die
* Funktion gar nicht gibt.
*
* Ohne diese Unterscheidung ist jeder Test, der NEIN erwartet, grün, SOLANGE die
* Funktion fehlt: `if gibtsnicht; then … else echo NEIN; fi` ist in sh schlicht
* unwahr. Die rote Phase wäre dann aus dem falschen Grund rot und die grüne
* bewiese nichts — genau die Sorte Attrappe, die hier schon einmal vier echte
* Fehler durchgelassen hat.
*
* Die Ausgabe der Funktion selbst wird verworfen, damit `log`-Zeilen das Urteil
* nicht verwässern und `toBe` statt `toContain` geprüft werden kann.
*/
function verdictBody(string $call): string
{
$function = strtok($call, ' ');
return "command -v {$function} >/dev/null 2>&1 || { echo FEHLT; exit 1; }\n"
."if {$call} >/dev/null 2>&1; then echo JA; else echo NEIN; fi";
}
/**
* Ruft eine Funktion, die etwas ausgibt — und meldet FEHLT, wenn es sie nicht
* gibt. Dieselbe Begründung wie bei verdictBody(): eine leere Ausgabe und eine
* fehlende Funktion sind von außen nicht zu unterscheiden.
*/
function callBridgeFn(string $call, array $env = [], string $pre = ''): string
{
$function = strtok($call, ' ');
return runBridgeSh(
"command -v {$function} >/dev/null 2>&1 || { echo FEHLT; exit 1; }\n{$call}",
$env,
$pre
);
}
/** Ein /sys/class/net-Baum aus Textdateien. */
function fakeSysNet(string $dir, string $iface, string $mac, bool $physical = true): string
{
$root = "{$dir}/sys";
mkdir("{$root}/{$iface}", 0o755, true);
file_put_contents("{$root}/{$iface}/address", $mac."\n");
if ($physical) {
mkdir("{$root}/{$iface}/device", 0o755, true);
}
return $root;
}
beforeEach(function () {
$this->dir = sys_get_temp_dir().'/bridge-'.bin2hex(random_bytes(6));
mkdir($this->dir, 0o755, true);
});
it('nimmt die Karte, über die die Standardroute geht — nicht die erste beste', function () {
// Eine Maschine mit zwei Karten hat oft eine angeschlossene und eine nicht.
$ip = fakeIp($this->dir, [
'-4 route show default' => 'default via 49.12.121.65 dev enp0s31f6 proto static',
]);
expect(runBridgeSh('detect_primary_interface', ['CLUPILOT_IP' => $ip]))
->toBe('enp0s31f6');
});
it('erkennt eine geroutete Einzeladresse an der /32', function () {
// Hetzner dediziert. Das eigene Subnetz besteht aus der eigenen Adresse —
// ein Gateway darin kann es nicht geben, es braucht pointopoint.
$ip = fakeIp($this->dir, [
'-4 route show default' => 'default via 49.12.121.65 dev enp0s31f6',
'-4 -o addr show dev enp0s31f6 scope global' => '2: enp0s31f6 inet 49.12.121.79/32 scope global enp0s31f6\ valid_lft forever preferred_lft forever',
]);
expect(runBridgeSh('detect_network_style enp0s31f6', ['CLUPILOT_IP' => $ip]))
->toBe('routed');
});
it('erkennt DHCP am laufenden Zustand, nicht an der Datei des Anbieters', function () {
// Der Kernel markiert eine geleaste Adresse als `dynamic`. Das steht bei
// jedem Anbieter gleich da — anders als die Datei, in die er es geschrieben
// hat.
$ip = fakeIp($this->dir, [
'-4 route show default' => 'default via 10.0.0.1 dev ens3',
'-4 -o addr show dev ens3 scope global' => '2: ens3 inet 10.0.0.7/24 brd 10.0.0.255 scope global dynamic ens3\ valid_lft 3521sec preferred_lft 3521sec',
]);
expect(runBridgeSh('detect_network_style ens3', [
'CLUPILOT_IP' => $ip,
// Absichtlich auf eine Datei zeigen, die es nicht gibt: die Antwort darf
// nicht davon abhängen.
'CLUPILOT_INTERFACES_FILE' => $this->dir.'/gibtesnicht',
]))->toBe('dhcp');
});
it('hält eine Bridge und einen Bond für keine physische Karte', function () {
// bridge_ports auf einem Bond oder einer bestehenden Bridge ist falsch: die
// Brücke nähme sich ihren eigenen Unterbau als Port.
$sys = fakeSysNet($this->dir, 'bond0', 'aa:bb:cc:dd:ee:ff', physical: false);
mkdir("{$sys}/bond0/bonding", 0o755, true);
$out = runBridgeSh(
verdictBody('interface_is_physical bond0'),
['CLUPILOT_SYS_NET' => $sys]
);
expect($out)->toBe('NEIN');
});
it('hält eine gewöhnliche Karte für eine physische', function () {
$sys = fakeSysNet($this->dir, 'enp0s31f6', 'a8:a1:59:00:11:22');
$out = runBridgeSh(
verdictBody('interface_is_physical enp0s31f6'),
['CLUPILOT_SYS_NET' => $sys]
);
expect($out)->toBe('JA');
});
it('sagt nur dann „Brücke steht", wenn sie Route UND Adresse trägt', function () {
// Eine vmbr0 ohne Adresse und ohne Standardroute ist eine Brücke im Sinne
// von `ip link show` und sonst nichts. Der alte Schritt prüfte genau das
// und warf das Ergebnis weg; sein Kommentar behauptete, er halte die
// Abwesenheit fest, und er hielt nichts fest.
$ip = fakeIp($this->dir, [
'link show vmbr0' => '5: vmbr0: <BROADCAST,MULTICAST,UP> mtu 1500',
'-4 route show default' => 'default via 49.12.121.65 dev enp0s31f6',
'-4 -o addr show dev vmbr0 scope global' => '',
]);
$out = runBridgeSh(
verdictBody('bridge_is_up'),
['CLUPILOT_IP' => $ip]
);
expect($out)->toBe('NEIN');
});
it('liest kein Gateway aus einer Standardroute, die keins hat', function () {
// `default dev ens3 scope link` — kein `via`. Ein `awk '{print $3}'` liefert
// dort den KARTENNAMEN, und daraus würde `gateway ens3` in der Strophe.
// Der Zeitgeber finge das ab, aber der Host wäre umsonst gescheitert.
$ip = fakeIp($this->dir, [
'-4 route show default' => 'default dev ens3 scope link',
]);
expect(runBridgeSh('default_gateway', ['CLUPILOT_IP' => $ip]))->toBe('');
});
it('liest das Gateway hinter dem via, nicht an fester Feldnummer', function () {
$ip = fakeIp($this->dir, [
'-4 route show default' => 'default via 10.0.0.1 dev ens3 proto dhcp src 10.0.0.7 metric 100',
]);
expect(runBridgeSh('default_gateway', ['CLUPILOT_IP' => $ip]))->toBe('10.0.0.1');
});
it('hält eine gatewaylose Karte nicht für eine geroutete Einzeladresse', function () {
// Ohne Gateway gibt es weder eins im eigenen Subnetz noch eines ausserhalb.
// `routed` zu melden hiesse `pointopoint` auf nichts.
$ip = fakeIp($this->dir, [
'-4 route show default' => 'default dev ens3 scope link',
'-4 -o addr show dev ens3 scope global' => '2: ens3 inet 10.0.0.7/24 scope global ens3',
]);
expect(runBridgeSh('detect_network_style ens3', ['CLUPILOT_IP' => $ip]))
->toBe('subnet');
});
it('schreibt ohne Gateway auch keine gateway-Zeile', function () {
$ip = fakeIp($this->dir, [
'-4 route show dev ens3' => '',
'-6 -o addr show dev ens3 scope global' => '',
'-6 route show default' => '',
]);
$sys = fakeSysNet($this->dir, 'ens3', 'de:ad:be:ef:00:07');
$out = $this->dir.'/interfaces';
runBridgeSh('write_bridge_stanza ens3 subnet 10.0.0.7/24 ""', [
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $out,
]);
expect(file_get_contents($out))
->toContain('address 10.0.0.7/24')
->not->toContain('gateway')
->not->toContain('pointopoint');
});
it('hält jede Brückenfunktion an genau einer Stelle im Repo', function () {
// Zwei Fassungen wären zwei Installationen, die bei jeder Proxmox-Version
// nachgezogen werden müssten — und die zweite fiele erst auf, wenn jemand
// sie benutzt. Genau die Entscheidung, die den Rettungssystem-Weg
// stillgelegt hat.
//
// Die Liste wächst mit bridge.sh mit: wer eine Funktion hierher zieht und
// die alte Fassung stehen lässt, fällt hier auf und nicht auf einem Host.
//
// array_merge, NICHT `+`: bei numerischen Schlüsseln behält der
// Vereinigungsoperator die linke Seite und wirft die rechte still weg. Und
// PHPs glob() kennt kein rekursives `**`, also zwei Muster.
$files = array_merge(
glob(base_path('deploy/bootstrap/lib/*.sh')) ?: [],
glob(base_path('deploy/bootstrap/*.sh')) ?: [],
);
$functions = [
'detect_primary_interface',
'detect_network_style',
'bridge_exists',
'bridge_carries_default_route',
'bridge_has_address',
'build_bridge',
'write_bridge_stanza',
'backup_network_config',
'schedule_network_rollback',
'cancel_network_rollback',
];
foreach ($functions as $function) {
$hits = [];
foreach ($files as $file) {
if (preg_match('/^'.$function.'\(\)/m', (string) file_get_contents($file))) {
$hits[] = str_replace(base_path().'/', '', $file);
}
}
expect($hits)->toBe(['deploy/bootstrap/lib/bridge.sh'], $function.' steht nicht genau einmal im Repo');
}
});
/*
|--------------------------------------------------------------------------
| Die Strophe
|--------------------------------------------------------------------------
|
| Vier Anbieterfälle, und sie unterscheiden sich in genau der Zeile, die
| entscheidet, ob die Maschine danach noch da ist.
*/
it('schreibt für eine geroutete /32 eine pointopoint-Strophe', function () {
// Hetzner dediziert. Ohne `pointopoint` findet der Kernel keinen Weg zum
// Gateway: die Route zeigte auf ein Netz, in dem das Gateway nicht liegt,
// und die Maschine wäre still weg.
$ip = fakeIp($this->dir, [
'-4 route show dev enp0s31f6' => "49.12.121.65 scope link\ndefault via 49.12.121.65",
'-6 -o addr show dev enp0s31f6 scope global' => '',
'-6 route show default' => '',
]);
$sys = fakeSysNet($this->dir, 'enp0s31f6', 'a8:a1:59:00:11:22');
$out = $this->dir.'/interfaces';
runBridgeSh('write_bridge_stanza enp0s31f6 routed 49.12.121.79/32 49.12.121.65', [
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $out,
]);
expect(file_get_contents($out))
->toContain('address 49.12.121.79/32')
->toContain('pointopoint 49.12.121.65')
->toContain('gateway 49.12.121.65')
->toContain('bridge-ports enp0s31f6')
->toContain('iface enp0s31f6 inet manual')
// Festgenagelt, damit die Brücke nicht irgendeine MAC wählt: manche
// Anbieter binden den Switchport an die der Karte.
->toContain('hwaddress ether a8:a1:59:00:11:22')
->toContain('auto vmbr0');
});
it('schreibt für ein gewöhnliches Subnetz Adresse und Gateway ohne pointopoint', function () {
// netcup und die meisten anderen. `pointopoint` wäre hier falsch.
$ip = fakeIp($this->dir, [
'-4 route show dev ens3' => '192.168.10.0/24 proto kernel scope link src 192.168.10.7',
'-6 -o addr show dev ens3 scope global' => '',
'-6 route show default' => '',
]);
$sys = fakeSysNet($this->dir, 'ens3', 'de:ad:be:ef:00:01');
$out = $this->dir.'/interfaces';
runBridgeSh('write_bridge_stanza ens3 subnet 192.168.10.7/24 192.168.10.1', [
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $out,
]);
expect(file_get_contents($out))
->toContain('address 192.168.10.7/24')
->toContain('gateway 192.168.10.1')
->not->toContain('pointopoint')
// Die Route zum eigenen Subnetz gehört NICHT in die Zusatzrouten: die
// legt der Kernel selbst an, sobald die Adresse steht. Ein zweites Mal
// hinzufügen scheitert — und ein gescheitertes `up` nimmt bei
// `ifreload` die ganze Strophe mit.
->not->toContain('up ip route add 192.168.10.0/24');
});
it('schreibt für DHCP keine Adresse in die Strophe', function () {
$ip = fakeIp($this->dir, [
'-4 route show dev ens3' => '',
'-6 -o addr show dev ens3 scope global' => '',
'-6 route show default' => '',
]);
$sys = fakeSysNet($this->dir, 'ens3', 'de:ad:be:ef:00:02');
$out = $this->dir.'/interfaces';
runBridgeSh('write_bridge_stanza ens3 dhcp 10.0.0.7/24 10.0.0.1', [
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $out,
]);
expect(file_get_contents($out))
->toContain('iface vmbr0 inet dhcp')
->not->toContain('address 10.0.0.7')
->toContain('bridge-ports ens3');
});
it('nimmt eine statische globale IPv6 samt link-local Gateway mit', function () {
// Hetzners Form: 2a01:…::2/64 mit fe80::1. Statisch, also derselbe Dreisatz
// wie bei v4 — und damit der Fall, der laut Entwurf nichts kostet.
$ip = fakeIp($this->dir, [
'-4 route show dev enp0s31f6' => '',
'-6 -o addr show dev enp0s31f6 scope global' => '2: enp0s31f6 inet6 2a01:4f8:1c1c::2/64 scope global \ valid_lft forever preferred_lft forever',
'-6 route show default' => 'default via fe80::1 dev enp0s31f6 metric 1024',
]);
$sys = fakeSysNet($this->dir, 'enp0s31f6', 'a8:a1:59:00:11:22');
$out = $this->dir.'/interfaces';
runBridgeSh('write_bridge_stanza enp0s31f6 routed 49.12.121.79/32 49.12.121.65', [
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $out,
]);
expect(file_get_contents($out))
->toContain('iface vmbr0 inet6 static')
->toContain('address 2a01:4f8:1c1c::2/64')
->toContain('gateway fe80::1');
});
it('lässt SLAAC-IPv6 liegen und sagt es ins Protokoll', function () {
// Proxmox setzt forwarding=1, und der Kernel verwirft
// Router-Advertisements dann ohne accept_ra=2. Das sauber hinzubekommen
// wäre ein zweiter Satz Fehlerfälle in genau dem Fenster, das diese
// Konstruktion zu überleben versucht — und v6 trägt hier keinen Verkehr.
// Still verlieren gilt trotzdem nicht.
$ip = fakeIp($this->dir, [
'-4 route show dev ens3' => '',
'-6 -o addr show dev ens3 scope global' => '2: ens3 inet6 2a01:4f8:aaaa::17/64 scope global dynamic \ valid_lft 86000sec preferred_lft 14000sec',
'-6 route show default' => 'default via fe80::1 dev ens3',
]);
$sys = fakeSysNet($this->dir, 'ens3', 'de:ad:be:ef:00:03');
$out = $this->dir.'/interfaces';
$log = runBridgeSh('write_bridge_stanza ens3 subnet 10.0.0.7/24 10.0.0.1', [
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $out,
]);
expect(file_get_contents($out))->not->toContain('inet6 static')
->and($log)->toContain('IPv6');
});
it('nimmt die Zusatzrouten des Anbieters mit auf die Brücke', function () {
// Was der Anbieter extra eingetragen hat, verliert der Host sonst — und es
// fällt erst auf, wenn jemand das Ziel dahinter braucht.
$ip = fakeIp($this->dir, [
'-4 route show dev enp0s31f6' => "49.12.121.65 scope link\n10.128.0.0/16 via 49.12.121.65\n49.12.121.64/26 proto kernel scope link src 49.12.121.79",
'-6 -o addr show dev enp0s31f6 scope global' => '',
'-6 route show default' => '',
]);
$sys = fakeSysNet($this->dir, 'enp0s31f6', 'a8:a1:59:00:11:22');
$out = $this->dir.'/interfaces';
runBridgeSh('write_bridge_stanza enp0s31f6 subnet 49.12.121.79/26 49.12.121.65', [
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $out,
]);
expect(file_get_contents($out))
->toContain('up ip route add 10.128.0.0/16 via 49.12.121.65 dev vmbr0')
// Weder die Link-Route zum Gateway noch die Kernel-Route zum eigenen
// Subnetz: beide entstehen von selbst, und ein zweiter Versuch
// scheitert und nimmt die Strophe mit.
->not->toContain('up ip route add 49.12.121.65 ')
->not->toContain('up ip route add 49.12.121.64/26');
});
it('schreibt eine Strophe, die ein Mensch als von CluPilot erkennt', function () {
// Wer in sechs Monaten in diese Datei sieht, muss wissen, wer sie
// geschrieben hat und woraus.
$ip = fakeIp($this->dir, [
'-4 route show dev ens3' => '',
'-6 -o addr show dev ens3 scope global' => '',
'-6 route show default' => '',
]);
$sys = fakeSysNet($this->dir, 'ens3', 'de:ad:be:ef:00:04');
$out = $this->dir.'/interfaces';
runBridgeSh('write_bridge_stanza ens3 subnet 10.0.0.7/24 10.0.0.1', [
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $out,
]);
expect(file_get_contents($out))
->toContain('Von CluPilot geschrieben')
->toContain('EnsureNetworkBridge');
});
/*
|--------------------------------------------------------------------------
| Die Rückfahrkarte
|--------------------------------------------------------------------------
*/
it('schreibt ein Rücknahme-Skript, das den Grund festhält BEVOR es zurückspielt', function () {
// Ohne diese zwei Zeilen liest der Schritt nach dem Wiederverbinden
// `running` und pollt gegen einen Lauf, den es nicht mehr gibt — der
// Zeitgeber beendet den Treiber ja gerade nicht. Und zuerst schreiben, nicht
// zuletzt: ein halb geglücktes Zurückspielen soll das Urteil trotzdem
// hinterlassen.
$script = runBridgeSh('render_rollback_script 5', [
'CLUPILOT_WORK_DIR' => '/var/lib/clupilot/bridge',
]);
$stateAt = strpos($script, "printf 'failed'");
$restoreAt = strpos($script, 'tar xzf');
$doneAt = strpos($script, 'rolled-back');
expect($stateAt)->not->toBeFalse()
->and($restoreAt)->not->toBeFalse()
->and($doneAt)->not->toBeFalse()
->and($stateAt)->toBeLessThan($restoreAt)
->and($script)->toContain('/var/lib/clupilot/bridge/note')
// Das Signal, auf das CluPilot wartet: erst wenn das da ist, ist der
// alte Zustand wirklich zurück.
->and($doneAt)->toBeGreaterThan($restoreAt);
});
it('legt die Marke NICHT an, wenn das Zurückspielen scheitert', function () {
// Ohne diese Prüfung laufen tar und ifreload ins Leere, das Skript macht
// weiter und setzt `rolled-back` — CluPilot meldet dann „der alte Zustand
// ist zurück" und gibt auf, während der Host auf einer kaputten
// Konfiguration steht. Das ursprüngliche network.sh hatte dafür `set -e`;
// beim Umbau ist es verlorengegangen.
$work = $this->dir.'/work';
mkdir($work, 0o755, true);
$script = runBridgeSh('render_rollback_script 5', [
'CLUPILOT_WORK_DIR' => $work,
// Ein Archiv, das es nicht gibt: tar scheitert.
'CLUPILOT_NET_BACKUP' => $this->dir.'/gibtesnicht',
'CLUPILOT_UNIT_DIR' => $this->dir.'/units',
]);
file_put_contents($this->dir.'/rollback.sh', $script);
$result = Process::run('sh '.$this->dir.'/rollback.sh');
expect($result->exitCode())->not->toBe(0)
->and(file_exists($work.'/rolled-back'))->toBeFalse()
// Das Urteil steht trotzdem — es wird VOR dem Zurückspielen geschrieben.
->and(file_get_contents($work.'/state'))->toBe('failed');
});
it('schaltet die Rücknahme den entmachteten Netzverwalter wieder ein', function () {
// Sonst spielt sie eine /etc/network/interfaces zurück, die diese Maschine
// nie getragen hat, während der Verwalter, der es tat, abgeschaltet bleibt.
// Genau der tote Host, den der Zeitgeber verhindern soll.
$work = $this->dir.'/work';
$etc = $this->dir.'/etc';
mkdir($work, 0o755, true);
mkdir("{$etc}/cloud/cloud.cfg.d", 0o755, true);
file_put_contents("{$etc}/cloud/cloud.cfg", "datasource_list: [ Hetzner ]\n");
$env = [
'CLUPILOT_WORK_DIR' => $work,
'CLUPILOT_ETC' => $etc,
'CLUPILOT_NET_BACKUP' => $this->dir.'/sicherung',
'CLUPILOT_UNIT_DIR' => $this->dir.'/units',
'CLUPILOT_INTERFACES_D' => $this->dir.'/interfaces.d',
];
// Erst entmachten, dann das Skript fahren, das der Zeitgeber gestellt hat.
runBridgeSh('disown_network_manager cloud-init ens3', $env);
expect(file_exists("{$etc}/cloud/cloud.cfg.d/99-clupilot-disable-network.cfg"))->toBeTrue();
// Eine Sicherung, damit tar nicht vorher scheitert.
file_put_contents($this->dir.'/leer', "x\n");
Process::run('tar czf '.$this->dir.'/sicherung.tar.gz -C '.$this->dir.' leer');
$script = runBridgeSh('render_rollback_script 5', $env);
file_put_contents($this->dir.'/rollback.sh', $script);
Process::run('sh '.$this->dir.'/rollback.sh');
expect(file_exists("{$etc}/cloud/cloud.cfg.d/99-clupilot-disable-network.cfg"))->toBeFalse();
});
it('nimmt eine verdrängte Strophe aus dem Quellverzeichnis heraus', function () {
// `source /etc/network/interfaces.d/*` fasst auch eine umbenannte Datei —
// der Stern nimmt sie mit. Umbenennen allein löst die Kollision also nicht.
$etc = $this->dir.'/etc';
$d = $this->dir.'/interfaces.d';
$work = $this->dir.'/work';
mkdir($etc, 0o755, true);
mkdir($d, 0o755, true);
mkdir($work, 0o755, true);
file_put_contents("{$d}/50-cloud-init", "auto ens3\niface ens3 inet static\n address 10.0.0.7/24\n");
file_put_contents("{$d}/99-egal", "iface eth9 inet manual\n");
runBridgeSh('disown_network_manager "" ens3', [
'CLUPILOT_ETC' => $etc,
'CLUPILOT_INTERFACES_D' => $d,
'CLUPILOT_WORK_DIR' => $work,
]);
// Nichts, was der Stern noch fassen könnte.
expect(glob("{$d}/*"))->toBe(["{$d}/99-egal"])
->and(file_exists("{$work}/verdraengt/50-cloud-init"))->toBeTrue()
// Und die Rücknahme muss wissen, wohin damit.
->and(file_get_contents("{$work}/moved-aside"))->toContain("{$d}/50-cloud-init");
});
it('stellt die Rücknahme eine verdrängte Strophe zurück', function () {
$etc = $this->dir.'/etc';
$d = $this->dir.'/interfaces.d';
$work = $this->dir.'/work';
mkdir($etc, 0o755, true);
mkdir($d, 0o755, true);
mkdir($work, 0o755, true);
file_put_contents("{$d}/50-cloud-init", "iface ens3 inet static\n");
$env = [
'CLUPILOT_ETC' => $etc,
'CLUPILOT_INTERFACES_D' => $d,
'CLUPILOT_WORK_DIR' => $work,
'CLUPILOT_NET_BACKUP' => $this->dir.'/sicherung',
'CLUPILOT_UNIT_DIR' => $this->dir.'/units',
];
runBridgeSh('disown_network_manager "" ens3', $env);
expect(file_exists("{$d}/50-cloud-init"))->toBeFalse();
file_put_contents($this->dir.'/leer', "x\n");
Process::run('tar czf '.$this->dir.'/sicherung.tar.gz -C '.$this->dir.' leer');
$script = runBridgeSh('render_rollback_script 5', $env);
file_put_contents($this->dir.'/rollback.sh', $script);
Process::run('sh '.$this->dir.'/rollback.sh');
expect(file_exists("{$d}/50-cloud-init"))->toBeTrue();
});
it('räumt der Zeitgeber sich nach dem Feuern selbst weg', function () {
// Sonst liegen Unit-Dateien herum, die aussehen, als stünde noch eine
// Rücknahme aus.
expect(runBridgeSh('render_rollback_script 5'))
->toContain('clupilot-network-rollback.timer');
});
it('stellt den Zeitgeber, bevor irgendetwas verändert wird', function () {
// Die tragende Zusicherung des ganzen Entwurfs, geprüft an der Reihenfolge
// der Aufrufe. Umgekehrt wäre es die Reihenfolge, die einen Host dauerhaft
// unerreichbar macht.
$bin = $this->dir.'/bin';
mkdir($bin, 0o755, true);
file_put_contents("{$bin}/systemctl", "#!/bin/sh\necho \"systemctl \$*\" >> '{$this->dir}/calls'\n");
file_put_contents("{$bin}/ifreload", "#!/bin/sh\necho 'ifreload' >> '{$this->dir}/calls'\n");
chmod("{$bin}/systemctl", 0o755);
chmod("{$bin}/ifreload", 0o755);
$ip = fakeIp($this->dir, [
'-4 route show dev ens3' => '',
'-6 -o addr show dev ens3 scope global' => '',
'-6 route show default' => '',
]);
$sys = fakeSysNet($this->dir, 'ens3', 'de:ad:be:ef:00:05');
file_put_contents($this->dir.'/interfaces', "# alt\n");
runBridgeSh(
"backup_network_config\nschedule_network_rollback 5\nbuild_bridge ens3 subnet 10.0.0.7/24 10.0.0.1",
[
'CLUPILOT_IP' => $ip,
'CLUPILOT_SYS_NET' => $sys,
'CLUPILOT_INTERFACES_FILE' => $this->dir.'/interfaces',
'CLUPILOT_INTERFACES_D' => $this->dir.'/interfaces.d',
'CLUPILOT_NET_BACKUP' => $this->dir.'/sicherung',
'CLUPILOT_SYSTEMCTL' => "{$bin}/systemctl",
'CLUPILOT_IFRELOAD' => "{$bin}/ifreload",
'CLUPILOT_UNIT_DIR' => $this->dir.'/units',
'CLUPILOT_SBIN_DIR' => $this->dir.'/sbin',
'CLUPILOT_WORK_DIR' => $this->dir,
]
);
$calls = file_get_contents($this->dir.'/calls');
expect(strpos($calls, 'start clupilot-network-rollback.timer'))->not->toBeFalse()
->and(strpos($calls, 'ifreload'))->not->toBeFalse()
->and(strpos($calls, 'start clupilot-network-rollback.timer'))
->toBeLessThan(strpos($calls, 'ifreload'))
// Und die Sicherung muss existieren, bevor der Zeitgeber sie
// überhaupt zurückspielen könnte.
->and(file_exists($this->dir.'/sicherung.tar.gz'))->toBeTrue();
});
it('bestellt beim Abbestellen alles ab, was gestellt wurde', function () {
// Ein Zeitgeber, dessen Unit-Dateien liegen bleiben, sieht beim nächsten
// Hinsehen aus wie eine ausstehende Rücknahme.
$bin = $this->dir.'/bin';
mkdir($bin, 0o755, true);
file_put_contents("{$bin}/systemctl", "#!/bin/sh\necho \"systemctl \$*\" >> '{$this->dir}/calls'\n");
chmod("{$bin}/systemctl", 0o755);
runBridgeSh(
"schedule_network_rollback 5\ncancel_network_rollback",
[
'CLUPILOT_SYSTEMCTL' => "{$bin}/systemctl",
'CLUPILOT_UNIT_DIR' => $this->dir.'/units',
'CLUPILOT_SBIN_DIR' => $this->dir.'/sbin',
'CLUPILOT_WORK_DIR' => $this->dir,
]
);
expect(file_get_contents($this->dir.'/calls'))->toContain('stop clupilot-network-rollback.timer')
->and(file_exists($this->dir.'/units/clupilot-network-rollback.timer'))->toBeFalse()
->and(file_exists($this->dir.'/units/clupilot-network-rollback.service'))->toBeFalse()
->and(file_exists($this->dir.'/sbin/clupilot-network-rollback.sh'))->toBeFalse();
});
/*
|--------------------------------------------------------------------------
| Nachsehen — beide Richtungen
|--------------------------------------------------------------------------
*/
/** Eine `wg`-Attrappe, die einen Handshake von genau einem Peer meldet. */
function fakeWg(string $dir, string $peer, int $secondsAgo): string
{
$when = time() - $secondsAgo;
file_put_contents("{$dir}/wg", "#!/bin/sh\nprintf '%s\\t%s\\n' '{$peer}' '{$when}'\n");
chmod("{$dir}/wg", 0o755);
return "{$dir}/wg";
}
/** Eine Brücke, die steht und trägt. */
function fakeUpBridge(string $dir): string
{
return fakeIp($dir, [
'link show vmbr0' => '5: vmbr0: <BROADCAST,MULTICAST,UP> mtu 1500',
'-4 route show default' => 'default via 10.0.0.1 dev vmbr0',
'-4 -o addr show dev vmbr0 scope global' => '5: vmbr0 inet 10.0.0.7/24 scope global vmbr0',
]);
}
it('bestellt nicht ab, wenn der Tunnel steht, aber das Internet nicht erreichbar ist', function () {
$ip = fakeUpBridge($this->dir);
$wg = fakeWg($this->dir, 'HUBKEY=', 5);
$out = runBridgeSh(
verdictBody('bridge_proven'),
[
'CLUPILOT_IP' => $ip,
'CLUPILOT_WG' => $wg,
'CLUPILOT_WG_HUB_PUBKEY' => 'HUBKEY=',
],
// Kein Weg nach draußen — als Funktion gesetzt statt über eine Adresse,
// damit der Test nicht davon abhängt, ob im Container curl liegt.
pre: 'http_get() { return 1; }'
);
expect($out)->toBe('NEIN');
});
it('bestellt NICHT ab, wenn das Internet erreichbar ist, der Tunnel aber schal', function () {
// Der Fehlerfall, für den diese Prüfung existiert: ifreload bringt vmbr0
// sauber hoch, die Maschine erreicht das Internet, der Treiber wäre
// zufrieden — aber wg0 kommt nicht zurück. Dann lebt der Host öffentlich,
// CluPilot ist ausgesperrt, und wer hier abbestellt, hat die Rückfahrkarte
// weggeworfen.
$ip = fakeUpBridge($this->dir);
$wg = fakeWg($this->dir, 'HUBKEY=', 3600); // eine Stunde alt
$bin = $this->dir.'/bin';
mkdir($bin, 0o755, true);
file_put_contents("{$bin}/systemctl", "#!/bin/sh\necho \"systemctl \$*\" >> '{$this->dir}/calls'\n");
chmod("{$bin}/systemctl", 0o755);
$out = runBridgeSh(
verdictBody('bridge_proven'),
[
'CLUPILOT_IP' => $ip,
'CLUPILOT_WG' => $wg,
'CLUPILOT_WG_HUB_PUBKEY' => 'HUBKEY=',
'CLUPILOT_SYSTEMCTL' => "{$bin}/systemctl",
'CLUPILOT_HANDSHAKE_TRIES' => '1',
'CLUPILOT_HANDSHAKE_WAIT' => '0',
],
pre: 'http_get() { return 0; }'
);
expect($out)->toBe('NEIN')
// Einmal nachhelfen gehört dazu: das ist zu diesem Zeitpunkt gefahrlos,
// weil ifreload die SSH-Sitzung ohnehin schon mitgenommen hat, und
// verwandelt einen hängenden Tunnel in einen laufenden statt in eine
// Rücknahme.
->and(file_get_contents($this->dir.'/calls'))
->toContain('restart wg-quick@wg0');
});
it('bestellt ab, wenn beide Richtungen stimmen', function () {
$ip = fakeUpBridge($this->dir);
$wg = fakeWg($this->dir, 'HUBKEY=', 5);
$out = runBridgeSh(
verdictBody('bridge_proven'),
[
'CLUPILOT_IP' => $ip,
'CLUPILOT_WG' => $wg,
'CLUPILOT_WG_HUB_PUBKEY' => 'HUBKEY=',
],
pre: 'http_get() { return 0; }'
);
expect($out)->toBe('JA');
});
it('erkennt einen Handshake von einem FREMDEN Peer nicht als den des Hubs', function () {
// Auf demselben Hub liegen auch Mitarbeiter-Zugänge. Deren Handshake sagt
// nichts über CluPilots eigenen Weg hierher.
$wg = fakeWg($this->dir, 'IRGENDWER=', 5);
$out = runBridgeSh(
verdictBody('tunnel_handshake_fresh'),
['CLUPILOT_WG' => $wg, 'CLUPILOT_WG_HUB_PUBKEY' => 'HUBKEY=']
);
expect($out)->toBe('NEIN');
});
it('hält einen Handshake, der nie stattgefunden hat, nicht für frisch', function () {
// WireGuard meldet 0 für einen Peer, mit dem noch nie gesprochen wurde.
// Als Sekunden gelesen ist das 1970 — uralt, aber `0` ist auch der Wert,
// den eine naive Prüfung für „vorhanden" hält.
$wg = fakeWg($this->dir, 'HUBKEY=', 0);
file_put_contents($this->dir.'/wg', "#!/bin/sh\nprintf '%s\\t%s\\n' 'HUBKEY=' '0'\n");
$out = runBridgeSh(
verdictBody('tunnel_handshake_fresh'),
['CLUPILOT_WG' => $this->dir.'/wg', 'CLUPILOT_WG_HUB_PUBKEY' => 'HUBKEY=']
);
expect($out)->toBe('NEIN');
});
it('benutzt an keiner Stelle ping', function () {
// Hetzners Debian-Basis hat kein iputils-ping, und PrepareBaseSystem
// installiert es nicht (curl, gnupg, ifupdown2, chrony). Eine Prüfung damit
// sagte IMMER „nicht erreichbar", der Zeitgeber spielte IMMER zurück, der
// Schritt käme nie durch — dieselbe Falle, die ConfigureWireguard schon
// einmal erwischt hat.
expect(file_get_contents(base_path('deploy/bootstrap/lib/bridge.sh')))
->not->toMatch('/(^|[^-\w])ping\s/m');
});
/*
|--------------------------------------------------------------------------
| Der Treiber
|--------------------------------------------------------------------------
*/
it('schreibt die PID als allererstes', function () {
// Der Startbefehl wartet darauf, dass hier etwas steht, und bis dahin gilt
// der Lauf als nicht angelaufen. Steht es weiter unten, liest ein früher
// Poll `running`-aber-nicht-lebendig und erklärt einen gesunden Lauf für
// tot.
$driver = base_path('deploy/bootstrap/lib/bridge-run.sh');
expect(file_exists($driver))->toBeTrue('bridge-run.sh fehlt');
$pidAt = null;
foreach (file($driver) ?: [] as $i => $line) {
if (str_contains($line, '/pid"') && str_contains($line, '$$')) {
$pidAt = $i;
break;
}
}
expect($pidAt)->not->toBeNull('keine Zeile schreibt $$ in die pid-Datei')
->and($pidAt)->toBeLessThan(60);
});
it('stellt den Zeitgeber vor dem ersten verändernden Aufruf', function () {
// Dieselbe Zusicherung wie bei bridge.sh, hier auf der Ebene des Treibers:
// die Reihenfolge der AUFRUFE im Skripttext. Umgekehrt wäre es die
// Reihenfolge, die einen Host dauerhaft unerreichbar macht.
$driver = base_path('deploy/bootstrap/lib/bridge-run.sh');
expect(file_exists($driver))->toBeTrue('bridge-run.sh fehlt');
$text = file_get_contents($driver);
$backup = strpos($text, 'backup_network_config');
$schedule = strpos($text, 'schedule_network_rollback');
$disown = strpos($text, 'disown_network_manager');
$build = strpos($text, 'build_bridge');
expect($backup)->not->toBeFalse()
->and($schedule)->not->toBeFalse()
->and($disown)->not->toBeFalse()
->and($build)->not->toBeFalse()
->and($backup)->toBeLessThan($schedule)
->and($schedule)->toBeLessThan($disown)
->and($disown)->toBeLessThan($build);
});
it('bestellt den Zeitgeber nirgends selbst ab', function () {
// Nur der Zeitgeber stellt zurück, und nur CluPilot bestellt ihn ab — nach
// dem Wiederverbinden. Ein Treiber, der das selbst täte, rät über seine
// eigene Erreichbarkeit von außen.
$driver = base_path('deploy/bootstrap/lib/bridge-run.sh');
expect(file_exists($driver))->toBeTrue('bridge-run.sh fehlt');
expect(file_get_contents($driver))->not->toContain('cancel_network_rollback');
});
it('lässt den Treiber von einer Shell parsen', function () {
$driver = base_path('deploy/bootstrap/lib/bridge-run.sh');
expect(file_exists($driver))->toBeTrue('bridge-run.sh fehlt');
expect(Process::run(['sh', '-n', $driver])->successful())->toBeTrue();
});
it('erkennt cloud-init als Fremdverwalter des Netzes', function () {
// Aus dem laufenden Zustand abzuleiten löst das LESEN, nicht das SCHREIBEN.
// Führt cloud-init das Netz, griffe die Brücke entweder sofort nicht oder,
// schlimmer, sie griffe jetzt und würde beim nächsten Neustart wieder
// eingesammelt — mit Kunden darauf. Der Zeitgeber fängt diesen Fall NICHT
// ab, denn zu seiner Zeit war alles in Ordnung.
$etc = $this->dir.'/etc';
mkdir("{$etc}/cloud", 0o755, true);
file_put_contents("{$etc}/cloud/cloud.cfg", "datasource_list: [ Hetzner ]\n");
expect(callBridgeFn('foreign_network_manager', ['CLUPILOT_ETC' => $etc]))
->toBe('cloud-init');
});
it('meldet keinen Fremdverwalter auf einer Maschine mit reinem ifupdown', function () {
$etc = $this->dir.'/etc';
mkdir($etc, 0o755, true);
expect(callBridgeFn('foreign_network_manager', ['CLUPILOT_ETC' => $etc]))
->toBe('');
});
it('entmachtet cloud-init im gesicherten Stand', function () {
$etc = $this->dir.'/etc';
mkdir("{$etc}/cloud", 0o755, true);
file_put_contents("{$etc}/cloud/cloud.cfg", "datasource_list: [ Hetzner ]\n");
runBridgeSh('disown_network_manager cloud-init ens3', [
'CLUPILOT_ETC' => $etc,
// Die Notiz, aus der die Rücknahme später liest, WAS entmachtet wurde.
'CLUPILOT_WORK_DIR' => $this->dir.'/work',
]);
expect(file_get_contents("{$etc}/cloud/cloud.cfg.d/99-clupilot-disable-network.cfg"))
->toContain('network: {config: disabled}');
});
/**
* Baut eine Sandkiste, in der bridge-run.sh wirklich durchläuft.
*
* Der Kniff ist die `ip`-Attrappe: sie antwortet VOR dem `ifreload` anders als
* danach, weil die `ifreload`-Attrappe eine Marke setzt. Ohne das könnte
* `bridge_proven` nie wahr werden — die Brücke trägt die Standardroute ja erst,
* nachdem umgestellt wurde.
*
* @return array{work:string, calls:string}
*/
function bridgeSandbox(string $dir, bool $bridgeComesUp = true, int $handshakeAge = 5, bool $withGateway = true): array
{
$work = "{$dir}/work";
$bin = "{$dir}/bin";
$state = "{$dir}/state";
foreach ([$work, $bin, $state, "{$dir}/units", "{$dir}/sbin", "{$dir}/etc"] as $d) {
mkdir($d, 0o755, true);
}
copy(base_path('deploy/bootstrap/lib/bridge.sh'), "{$work}/bridge.sh");
file_put_contents("{$dir}/interfaces", "# die Fassung von vorher\n");
$up = $bridgeComesUp ? "[ -f '{$state}/bridged' ]" : 'false';
// Eine Standardroute ohne `via` ist eine Link-Route. Sie hat kein Gateway,
// und ein `awk '{ print $3 }'` läse dort den KARTENNAMEN.
$route = $withGateway ? 'default via 10.0.0.1 dev $DEV' : 'default dev $DEV scope link';
file_put_contents("{$bin}/ip", <<<SH
#!/bin/sh
if {$up}; then DEV=vmbr0; else DEV=enp0s31f6; fi
case "\$*" in
'-4 route show default') echo "{$route}" ;;
'-4 -o addr show dev enp0s31f6 scope global')
echo '2: enp0s31f6 inet 10.0.0.7/24 scope global enp0s31f6' ;;
'-4 -o addr show dev vmbr0 scope global')
{$up} && echo '5: vmbr0 inet 10.0.0.7/24 scope global vmbr0' ;;
'link show vmbr0') {$up} || exit 1 ;;
'-4 route show dev enp0s31f6')
echo '10.0.0.0/24 proto kernel scope link src 10.0.0.7' ;;
'-4 route get 10.0.0.1') echo '10.0.0.1 dev enp0s31f6 src 10.0.0.7' ;;
'-6 -o addr show dev enp0s31f6 scope global') ;;
'-6 route show default') ;;
*) exit 1 ;;
esac
SH);
file_put_contents("{$bin}/ifreload", "#!/bin/sh\ntouch '{$state}/bridged'\necho ifreload >> '{$dir}/calls'\n");
file_put_contents("{$bin}/systemctl", "#!/bin/sh\necho \"systemctl \$*\" >> '{$dir}/calls'\n");
file_put_contents("{$bin}/wg", "#!/bin/sh\nprintf '%s\\t%s\\n' 'HUBKEY=' '".(time() - $handshakeAge)."'\n");
file_put_contents("{$bin}/logger", "#!/bin/sh\nexit 0\n");
foreach (['ip', 'ifreload', 'systemctl', 'wg', 'logger'] as $f) {
chmod("{$bin}/{$f}", 0o755);
}
// `http_get` als Funktion: bridge.sh legt seine eigene nur unter einem
// `command -v`-Schutz an, wer zuerst da ist behält recht — und env wird vor
// bridge.sh gesourced.
file_put_contents("{$work}/env", implode("\n", [
"CLUPILOT_WORK_DIR={$work}",
"CLUPILOT_IP={$bin}/ip",
"CLUPILOT_IFRELOAD={$bin}/ifreload",
"CLUPILOT_SYSTEMCTL={$bin}/systemctl",
"CLUPILOT_WG={$bin}/wg",
"CLUPILOT_INTERFACES_FILE={$dir}/interfaces",
"CLUPILOT_INTERFACES_D={$dir}/interfaces.d",
"CLUPILOT_NET_BACKUP={$dir}/sicherung",
"CLUPILOT_UNIT_DIR={$dir}/units",
"CLUPILOT_SBIN_DIR={$dir}/sbin",
"CLUPILOT_SYS_NET={$dir}/sys",
"CLUPILOT_ETC={$dir}/etc",
'CLUPILOT_WG_HUB_PUBKEY=HUBKEY=',
'CLUPILOT_HANDSHAKE_TRIES=1',
'CLUPILOT_HANDSHAKE_WAIT=0',
'http_get() { return 0; }',
'',
]));
fakeSysNet($dir, 'enp0s31f6', 'a8:a1:59:00:11:22');
return ['work' => $work, 'calls' => "{$dir}/calls"];
}
it('fährt den ganzen Ablauf durch und meldet ok', function () {
// Bis hierher prüfen die Tests, dass der Treiber DASTEHT — `sh -n` und die
// Reihenfolge im Text. Keiner prüft, dass er LÄUFT. Genau das ist aber die
// Datei, die auf einem echten Host das Netz umstellt.
$box = bridgeSandbox($this->dir);
$result = Process::path($box['work'])
->env(['CLUPILOT_WORK_DIR' => $box['work']])
->run('sh '.base_path('deploy/bootstrap/lib/bridge-run.sh'));
expect(trim((string) file_get_contents($box['work'].'/state')))->toBe('ok')
->and(trim((string) file_get_contents($box['work'].'/phase')))->toBe('wartet auf CluPilot')
->and($result->exitCode())->toBe(0)
// Die Strophe ist geschrieben und trägt die Karte als Port.
->and(file_get_contents($this->dir.'/interfaces'))->toContain('bridge-ports enp0s31f6')
// Und die Rückfahrkarte steht noch: abbestellen ist CluPilots Sache.
->and(file_exists($this->dir.'/units/clupilot-network-rollback.timer'))->toBeTrue()
->and(file_get_contents($box['calls']))->not->toContain('stop clupilot-network-rollback.timer');
});
it('schreibt kein Gateway in die Strophe, wenn die Standardroute keins hat', function () {
// Der Beweis über den PRODUKTIVPFAD, nicht über eine Einzelfunktion.
// `detect_network_style` auf `default_gateway()` umzustellen half nichts,
// solange bridge-run.sh sein Gateway weiter mit `awk '{ print $3 }'` las:
// der Treiber reichte `ens3` an build_bridge weiter, und in der Strophe
// stand `gateway ens3`. Ein Test an der Bibliothek allein hätte das nie
// gesehen.
$box = bridgeSandbox($this->dir, withGateway: false);
Process::path($box['work'])
->env(['CLUPILOT_WORK_DIR' => $box['work']])
->run('sh '.base_path('deploy/bootstrap/lib/bridge-run.sh'));
$stanza = (string) file_get_contents($this->dir.'/interfaces');
expect($stanza)->toContain('address 10.0.0.7/24')
->not->toContain('gateway enp0s31f6')
->not->toContain('pointopoint')
// Die Link-Route geht sonst beim Umbau verloren.
->toContain('up ip route add default dev vmbr0');
});
it('nimmt Karte und Gateway aus DERSELBEN Standardroute', function () {
// Bei zwei Standardrouten nahm `detect_primary_interface` das `dev` der
// ersten und `default_gateway` das `via` der zweiten — die Brücke bekäme
// die Karte der einen mit dem Gateway der anderen.
$ip = fakeIp($this->dir, [
'-4 route show default' => "default dev ens3 scope link\ndefault via 10.0.0.1 dev ens4 metric 200",
]);
expect(runBridgeSh('detect_primary_interface', ['CLUPILOT_IP' => $ip]))->toBe('ens3')
->and(runBridgeSh('default_gateway', ['CLUPILOT_IP' => $ip]))->toBe('');
});
it('meldet failed und lässt den Zeitgeber stehen, wenn die Brücke nicht trägt', function () {
// Der Fall, für den die ganze Konstruktion gebaut ist. Der Treiber räumt
// NICHT selbst auf — er überlässt es dem Zeitgeber und sagt nur, warum.
$box = bridgeSandbox($this->dir, bridgeComesUp: false);
$result = Process::path($box['work'])
->env(['CLUPILOT_WORK_DIR' => $box['work']])
->run('sh '.base_path('deploy/bootstrap/lib/bridge-run.sh'));
expect(trim((string) file_get_contents($box['work'].'/state')))->toBe('failed')
->and($result->exitCode())->toBe(1)
->and(file_get_contents($box['work'].'/note'))->toContain('Zeitgeber')
->and(file_exists($this->dir.'/units/clupilot-network-rollback.timer'))->toBeTrue()
->and(file_get_contents($box['calls']))->not->toContain('stop clupilot-network-rollback.timer');
});
it('meldet failed, wenn die Brücke steht, der Tunnel aber schal bleibt', function () {
// Öffentlich erreichbar und trotzdem ausgesperrt: die Richtung, die der
// Treiber ohne die Handshake-Prüfung für Erfolg gehalten hätte.
$box = bridgeSandbox($this->dir, handshakeAge: 3600);
Process::path($box['work'])
->env(['CLUPILOT_WORK_DIR' => $box['work']])
->run('sh '.base_path('deploy/bootstrap/lib/bridge-run.sh'));
expect(trim((string) file_get_contents($box['work'].'/state')))->toBe('failed')
->and(file_get_contents($box['calls']))->toContain('restart wg-quick@wg0')
->and(file_exists($this->dir.'/units/clupilot-network-rollback.timer'))->toBeTrue();
});
it('lässt jede Bibliothek des Bootstraps von einer Shell parsen', function () {
// network.sh und proxmox.sh werden beim Herauslösen beschnitten. Ein
// verrutschter Schnitt fiele sonst erst auf dem Rettungssystem-Weg auf, und
// der wird selten gefahren.
foreach (glob(base_path('deploy/bootstrap/lib/*.sh')) ?: [] as $file) {
expect(Process::run(['sh', '-n', $file])->successful())
->toBeTrue('kein gültiges POSIX-sh: '.$file);
}
});