blob: ce9963356ad3b4df9925332ca81ebe2d6f443dad [file] [log] [blame]
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +02001#!/bin/sh
Matthias Andreas Benkard7d46f072026-08-24 21:43:05 +02002# SPDX-FileCopyrightText: 2026 Matthias Andreas Benkard <code@mail.matthias.benkard.de>
Matthias Andreas Benkarda5d55442026-08-23 08:31:49 +02003# SPDX-License-Identifier: AGPL-3.0-or-later
4
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +02005# Macht aus dem Übersetzerergebnis ein auslieferbares Verzeichnis. Läuft in der Phase
6# „package“ des Profils -Pwasm, unmittelbar nach native-image.
7#
8# 1. Der Textzwischenschritt aendggner.js.wat (mehrere hundert Megabyte) wird entfernt.
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +02009# 2. Das Modul geht durch wasm-opt -Oz, sofern Binaryen zur Hand ist.
10# 3. Der Quelltext der gebauten Fassung wird als Tarball beigelegt — AGPLv3 §13 verlangt
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +020011# beim Netzwerkbetrieb einen Quellcode-Zugang für die Nutzer:innen, und der Footer der
12# Startseite verweist darauf.
Matthias Andreas Benkardc1013fc2026-08-29 07:24:42 +020013# 4. Die Startseite bekommt unter dem Titel das Datum des gebauten Commits.
14# 5. Nur die vom Bau erzeugten Dateien bleiben stehen; alles hier Liegende wird
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +020015# hochgeladen.
Matthias Andreas Benkardc1013fc2026-08-29 07:24:42 +020016# 6. Auf Wunsch (VORKOMPRIMIEREN=1) werden die großen Dateien vorkomprimiert.
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +020017#
18# Zielplattform ist Cloudflare Workers: dort gilt eine Grenze von 25 MiB je Datei
19# (unkomprimiert), und komprimiert wird beim Ausliefern ohnehin. Deshalb ist die
20# Vorkompression abgeschaltet und die Größe jeder Datei wird geprüft. Wer stattdessen
21# selbst mit nginx ausliefert (deploy/nginx-aendggner.conf, gzip_static/brotli_static),
22# ruft das Skript mit VORKOMPRIMIEREN=1 auf.
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +020023#
24# Aufruf: deploy/webpaket.sh <ausgabeverzeichnis> (Standard: target/web)
25
26set -eu
27
28ziel="${1:-target/web}"
29quelle="$(CDPATH='' cd -- "$(dirname -- "$0")/.." && pwd)"
30
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +020031# Cloudflare Workers nimmt keine Datei über 25 MiB an.
32grenze_datei=26214400
33# Der Quelltext misst ein Viertel Megabyte. Wächst das Archiv über diese Schranke, sind
34# wieder Massendaten ins Repository geraten, die dort nicht hingehören (siehe
35# .gitattributes) — dann lieber der Bau ab als ein unbrauchbares Paket.
36grenze_archiv=8388608
37
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +020038if [ ! -d "$ziel" ]; then
39 echo "webpaket: $ziel gibt es nicht — erst -Pwasm package laufen lassen." >&2
40 exit 1
41fi
42
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +020043groesse() {
44 wc -c <"$1" | tr -d ' '
45}
46
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +020047# 1. Zwischenschritt fort.
48rm -f "$ziel/aendggner.js.wat"
49
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +020050# 2. Nachoptimierung. -Oz zieht die Codegröße noch einmal spürbar zusammen.
51#
52# Die Merkmale sind einzeln aufgezählt, nicht als --all-features: Binaryen darf ausgeben,
53# was es darf, und mit --all-features nutzt es auch Vorschläge, die noch kein Browser
54# annimmt — das Modul scheitert dann erst beim Instanziieren („invalid heap type 'exact'“
55# aus den custom descriptors, „invalid import kind 127“ aus der kompakten
56# Importsektion). Aufgeführt ist deshalb nur, was ausgeliefert in den Browsern steht und
57# was Web Image braucht: WasmGC samt Referenztypen, das Ausnahmen-Proposal, endständige
58# Aufrufe. Fehlt wasm-opt, bleibt das Modul, wie es ist — der Bau soll daran nicht
59# scheitern.
Matthias Andreas Benkardf3f2a952026-09-01 06:57:50 +020060#
61# Jüngere Merkmale kennt nicht jedes Binaryen: „--enable-bulk-memory-opt“ etwa
62# fehlt den Paketfassungen der Linux-Verteilungen, und wasm-opt bricht dann mit
63# „Unknown option“ ab. Darum wird die Liste an der Hilfeausgabe gemessen und um
64# das gekürzt, was die vorgefundene Fassung nicht kennt: Was sie nicht kennt,
65# gibt sie auch nicht aus, das Ergebnis bleibt mithin gültig — nur womöglich um
66# ein paar Bytes größer.
67wasm_merkmale_alle="--enable-gc --enable-reference-types --enable-exception-handling
68 --enable-tail-call --enable-bulk-memory --enable-bulk-memory-opt
69 --enable-nontrapping-float-to-int --enable-sign-ext
70 --enable-mutable-globals --enable-multivalue --enable-extended-const
71 --enable-simd --enable-call-indirect-overlong"
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +020072
73if [ -f "$ziel/aendggner.js.wasm" ]; then
74 vorher="$(groesse "$ziel/aendggner.js.wasm")"
75 if command -v wasm-opt >/dev/null 2>&1; then
Matthias Andreas Benkardf3f2a952026-09-01 06:57:50 +020076 wasm_hilfe="$(wasm-opt --help 2>&1)"
77 wasm_merkmale=""
78 wasm_fehlend=""
79 for merkmal in $wasm_merkmale_alle; do
80 if printf '%s\n' "$wasm_hilfe" \
81 | grep -qE -- "(^|[^A-Za-z0-9-])$merkmal([^A-Za-z0-9-]|\$)"; then
82 wasm_merkmale="$wasm_merkmale $merkmal"
83 else
84 wasm_fehlend="$wasm_fehlend $merkmal"
85 fi
86 done
87 if [ -n "$wasm_fehlend" ]; then
88 echo "webpaket: wasm-opt kennt diese Merkmale nicht und läuft ohne sie:" \
89 "$wasm_fehlend" >&2
90 fi
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +020091 # shellcheck disable=SC2086 # die Merkmalsliste soll in Wörter zerfallen
92 wasm-opt $wasm_merkmale -Oz \
93 -o "$ziel/aendggner.js.wasm.neu" "$ziel/aendggner.js.wasm"
94 mv "$ziel/aendggner.js.wasm.neu" "$ziel/aendggner.js.wasm"
95 echo "webpaket: wasm-opt: $vorher -> $(groesse "$ziel/aendggner.js.wasm") Bytes."
96 else
97 echo "webpaket: wasm-opt nicht gefunden — Modul bleibt unnachoptimiert" \
98 "($vorher Bytes)." >&2
99 fi
100fi
101
102# 3. Quelltext der gebauten Fassung.
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +0200103#
104# Ein veränderter Arbeitsbaum bricht den Bau ab: Der angebotene Quelltext muss der
105# ausgelieferten Fassung entsprechen, sonst ist die Auflage aus §13 verfehlt. Wer nur
106# ausprobieren will, setzt QUELLTEXT_UNGEPRUEFT=1.
107if ! git -C "$quelle" rev-parse --git-dir >/dev/null 2>&1; then
108 echo "webpaket: $quelle ist kein Git-Arbeitsbaum; ohne ihn lässt sich der Quelltext" >&2
109 echo " der gebauten Fassung nicht beilegen (AGPLv3 §13)." >&2
110 exit 1
111fi
112
113if [ -n "$(git -C "$quelle" status --porcelain)" ] && [ "${QUELLTEXT_UNGEPRUEFT:-}" != 1 ]; then
114 echo "webpaket: Der Arbeitsbaum trägt uneingecheckte Änderungen. Der beigelegte Quelltext" >&2
115 echo " wäre dann nicht der gebaute. Erst einchecken — oder für einen Probelauf" >&2
116 echo " QUELLTEXT_UNGEPRUEFT=1 setzen (dann nicht ausliefern)." >&2
117 exit 1
118fi
119
120fassung="$(git -C "$quelle" rev-parse HEAD)"
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +0200121archiv="$(CDPATH='' cd -- "$ziel" && pwd)/aendggner-quelltext.tar.gz"
122git -C "$quelle" archive --format=tar.gz --prefix=aendggner/ HEAD -o "$archiv"
123
124archivgroesse="$(groesse "$archiv")"
125if [ "$archivgroesse" -gt "$grenze_archiv" ]; then
126 echo "webpaket: Das Quelltextarchiv misst $archivgroesse Bytes und überschreitet damit" >&2
127 echo " die Schranke von $grenze_archiv. Vermutlich sind Massendaten ins" >&2
128 echo " Repository geraten; sie gehören in .gitattributes (export-ignore)." >&2
129 exit 1
130fi
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +0200131
132{
133 echo "ÄndGgner — Quelltext der ausgelieferten Fassung"
134 echo
135 echo "Commit: $fassung"
Matthias Andreas Benkardc1013fc2026-08-29 07:24:42 +0200136 echo "Fassung: $(git -C "$quelle" log -1 --format=%cs HEAD)"
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +0200137 echo "Gebaut: $(date -u '+%Y-%m-%dT%H:%M:%SZ')"
138 echo
Matthias Andreas Benkard8cbbaaa2026-08-23 13:20:48 +0200139 echo "Vollständig in aendggner-quelltext.tar.gz; Bauanleitung darin in README.md."
Matthias Andreas Benkard08aa3032026-08-23 13:21:55 +0200140 echo "Fortlaufend: https://git.benkard.de/mulk/aendggner"
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +0200141 echo
142 echo "Nicht im Archiv liegt der Beispielkorpus (src/test/resources/sampledata): Gesetzes-"
143 echo "und Drucksachentexte fremder Urheberschaft, an denen die Tests messen. Gebaut wird"
144 echo "ohne ihn; nur die Tests verlangen danach. Wer sie laufen lassen will, holt das"
145 echo "Repository von der oben genannten Adresse, wo der Korpus vollständig liegt."
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +0200146} > "$ziel/quelltext-fassung.txt"
147
Matthias Andreas Benkardc1013fc2026-08-29 07:24:42 +0200148# 4. Fassungsdatum der Startseite.
149#
150# Unter dem Titel steht „in der Fassung vom …“. Im Quelltext trägt die Marke das Datum des
151# letzten Handanlegens; ausgeliefert wird das Datum des gebauten Commits, damit die Angabe
152# nicht stillschweigend veraltet. Das Datum kommt aus %cs (JJJJ-MM-TT); date(1) bleibt
153# außen vor, weil BSD und GNU sich über die Schalter nicht einig sind.
154fassungsdatum="$(git -C "$quelle" log -1 --format=%cs HEAD)"
155jahr="${fassungsdatum%%-*}"
156rest="${fassungsdatum#*-}"
157monat="${rest%%-*}"
158tag="${rest#*-}"
159
160case "$monat" in
161 01) monatsname="Januar" ;; 02) monatsname="Februar" ;; 03) monatsname="März" ;;
162 04) monatsname="April" ;; 05) monatsname="Mai" ;; 06) monatsname="Juni" ;;
163 07) monatsname="Juli" ;; 08) monatsname="August" ;; 09) monatsname="September" ;;
164 10) monatsname="Oktober" ;; 11) monatsname="November" ;; 12) monatsname="Dezember" ;;
165 *) echo "webpaket: unlesbares Commit-Datum „$fassungsdatum“." >&2; exit 1 ;;
166esac
167
168# Führende Null im Tag ist im deutschen Fließtext unüblich.
169tag="${tag#0}"
170fassungstext="$tag. $monatsname $jahr"
171
172startseite="$ziel/index.html"
173if [ ! -f "$startseite" ]; then
174 echo "webpaket: $startseite fehlt — die statischen Seiten sind nicht mitkopiert." >&2
175 exit 1
176fi
177
178sed -e "s|<time datetime=\"[0-9-]*\">[^<]*</time>|<time datetime=\"$fassungsdatum\">$fassungstext</time>|" \
179 "$startseite" > "$startseite.neu"
180
181# Greift die Ersetzung nicht, ist die Marke im Vordruck umgebaut worden. Dann lieber der
182# Bau ab als eine falsch datierte Fassung.
183if ! grep -q "<time datetime=\"$fassungsdatum\">$fassungstext</time>" "$startseite.neu"; then
184 rm -f "$startseite.neu"
185 echo "webpaket: In index.html ist keine <time>-Marke unter dem Titel zu finden; das" >&2
186 echo " Fassungsdatum lässt sich nicht einsetzen." >&2
187 exit 1
188fi
189mv "$startseite.neu" "$startseite"
190echo "webpaket: Startseite trägt die Fassung vom $fassungstext."
191
192# 5. Nur das Gebaute bleibt liegen — was hier steht, geht hoch.
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +0200193rm -f "$ziel/.DS_Store"
194
Matthias Andreas Benkardc1013fc2026-08-29 07:24:42 +0200195# 6. Vorkompression, nur auf Anforderung (siehe Kopf). Der Tarball ist bereits gepackt und
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +0200196# bleibt außen vor.
197if [ "${VORKOMPRIMIEREN:-}" = 1 ]; then
198 for datei in "$ziel"/*.wasm "$ziel"/*.js "$ziel"/*.css "$ziel"/*.html "$ziel"/*.svg \
199 "$ziel"/*.txt; do
200 [ -f "$datei" ] || continue
201 gzip -9 -f -k -- "$datei"
202 if command -v brotli >/dev/null 2>&1; then
203 brotli -f -- "$datei"
204 fi
205 done
206
207 if ! command -v brotli >/dev/null 2>&1; then
208 echo "webpaket: brotli nicht gefunden — nur .gz angelegt." >&2
209 fi
210fi
211
212# Was zu groß ist, nimmt Cloudflare nicht an. Lieber hier auffallen als beim Hochladen.
213zugross=""
214for datei in "$ziel"/*; do
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +0200215 [ -f "$datei" ] || continue
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +0200216 if [ "$(groesse "$datei")" -gt "$grenze_datei" ]; then
217 zugross="$zugross $(basename "$datei") ($(groesse "$datei") Bytes)
218"
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +0200219 fi
220done
Matthias Andreas Benkardf3b47af2026-08-22 21:23:06 +0200221if [ -n "$zugross" ]; then
222 echo "webpaket: Diese Dateien überschreiten die 25-MiB-Grenze von Cloudflare Workers:" >&2
223 printf '%s' "$zugross" >&2
224 exit 1
Matthias Andreas Benkard2d33bf72026-08-16 06:40:07 +0200225fi
226
227echo "webpaket: $ziel ist auslieferbar (Fassung $(git -C "$quelle" rev-parse --short HEAD))."