// Führt beide Runden der Einzelprüfung zusammen und trägt das Ergebnis in die Grundgesamtheit ein. // Eine Hochstufung aus Runde 2 zählt nur, wenn ein Kritiker sie selbst bestätigt hat. // Ergebnis: daten/einzelpruefung/final.json, daten/universum.jsonl, daten/hosts-korrektur.txt import { copyFileSync, existsSync, readFileSync, writeFileSync } from 'node:fs'; import { dirname, join } from 'node:path'; import { fileURLToPath } from 'node:url'; const hier = dirname(fileURLToPath(import.meta.url)); const pfad = (d) => join(hier, 'daten', d); const ein = (d) => JSON.parse(readFileSync(pfad(`einzelpruefung/${d}`), 'utf8')); const jsonl = (d) => (existsSync(pfad(d)) ? readFileSync(pfad(d), 'utf8').trim().split('\n').filter(Boolean).map((z) => JSON.parse(z)) : []); const URTEILE = new Set(['offiziell_eigen', 'offiziell_verwaltung', 'nicht_offiziell', 'nicht_entscheidbar']); const offiziell = (u) => String(u).startsWith('offiziell'); const hostVon = (url) => new URL(url).hostname.toLowerCase().replace(/\.$/, ''); const urteile = new Map(ein('stand-1.json').map((u) => [u.host, u])); const runde2 = new Set(); for (let n = 1; n <= 6; n++) { for (const u of ein(`runde2-ergebnis-${n}.json`)) { if (!urteile.has(u.host) || !URTEILE.has(u.urteil)) throw new Error(`Runde 2: ${u.host}`); urteile.set(u.host, { ...urteile.get(u.host), ...u, runde: 2 }); runde2.add(u.host); } } const geprueft = new Set(); let abweichungen = 0; for (const k of ['A', 'B']) { const kritik = ein(`runde2-kritik-${k}.json`); for (const h of kritik.geprueft ?? []) geprueft.add(h); for (const a of kritik.abweichungen ?? []) { const u = urteile.get(a.host); if (!u || !URTEILE.has(a.richtig)) throw new Error(`Kritik ${k}: ${a.host}`); abweichungen++; urteile.set(a.host, { ...u, urteil: a.richtig, beleg_url: a.beleg_url ?? u.beleg_url, begruendung: a.begruendung ?? u.begruendung, richtige_url: Object.hasOwn(a, 'richtige_url') ? a.richtige_url : u.richtige_url, kritik: true }); geprueft.add(a.host); } } let ungeprueft = 0; for (const h of runde2) { const u = urteile.get(h); if (offiziell(u.urteil) && !geprueft.has(h)) { ungeprueft++; urteile.set(h, { ...u, urteil: 'nicht_entscheidbar', begruendung: 'Hochstufung ohne eigene Bestätigung des Kritikers nicht übernommen.' }); } } for (const u of urteile.values()) if (!offiziell(u.urteil)) u.richtige_url = null; writeFileSync(pfad('einzelpruefung/final.json'), JSON.stringify([...urteile.values()], null, 1)); if (!existsSync(pfad('universum-vor-einzelpruefung.jsonl'))) copyFileSync(pfad('universum.jsonl'), pfad('universum-vor-einzelpruefung.jsonl')); const basis = jsonl('universum-vor-einzelpruefung.jsonl'); const bekannt = new Set(['messung-voll.jsonl', 'messung-nach.jsonl', 'messung-final.jsonl', 'messung-ziel.jsonl'].flatMap((d) => jsonl(d).map((m) => m.host))); const zeilen = basis.map((g) => { const u = urteile.get(g.host); if (!u) return g; const gilt = !Array.isArray(u.gilt_fuer_ags) || u.gilt_fuer_ags.length === 0 || u.gilt_fuer_ags.includes(g.ags); const urteil = gilt ? u.urteil : 'nicht_entscheidbar'; const neu = { ...g, einzelurteil: urteil, einzelrunde: u.runde }; if (offiziell(urteil) && u.richtige_url) { neu.url = u.richtige_url; neu.host = hostVon(u.richtige_url); neu.quelle = 'einzelpruefung'; } return neu; }); writeFileSync(pfad('universum.jsonl'), `${zeilen.map((z) => JSON.stringify(z)).join('\n')}\n`); const neueHosts = [...new Set(zeilen.filter((z) => z.host && !bekannt.has(z.host)).map((z) => z.host))].sort(); writeFileSync(pfad('hosts-korrektur.txt'), `${neueHosts.join('\n')}\n`); const proUrteil = {}; for (const u of urteile.values()) proUrteil[u.urteil] = (proUrteil[u.urteil] ?? 0) + 1; const proGemeinde = {}; for (const z of zeilen) if (z.einzelurteil) proGemeinde[z.einzelurteil] = (proGemeinde[z.einzelurteil] ?? 0) + 1; console.log(JSON.stringify({ adressen: urteile.size, urteile: proUrteil, gemeinden: proGemeinde, kritikAbweichungen: abweichungen, ohneKritikZurueckgestuft: ungeprueft, korrigierteAdressen: [...urteile.values()].filter((u) => u.richtige_url).length, neueHosts: neueHosts.length }));