// Ordnet alle gemessenen IP-Adressen erneut ihrem Netz zu und nimmt dabei immer den spezifischsten Präfix. // Ergebnis: daten/ip-netze.json, daten/as-namen-netzkorrektur.json import { promises as dns } from 'node:dns'; import { existsSync, readFileSync, writeFileSync } from 'node:fs'; import { dirname, join } from 'node:path'; import { fileURLToPath } from 'node:url'; const hier = dirname(fileURLToPath(import.meta.url)); const pfad = (d) => join(hier, 'daten', d); const jsonl = (d) => (existsSync(pfad(d)) ? readFileSync(pfad(d), 'utf8').trim().split('\n').filter(Boolean).map((z) => JSON.parse(z)) : []); const resolver = ['1.1.1.1', '8.8.8.8'].map((s) => { const r = new dns.Resolver({ timeout: 2500, tries: 2 }); r.setServers([s]); return r; }); async function txt(name) { for (let runde = 0; runde < 3; runde++) { for (const r of resolver) { try { return await r.resolveTxt(name); } catch (e) { if (e.code === 'ENODATA' || e.code === 'ENOTFOUND') return []; } } await new Promise((f) => setTimeout(f, 500 * (runde + 1))); } return null; } function nibbles(ip) { const [l, r = ''] = ip.split('::'); const a = l ? l.split(':') : []; const b = r ? r.split(':') : []; return [...a, ...Array(Math.max(0, 8 - a.length - b.length)).fill('0'), ...b].map((t) => t.padStart(4, '0')).join('').split('').reverse().join('.'); } const felder = (s) => s.split('|').map((x) => x.trim()); const laenge = (p) => Number(String(p).split('/')[1] ?? 0); const ips = new Set(); const alt = new Map(); for (const d of ['voll', 'nach', 'final', 'ziel', 'korrektur', 'korrektur2']) { for (const m of jsonl(`messung-${d}.jsonl`)) { for (const n of m.netz ?? []) if (n.ip) { ips.add(n.ip); alt.set(n.ip, n.asn); } for (const n of m.ns ?? []) if (n.ip) { ips.add(n.ip); alt.set(n.ip, n.asn); } } } const liste = [...ips]; const ergebnis = {}; const fehler = []; let pos = 0; await Promise.all(Array.from({ length: 6 }, async () => { while (pos < liste.length) { const ip = liste[pos++]; const name = ip.includes(':') ? `${nibbles(ip)}.origin6.asn.cymru.com` : `${ip.split('.').reverse().join('.')}.origin.asn.cymru.com`; const t = await txt(name); if (!t?.length) { fehler.push(ip); continue; } const [asn, prefix, land, rir] = t.map((e) => felder(e.join(''))).sort((a, b) => laenge(b[1]) - laenge(a[1]))[0]; ergebnis[ip] = { asn: asn.split(' ')[0], prefix, ipLand: land, rir }; } })); writeFileSync(pfad('ip-netze.json'), JSON.stringify(ergebnis)); const bekannt = {}; for (const d of ['voll', 'nach', 'final', 'ziel', 'korrektur', 'korrektur2']) if (existsSync(pfad(`as-namen-${d}.json`))) Object.assign(bekannt, JSON.parse(readFileSync(pfad(`as-namen-${d}.json`), 'utf8'))); const neu = {}; for (const a of new Set(Object.values(ergebnis).map((x) => x.asn))) { if (bekannt[a]?.name) continue; const t = await txt(`AS${a}.asn.cymru.com`); const f = t?.length ? felder(t[0].join('')) : []; neu[a] = { asn: a, land: f[1] || null, name: f[4] || null }; } writeFileSync(pfad('as-namen-netzkorrektur.json'), JSON.stringify(neu, null, 1)); const geaendert = Object.entries(ergebnis).filter(([ip, x]) => alt.get(ip) && alt.get(ip) !== x.asn); console.log(JSON.stringify({ ips: liste.length, zugeordnet: Object.keys(ergebnis).length, ohneAntwort: fehler.length, netzGeaendert: geaendert.length, neueNetze: Object.keys(neu).length, wechsel: geaendert.slice(0, 12).map(([, x]) => x.asn) }));