MARIO + AIK / WEB SPACE Neugierig bleiben. Weiterdenken.
Mario und AikMario & Aik Space
Kleine Experimente. Menschliche Leitung. KI-Unterstützung.
← Alle Notizen

ZETTELWIRTSCHAFT / 052 · PROJEKTJOURNAL

sitemap.download: vom Crawl zum sauberen XML

Ein kleines Website-Werkzeug wuchs vom XML-Generator zu einer praktischen Anleitung für das Entdecken, Prüfen und Veröffentlichen einer Sitemap.

Notiz veröffentlicht · Projektzeitleiste ↓

Startseite von sitemap.download mit URL- und Bildoptionen neben einem ruhenden dunklen Crawl-Monitor.
sitemap.download · Startseite, aufgenommen am 6. November 2026. Englisch. Der Monitor ist im Ruhezustand; es werden keine Crawl-Daten von Besuchern gezeigt. Aktuelles Erscheinungsbild, nicht die erste Veröffentlichung.

Ein praktischer Auftrag

Am 16. September 2026 brachte Mario eine technische Spezifikation und eine neu registrierte Domain ein: sitemap.download. Die Idee war ein kostenloses, unabhängiges Werkzeug, das eine Website-Adresse entgegennimmt und ohne Benutzerkonto eine XML-Sitemap erzeugt. Erste Umsetzung und Veröffentlichung folgten am selben Tag. Die Website ist auf Englisch verfügbar.

Zusehen, wie eine Karte entsteht

Die Oberfläche stellt die Crawl-Konfiguration neben einen Live-Monitor. Besucher wählen Seiten-URLs oder Bilder, beginnen mit einer öffentlichen Adresse und verfolgen, wie sich Seitenversuche und entdeckte Links sammeln. Der Browser steuert den Crawl und erstellt das XML; ein schlanker Cloudflare-Worker-Proxy ruft die Seiteninhalte ab. Diese Unterscheidung ist wichtig: Seitenanfragen laufen durch den Dienst, obwohl die Ergebnisliste im Browser-Tab gespeichert wird.

Ein nützliches Ergebnis hat Grenzen

Der Crawler folgt HTML-Links desselben Ursprungs und stoppt nach höchstens 1.000 Seitenversuchen, einschließlich erfolgloser Anfragen. Er kann kein vollständiges Verzeichnis von Inhalten versprechen, die erst nach der Ausführung von JavaScript erscheinen, eine Anmeldung erfordern oder keinen auffindbaren Link haben. Verfügbare Teilergebnisse lassen sich dennoch prüfen. Seit November können Besucher vor dem Herunterladen Seiten abwählen; die Bildausgabe wird seitenweise zusammen mit den zugehörigen Bildverweisen ausgewählt.

Der Download ist nur ein Schritt

Ein Leitfaden erklärt, wie sich das XML prüfen und veröffentlichen lässt. Die durchsuchbaren FAQ wuchsen auf 59 Fragen in acht Kategorien, jede mit eigener Seite. Sechs weitere Wissensbereiche behandeln XML-Beispiele, häufige Fehler, vorhandene Plattform-Sitemaps, Website-Umzüge, mehrsprachige Websites und ein Glossar mit fünfzehn Begriffen. Kopierbare Beispiele machen die Erklärungen praktisch nutzbar.

Das Werkzeug so sorgfältig erklären, wie es gebaut wird

Die Neugestaltung im Oktober brachte einen dunkleren Crawl-Monitor und ein technischeres Layout. Spätere Texte benennen die Grenzen ausdrücklich: Eine Sitemap kann das Auffinden unterstützen, garantiert aber weder Indexierung noch Platzierung. Crawl-Ergebnisse sind vorübergehende Daten im Tab; beim Verlassen der Seite wird diese Sitzung gelöscht. Mario leitet das Projekt und behält die redaktionelle Verantwortung; Aik ist sein KI-Assistent und hilft bei Oberfläche, Umsetzung, Tests und erläuternden Inhalten.

Projektzeitleiste

Projektmeilensteine sind von der Veröffentlichung dieser Notiz am 6. November 2026 getrennt. Die Daten folgen den Projektaufzeichnungen und dem Kalender von Europe/Berlin.

  1. Projektauftrag

    Mario lieferte die technische Spezifikation und stellte die neu registrierte Domain sitemap.download vor. Die öffentliche Oberfläche war auf Englisch geplant.

  2. Erste lokale Umsetzung

    Die Sitemap-Modi für Seiten und Bilder, Fortschrittsanzeige, Stoppsteuerung und XML-Download wurden mit einem browsergesteuerten Crawler und einem Cloudflare-Abrufproxy umgesetzt. Die anfängliche Grenze lag bei 500 Seitenversuchen.

  3. Erste öffentliche Veröffentlichung

    Der Generator wurde unter sitemap.download veröffentlicht. Die Veröffentlichungsaufzeichnung bestätigt HTTPS, die öffentliche Oberfläche und einen tatsächlichen Seitenabruf über den Proxy.

  4. Technische Neugestaltung und eine höhere Grenze

    Ein dunklerer Crawl-Monitor, ein überarbeitetes Layout und ein gesonderter Sitemap-Leitfaden gingen online. Die Grenze stieg auf 1.000 Seitenversuche, und die Social-Media-Vorschau wurde aktualisiert.

  5. Vor dem Herunterladen prüfen

    Eine auswählbare Ergebnisliste, ein erweiterter Leitfaden und Hinweise für die Zeit nach dem Download wurden veröffentlicht. Die FAQ wuchsen anschließend auf 59 durchsuchbare Fragen in acht Kategorien mit einzelnen Antwortseiten.

  6. Eine praktische Wissenssammlung

    Sechs Wissensbereiche ergänzten XML-Beispiele, Fehlerdiagnose, Plattformhinweise, Migration, mehrsprachige Sitemaps und ein Glossar mit fünfzehn Begriffen. Die Veröffentlichungsaufzeichnung zählte siebzig URLs in der eigenen Sitemap der Website.

Rekonstruiert aus datierten Projektgesprächen, lokalen Prüfungen und Veröffentlichungsaufzeichnungen. Frühere Ideen werden nur datiert, wenn sie dokumentiert sind.

sitemap.download erkunden — Englisch ↗