KI-Training setzt Webarchive unter Druck: Immer mehr Medien blockieren die Wayback Machine

29.05.2026, Zürich – KI-Systeme verändern zunehmend die Spielregeln des offenen Webs. Immer mehr Nachrichtenseiten schränken deshalb den Zugriff der Wayback Machine des Internet Archive ein. Medienhäuser befürchten, dass archivierte Inhalte indirekt für das Training von KI-Modellen genutzt werden könnten.

Bekannte internationale Medien wie The New York Times, USA Today, The Guardian, El País oder Le Monde gehören zu den Organisationen, die Archivierungs-Crawler teilweise blockieren oder einschränken. Laut Analysen des Nieman Journalism Lab betrifft die Entwicklung inzwischen mehrere hundert Nachrichtenseiten weltweit.

robots.txt wird zum strategischen KI-Thema

Technisch erfolgen viele dieser Sperren über sogenannte robots.txt-Dateien. Damit können Webseitenbetreiber bestimmten Crawlern den Zugriff auf Inhalte untersagen. Ursprünglich wurde robots.txt vor allem zur Steuerung von Suchmaschinen entwickelt. Im KI-Zeitalter wird die Datei jedoch zunehmend zu einem strategischen Instrument gegen automatisiertes Datensammeln und KI-Training.

Viele Verlage kritisieren seit Monaten, dass KI-Unternehmen Inhalte aus dem offenen Web für das Training ihrer Systeme verwenden. Selbst wenn einzelne KI-Crawler blockiert werden, könnten archivierte Versionen von Webseiten theoretisch weiterhin als indirekte Quelle genutzt werden. Genau diese Sorge scheint bei zahlreichen Medienhäusern zu wachsen.

Das offene Web wird defensiver

Damit verändert sich das Web zunehmend von einem offenen Archivsystem zu einem stärker kontrollierten Informationsraum. Während Archive früher vor allem als Werkzeug für Forschung, Transparenz und digitale Geschichtsschreibung galten, stehen sie heute plötzlich mitten in der globalen KI-Debatte.

Kritiker warnen davor, dass mit jeder zusätzlichen Sperre langfristig auch ein Teil der digitalen Öffentlichkeit verloren gehen könnte. Gerade bei Nachrichteninhalten spielt die Archivierung eine wichtige Rolle, weil Artikel geändert, aktualisiert oder gelöscht werden können. Die Wayback Machine gilt seit Jahrzehnten als eine der wichtigsten öffentlichen Quellen zur Dokumentation der Entwicklung des Internets.

Schweizer Medien bisher kaum sichtbar

Für grosse Schweizer Medienhäuser wie Ringier, TX Group, CH Media, NZZ oder SRG SSR gibt es derzeit keine belastbare öffentliche Bestätigung, dass sie auf bekannten Listen der Wayback-Blockierer erscheinen. Internationale Berichte nennen zwar mehrere europäische Medienhäuser, Schweizer Verlage werden bislang jedoch kaum erwähnt. Ob ähnliche Massnahmen in der Schweiz bereits geprüft werden, ist öffentlich weitgehend unklar.

HELP.ch fordert vertrauenswürdige und nachvollziehbare Datenquellen

Aus Sicht von HELP.ch werden vertrauenswürdige, strukturierte und nachvollziehbare Datenquellen für KI-Systeme künftig immer wichtiger. Gleichzeitig bleibt die langfristige Archivierung digitaler Inhalte ein zentraler Bestandteil der öffentlichen Nachvollziehbarkeit im Internet.

Die Diskussion zeigt, dass künftig nicht nur Inhalte selbst entscheidend sind, sondern auch deren Herkunft, Struktur, Aktualität und Transparenz. Während wahlloses Scraping zunehmend kritisiert wird, gewinnen klar strukturierte Datenquellen und nachvollziehbare Informationssysteme an Bedeutung.

Mit Plattformen wie help.swiss und den strukturierten Schweizer Unternehmensdaten von HELP.ch steht genau diese Frage im Zentrum: Wie können Informationen so bereitgestellt werden, dass sie für Menschen, Suchmaschinen und KI-Systeme verständlich bleiben, ohne journalistische Inhalte oder urheberrechtlich geschützte Werke unkontrolliert auszunutzen?

Wer kontrolliert künftig digitales Wissen?

Die Debatte rund um die Wayback Machine zeigt damit ein grundlegendes Problem der KI-Ära: Wer kontrolliert künftig den Zugang zu digitalen Informationen – und welche Inhalte bleiben langfristig überhaupt noch öffentlich auffindbar?

Klar ist bereits heute: Das offene Web verändert sich. Inhalte werden stärker geschützt, Zugriffe präziser gesteuert und Datenquellen zunehmend bewertet. Für KI-Systeme wird damit entscheidend, welche Informationen offen, vertrauenswürdig, strukturiert und langfristig verfügbar bleiben.

Hintergrund zum Thema digitale Datenkontrolle und KI:
Das offene Internet verändert sich: Warum Unternehmen ihre digitalen Daten wieder stärker kontrollieren.

Hinweis der Redaktion: Die Bildrechte liegen beim jeweiligen Herausgeber.