Wie wir Websites abrufen

Agent Ready misst auf Anforderung eines Besuchers genau eine Webseite und belegt jeden Befund. Diese Seite nennt den Zweck, den Abrufer, den Modellanbieter, die Speicherdauer und den Widerspruchsweg.

Wer abruft

Der Abruf trägt genau diese Kennung:

Mozilla/5.0 (compatible; AgentReadyBot/1.0; +https://ai.pocket.page/scanner/abruf)

Eine fremde Bot-Kennung wird nie verwendet. Die Kontaktadresse steht bewusst nicht in der Kennung, sondern auf dieser Seite.

Was abgerufen wird

• Zuerst das Regelwerk: Der Weiterleitungskette wird ohne Lesen eines Inhalts gefolgt, dann wird die robots.txt der Adresse abgerufen, die tatsächlich geantwortet hat. Der Seiteninhalt wird erst danach gelesen, und nur wenn die Regeln ihn zulassen.
• Die eingegebene Seite, nach höchstens 5 Weiterleitungen; jede Zwischenstation wird vor dem Abruf erneut geprüft.
• Höchstens 10 Sekunden pro Abruf und höchstens 2 MB pro Datei; größere Antworten werden beim Lesen abgebrochen.
• Es wird nur gelesen: nichts wird ausgelöst, nichts abgeschickt und keine Adresse erraten. Abgerufen wird die eingegebene Seite, nicht die Website.
• Technische Schutzmaßnahmen werden benannt, nie umgangen.
• Ein Vorbehalt in der robots.txt wird ebenso befolgt, nie umgangen. Es gibt dafür keine Einstellung, und dass ein Besucher die Adresse eingegeben hat, hebt ihn nicht auf.
• Ist das Regelwerk nicht feststellbar — die robots.txt ist nicht erreichbar, antwortet mit einem Serverfehler, läuft in die Zeitüberschreitung oder leitet auf einen anderen Host —, wird kein Seiteninhalt abgerufen, nichts im Browser dargestellt und nichts an das Modell übergeben. Der Bericht bleibt dann ebenfalls leer und nennt als Grund »Das Regelwerk der Seite war nicht feststellbar«.

Modellanbieter

Die Textauswertung läuft bei Cloudflare (Workers AI) mit dem festgelegten Modell @cf/zai-org/glm-5.3-flash. Impressums- und Kontaktseiten werden dem Modell nie übergeben.

Speicherdauer

Ein Bericht ist sieben Tage erreichbar und danach gelöscht; ein Rest ohne Aussage über jemanden verfällt dreißig Tage später. Abgerufenes HTML wird nach der Auswertung verworfen. Gespeichert bleiben nur belegtaugliche Ausschnitte von höchstens 300 Zeichen mit Quelle und Zeitpunkt.

Abruf unterbinden

Zwei Wege, beide ohne Konto:

User-agent: AgentReadyBot
Disallow: /

Diese Regel in der robots.txt wirkt sofort. Sie ist der kürzeste Weg: Der Bericht zeigt dann »Dieser Betreiber hat uns ausgeschlossen« und keinen einzigen Befund.

Ein allgemeiner Vorbehalt gegenüber allen Abrufprogrammen wird genauso befolgt:

User-agent: *
Disallow: /

Gibt es eine Gruppe eigens für AgentReadyBot, entscheidet sie; sonst entscheidet die Gruppe User-agent: *. In beiden Fällen bleibt der Bericht leer — er nennt nur, warum nichts gemessen wurde: nach einem allgemeinen Vorbehalt »Dieser Betreiber hat den Abruf vorbehalten«. Es wird also weder der Seiteninhalt abgerufen noch ein Befund über die Seite veröffentlicht.

Wer die Datei nicht ändern kann oder einen bestehenden Bericht entfernt haben möchte, schreibt an arthur@pocket.page. Bearbeitung von Hand, Antwortfrist ein Monat.

Rechtsgrundlage

Berechtigtes Interesse nach Art. 6 Abs. 1 lit. f DSGVO: die technische Prüfung einer öffentlich erreichbaren Seite auf Anforderung eines Besuchers. Einzelheiten stehen in der Datenschutzerklärung.