So funktioniert es

Die Form eines Laufs

Es gibt vier Schritte, die Sie einmalig durchführen. Erstellen Sie ein Projekt: eine Website, die in KI-Antworten auffindbar sein soll. Fügen Sie eine Domain hinzu und weisen Sie nach, dass Sie die Kontrolle darüber haben. Dazu veröffentlichen Sie eine kurze Challenge unter /.well-known/ava-site-verification oder als DNS TXT-Eintrag; wir rufen diese dann ab und überprüfen sie. Fügen Sie die Fragen hinzu, die Ihre Kunden tatsächlich stellen – und zwar in deren eigenen Worten, nicht in Ihren. Starten Sie einen Crawl. Dieser liest Ihre eigenen Seiten aus, damit eine Antwort anhand Ihrer veröffentlichten Inhalte überprüft werden kann.

Anschließend werden im Rahmen eines Stichprobenlaufs Ihre Fragen an einen KI-Anbieter gesendet und die Antworten aufgezeichnet. Die Auslösung der Läufe liegt ganz bei Ihnen; es finden keine Stichproben nach einem Zeitplan statt, den Sie nicht selbst festgelegt haben.

Warum es die Domain-Prüfung gibt

Es wird nichts gecrawlt, bis eine Domain verifiziert ist, und das ist eher eine Kontrollmaßnahme als eine Verzögerung. Ohne diese Maßnahme würde das Tool jede Adresse abrufen, die jemand eingibt – über unser Netzwerk und unter unserem Namen. Die Herausforderung ist kein Geheimnis – Sie veröffentlichen sie genau deshalb, damit wir sie lesen können. Diese Kenntnis bringt keinerlei Vorteil; der Nachweis der Kontrolle über eine Domain bedeutet nach wie vor, dass man auf dieser Domain veröffentlichen kann.

Was der Crawler tut und was er nicht tut

Das Tool ruft Ihre Seiten ab, erfasst jeweils die Adresse, den HTTP-Status, den Inhalts-Hash und das robots.txt-Ergebnis und speichert den HTML-Code so, wie er ausgeliefert wurde. Es berücksichtigt robots.txt, beschränkt sich auf genau die von Ihnen verifizierte Domain und lehnt Weiterleitungen ab, die diesen Host verlassen, anstatt ihnen zu folgen. Links zu anderen Hosts werden verworfen und nicht in die Warteschlange gestellt – so gerät ein Crawl Ihrer Hauptwebsite nicht zu anderen Seiten, auf die Sie zufällig verlinken.

Der Standardwert beträgt 25 Seiten. Das ist keine Kostenbeschränkung: Das Crawlen ist kostengünstig. Der Grund dafür ist, dass ein umfassender Durchlauf eines kleinen Servers eine von uns verursachte Belastung darstellt und dass die Aussagen eines Modells über ein Unternehmen eher von dessen Startseite, der „Über uns“-Seite und den Preisangaben geprägt sind als von Seite 300 eines Archivs. Sie können diesen Wert auf 500 erhöhen.

Welche KI-Systeme werden untersucht?

Die Anbieter, auf die Ihr Zugriff zulässt, werden über deren APIs genutzt. Bei jedem Durchlauf werden der Anbieter und das Modell im Datensatz genannt, sodass sich eine Zahl immer auf die Quelle zurückverfolgen lässt, die sie erzeugt hat. Ein Anbieter, den Ihr Zugriff ausschließt, wird als ausgeschlossen gemeldet – er wird niemals stillschweigend weggelassen, denn eine Zahl mit einem heimlich verringerten Nenner ist schlimmer als gar keine Zahl.

Untersucht wird die API, nicht das Endverbraucherprodukt. Wir messen nicht, was die Chat-Website einer angemeldeten Person mit einer Historie und einer Erinnerung an diese Person sagt. Das ist ein wesentlicher Unterschied, der ausdrücklich erwähnt und nicht beschönigt wird.

Der Datensatz und was er belegt

Jede Beobachtung wird gehasht. Ein Stichprobenbatch wird als Ganzes versiegelt: Ein Hash, der alle darin enthaltenen Beobachtungen abdeckt, wird signiert und an eine externe Zeitstempelbehörde gesendet, wobei das Ergebnis in jeden Datensatz des Batches zurückgeschrieben wird. Jeder kann den Hash einer Beobachtung neu berechnen, ihn unter den „Blättern“ des Stapels finden, die Wurzel neu berechnen und sie mit dem Zeitstempel abgleichen. Die Versiegelung ist auf Anfrage verfügbar.

Ein Siegel macht Änderungen nachweisbar; es macht einen Datensatz jedoch nicht unveränderlich. Nichts, was wir entwickeln, verhindert, dass ein Datensatz verändert wird. Das Siegel ermöglicht es lediglich jemandem, der uns nicht vertraut, festzustellen, dass eine Änderung vorgenommen wurde. Ein Anbieter, der behauptet, ein Datensatz könne niemals verändert werden, verspricht etwas, was keine Software in Bezug auf die von ihr gespeicherten Daten leisten kann.

Es gibt zwei Arten von Zeitstempeln. Der gewöhnliche ist ein echter kryptografischer Zeitstempel einer externen Stelle; er kann als Beweismittel vorgelegt werden, seine Richtigkeit wird jedoch gesetzlich nicht vorausgesetzt. Der qualifizierte Zeitstempel wird von einer akkreditierten EU-Behörde ausgestellt und genießt in der EU gesetzliche Anerkennung – er ist kostenpflichtig, daher umfasst Ihr Zugang eine festgelegte Anzahl, und im Dashboard wird angezeigt, wie viele noch verfügbar sind. Wenn ein Datensatz nicht mit einem qualifizierten Zeitstempel versehen wurde, wird dies im Datensatz vermerkt. Es wird niemals etwas als qualifiziert dargestellt, das es nicht ist.

Wo sich Ihre Daten befinden – und was das bedeutet und was nicht

Die Datensätze werden auf Infrastruktur in Neuseeland oder der EU gespeichert, wobei keine US-amerikanische Cloud in die Kette eingebunden ist, und die Versiegelung erfolgt durch My Digital Sovereignty Ltd, das den Signaturschlüssel verwahrt. Das ist es, was hier unter „souveräner Verwahrung“ zu verstehen ist.

Das bedeutet nicht, dass die Messdaten in einer von Ihnen gewählten Rechtsordnung verbleiben. Um zu messen, was OpenAI oder Perplexity über Sie sagen, müssen zwangsläufig OpenAI und Perplexity befragt werden, bei denen es sich um US-amerikanische Unternehmen handelt. Ihre Fragen und die Antworten werden an diese weitergeleitet. Was in einer von Ihnen gewählten Rechtsordnung verbleibt, ist der Datensatz.

Was dies nicht ist

Es handelt sich nicht um ein Ranking-Tool und es verspricht nicht, die Aussagen eines Modells über Sie zu ändern. Es berichtet darüber, was gesagt wird und welche Inhalte auf Ihrer eigenen Website diese Aussagen stützen oder ihnen widersprechen. Es wird nicht festgestellt, dass eine von Ihnen vorgenommene Änderung eine Änderung in einer Antwort verursacht hat – Modelle ändern sich im Hintergrund eines solchen Vergleichs, und ein Vorher-Nachher-Vergleich, der dies außer Acht lässt, wäre eher eine Geschichte als eine Messung.

Wenn etwas falsch erscheint

Ein Crawl, der in der Warteschlange verbleibt, bedeutet, dass der Worker-Prozess nicht läuft – teilen Sie uns dies bitte mit, wir werden das Problem beheben, nicht Sie. Ein Stichprobenlauf, der mit „runs exhausted“ abgelehnt wird, bedeutet, dass Ihr Zugangsguthaben aufgebraucht ist; es wurden keine Kosten berechnet und kein Anbieter wurde aufgerufen. Eine Beobachtung ohne Bescheinigung enthält in der Aufzeichnung den Grund dafür, anstatt ein leeres Feld zu zeigen.