Ergebnisse, die Sie noch am selben Tag lesen können.

Diagramme je Frage statt einer Übersichtsseite

Die Ergebnisse sind so geordnet wie die Umfrage: Frage für Frage, in der Reihenfolge, in der die Teilnehmenden sie angetroffen haben. Jede Frage bekommt ihr eigenes Diagramm und ihre eigenen Zahlen, sodass das, was Sie ansehen, immer am genauen Wortlaut hängt, den die Menschen gelesen haben. Das wiegt schwerer, als es klingt. Ein „zufrieden“-Wert, losgelöst vom Fragetext, ist die Art, wie Umfrageergebnisse ein halbes Jahr später falsch zitiert werden.

Weil die Ergebnisse dem Aufbau der Umfrage folgen, entscheidet sich die Gestalt Ihrer Auswertung beim Bauen. Eine Matrixfrage, die acht Aussagen auf eine Zustimmungsskala legt, liefert acht vergleichbare Reihen; dieselben acht als getrennte Auswahlfragen fügen sich nicht so sauber zusammen. Wenn Sie wissen, dass Sie Punkte miteinander vergleichen wollen, fragen Sie sie als eine Matrix ab.

Wo Menschen aufhören: der Bericht zu den Abbrüchen

Zahlen sagen Ihnen, wie viele Daten Sie haben. Der Bericht zu den Abbrüchen sagt Ihnen, was die Umfrage mit den Menschen macht, die sie ausfüllen. Er enthält vier Dinge: die Abschlussquote, die Aufteilung in abgeschlossene und noch unfertige Antworten, die mittlere Bearbeitungsdauer und die Zahl der Antworten je Frage in der Reihenfolge, in der gefragt wurde. Der größte Rückgang zwischen zwei aufeinanderfolgenden Fragen ist hervorgehoben.

Diese Hervorhebung ist der nützliche Teil, solange eine Umfrage noch läuft. Haben deutlich weniger Menschen Frage 12 beantwortet als Frage 11, lohnt sich die erneute Lektüre von Frage 12 noch heute Abend und nicht erst nach dem Ende der Beteiligung. Schuld ist meist eine Frage, die zu lang ist, zu persönlich oder gestellt wird, bevor die Umfrage sie sich verdient hat.

Es ist die Stelle des Aufmerksamkeitsverlusts, kein exakter Trichter

Das gehört klar gesagt. Bedingungslogik bedeutet, dass nicht alle jede Frage sehen. Eine niedrigere Antwortzahl bei Frage 12 kann also heißen, dass die halbe Stichprobe berechtigterweise daran vorbeigeleitet wurde. Der Bericht kann „sie sind gegangen“ nicht von „sie wurden nie gefragt“ unterscheiden — und er tut auch nicht so. Lesen Sie den hervorgehobenen Rückgang als Stelle des Aufmerksamkeitsverlusts, prüfen Sie Ihre Regeln daraufhin, ob eine davon ihn erklärt, und schreiben Sie die Frage erst dann neu.

Speichern und fortsetzen verwischt die Ränder auf dieselbe Weise: Hinter einer unfertigen Antwort kann eine Person mit einem Fortsetzungslink stehen, die nach der Mittagspause weitermachen will. Deshalb zeigt der Bericht abgeschlossen und unfertig als zwei Zahlen statt als eine Abbruchquote.

Die mittlere Dauer ist ein Nebenprodukt der Spam-Prüfungen

Der Median stammt aus Zeitangaben, die ohnehin erhoben wurden. Die Mindestverweildauer, die auf der Seite zum Spam-Schutz beschrieben ist, hält fest, wie lange eine Antwort gedauert hat, damit eine Einreichung, die schneller eintrifft, als ein Mensch die Fragen lesen kann, hinterfragt werden kann. Die mittlere Bearbeitungsdauer fällt dabei ab, sodass für sie nichts zusätzlich erhoben werden muss.

Halten Sie sie gegen Ihre eigene Behauptung: Wenn in der Einladung „fünf Minuten“ steht und der Median bei vierzehn liegt, stimmt entweder die E-Mail nicht oder die Umfrage. Die Zeitmessung ist allerdings nicht zwingend — ein fehlender Wert gilt nie als Spam, sodass ältere Geräte und fortgesetzte Teilantworten ganz normal absenden und lediglich nicht in den Median eingehen.

Zahlen, nie eine halb fertige Antwort

Teilantworten werden von einer Datenbankfunktion mit SECURITY DEFINER aggregiert. Die Tabelle der Teilantworten selbst trägt keine Richtlinien für die Zeilensicherheit und lässt sich nicht unmittelbar lesen; die Funktion ist der einzige Weg hinein, und was sie zurückgibt, sind Zahlen.

Sichtbar ist also, wie viele Menschen jede Frage beantwortet haben. Nicht sichtbar ist der Satz, den jemand in Frage 11 getippt und sich dann anders überlegt hat. Wer nicht abgesendet hat, hat nicht eingewilligt, gelesen zu werden. Das ist eine bewusste Entwurfsentscheidung und keine Einschränkung, und sie lässt sich nicht umstellen.

Einzelne Antworten lesen

Zusammenfassende Diagramme zeigen das Muster, einzelne Antworten den Grund. Sie können Antworten eine nach der anderen vollständig durchsehen, genau so, wie sie eingereicht wurden. Hier wird Freitext wirklich lesbar — eine Wortwolke sagt Ihnen nicht, dass vier Menschen dieselbe Beschwerde über denselben Parkplatz geschrieben haben.

Einzelne Antworten tragen außerdem alles, was die Umfrage im Hintergrund erfasst hat: versteckte Felder aus der Adresszeile, sodass Sie sehen, aus welchem Link oder welcher Gruppe eine Antwort stammt, und alle hochgeladenen Dateien, die in einem privaten Speicherbereich bleiben und über kurzlebige signierte Links erreicht werden, statt öffentlich ausgeliefert zu werden.

Punkte und Stufen

Nutzt die Umfrage eine Punktbewertung, kann jede Antwortoption Punkte tragen und jede Frage eine Gewichtung, und der erreichte Prozentwert führt zu einer Stufe auf der Abschlussseite. Bewertet werden nur Fragen, die tatsächlich angezeigt wurden — eine Verzweigung bestraft also niemanden still für einen Abschnitt, der ihm verborgen blieb. Beim Vergleich von Ergebnissen über mehrere Antworten hinweg ist genau das die Einzelheit, die den Vergleich redlich hält.

Erst die Testdaten heraus

Alle testen ihre eigene Umfrage mehrfach, meist mit Spaßantworten. „Testantworten löschen“ entfernt sie und mit ihnen ihre Uploads und Teilantworten, sodass Ihnen keine verwaisten Dateien und keine halb fertigen Sitzungen die Abschlussquote drücken. Machen Sie es einmal, unmittelbar bevor Sie den echten Link veröffentlichen. Zwei Wochen später ist es sehr viel schwerer zu entwirren.

Wer Ergebnisse sehen kann

Ergebnisse sind für Mitglieder der Organisation sichtbar, der die Umfrage gehört, im Rahmen der Rollen Inhaber / Administration / Mitglied. Zeilensicherheit gilt durchgehend, und die Trennung der Organisationen wird serverseitig festgelegt statt dem Browser geglaubt. Umfrageinhalte und Antworten werden in London auf britischer Infrastruktur gespeichert, verschlüsselt bei der Übertragung und im Ruhezustand.

Genau eine Sache ist für Teilnehmende bewusst sichtbar: die eigene Ergebnisstufe auf der Abschlussseite, sofern die Umfrage sie zeigen soll. Keine Zahl, kein Diagramm und keine Antwort einer anderen Person wird Teilnehmenden je offengelegt.

Was die Auswertung bewusst nicht leistet

Die Lücken genau zu benennen, nützt mehr, als so zu tun, als gäbe es keine:

• Keine KI-Zusammenfassung von Freitext. Offene Antworten lesen Sie, kein Modell schreibt sie um. Die KI hilft Ihnen, eine Umfrage zu entwerfen; die Antworten wertet sie nicht aus.
• Keine Tabellenansicht der Antworten. Es gibt in der Anwendung keine sortierbare Tabelle aller Antworten. Sie sehen sie einzeln durch oder nehmen die CSV.
• Keine Zeitmessung je Frage. Die Zeit wird für die Antwort als Ganzes erfasst, Sie erhalten also einen Median für die Umfrage und keine Rangliste, welche Frage am längsten gedauert hat.
• Berichte gelten je Umfrage. Jede Umfrage hat ihre eigene Ergebnisansicht. Zwei Umfragen miteinander zu vergleichen, ist Arbeit in der Tabellenkalkulation, ausgehend von den Exporten.

Ergebnisse in Echtzeit herauszubekommen, ist ein eigener Mechanismus und nicht Teil dieser Ansicht: Jede Antwort kann an einen https-Endpunkt geschickt oder per E-Mail angekündigt werden, beides beschrieben auf der Seite zu Webhooks und Benachrichtigungen. Und wenn die Auswertung ohnehin in einer Tabellenkalkulation stattfinden wird, lesen Sie wie CSV- und PDF-Export aufgebaut sind, bevor Sie die Umfrage entwerfen, und nicht danach.