Archiv

Artikel Tagged ‘Teilnahmebereitschaft’

A hitchhiker’s guide to satisfied panelists and better panel performance

Letzten Dezember hatte Christoph Irmer in diesem Blog eine Artikelserie (Quo Vadis Online Panels Teil 1, Teil 2 und Teil 3) veröffentlicht, in der er ganz grundsätzlich die Praxis der Panelanbieter auf den Prüfstand stellte. Zum Abschluss der Reihe wurde darin die erste grobe Idee eines Masterscreeners vorgestellt, in den wir große Hoffnungen zur Verbesserung der Panelperformance legten – und im selben Zug auch erste Erfahrungsberichte mit dieser neuen Maßnahme angekündigt.

Voila! Fast ein halbes Jahr später haben wir nun die ersten Ergebnisse auf der GOR 2010 vor einem kritischen Fachpublikum vorgestellt. Und – so viel darf man schon vorweg nehmen – die Resonanz war durchweg recht positiv.

Der Vortrag begann mit einer kurzen Zusammenfassung der Probleme, auf die wir mit dem Masterscreener reagieren wollten. Unsere beiden Hauptziele waren eine höhere Beendigungswahrscheinlichkeit bei Umfragen und eine höhere Motivation der Panelisten. Daher wurden von den vielen Eigenstudien, die wir zum Masterscreener durchgeführt hatten, exemplarisch die beiden Untersuchungen vorgestellt, die eine Antwort darauf geben konnten, ob wir unseren Zielen näher gekommen waren.

Die erste Untersuchung betraf eine einfache Auswertung der Panelperformanzdaten, wie sie standardmäßig für jeden Panelisten erhoben werden. Hier wurde das erste Quartal 2009 (ohne Masterscreener) mit dem ersten Quartal 2010 (mit Masterscreener) verglichen – und zwar für aktive Bestandspanelisten, die regelmäßig am Masterscreener teilgenommen haben. „Aktiv“ bedeutet hier, dass die Panelisten eine überdurchschnittliche Teilnahmebereitschaft aufweisen – was der Tatsache geschuldet war, dass in den drei Monaten der Vergleichszeiträume auch ausreichend Performanzdaten angefallen sein mussten, um einen Vergleich durchführen zu können. Das Ergebnis kann sich sehen lassen: die Beendigungswahrscheinlichkeit hat sich verdreifacht – was unter anderem bedeutet, dass unsere Panelisten nun mehr positive als negative Erlebnisse haben, wenn sie eine Umfrage beginnen.

Insofern verwundert es auch nicht, dass die Zufriedenheit mit der Panelmitgliedschaft in unserer zweiten Studie für solche Panelisten höher ist, die regelmäßig am Masterscreener teilgenommen haben. Vor allem der gute Wert bei der Weiterempfehlungsbereitschaft der Panelmitgliedschaft – also nicht nur die einfache Motivation unserer Panelisten, sondern sogar die Motivation andere Menschen zu motivieren – spricht für die positiven Effekte des Masterscreeners.

Wenngleich also aus unseren Erfahrungen ein recht positives Zwischenfazit zu ziehen war, schloss der Vortrag mit einer kurzen Diskussion von Problemfeldern, denen wir uns in der Zukunft noch intensiver zuwenden möchten. Alles in allem aber – so auch das Feedback, das wir nach dem Vortrag bekommen haben – sind wir auf dem richtigen Weg!

Quo Vadis Online Panels (I)

24. November 2009 Christoph Irmer Keine Kommentare

Überall stolpert man in der Branche derzeit über die Themen Panelmortalität und Teilnahmebereitschaft. Wie kann man Teilnahmebereitschaft erhalten und Panelmortalität senken? Gerade uns Panelanbieter beschäftigt dieses Thema derzeit brennend, da hier natürlich der Kern unserer Daseinsberechtigung betroffen ist.

Erst vor kurzem habe ich zu diesem Thema einen Vortrag auf dem 10jährigen Firmenjubiläum der Globalpark AG gehalten und möchte hier eine kurze Zusammenfassung über unsere Sicht der Dinge geben bzw. auch konkrete Verbesserungsvorschläge machen.

Da ich feststellen mußte, daß die Ausarbeitung zu diesem Thema für einen Artikel etwas zu lang ist (und auch entsprechend Zeit in Anspruch nimmt), habe ich mich entschieden, mehrere Folgen dieses Blogs zu veröffentlichen. Hier nun also Folge I:

Fakt ist sicherlich, daß über alle Panels hinweg eine sinkende Teilnahmebereitschaft zu verzeichnen ist. Erst letzte Woche rief eine überaus nette Vetriebsdame eines weiteren Panelbetreibers bei uns an und erzählte uns im Rahmen einer Angebotsanfrage erfreut von “derzeit außerordentlich tollen Response Rates in Spanien um die 10 Prozent” … Hä? Heißt das, es ist inzwischen erfreulich, wenn auf 100 Email-Einladungen gerade noch 10 Panelisten reagieren? Bei einem anderen Panelanbieter haben wir – eigenen Berechnungen nach – eine durchschnittliche Response Rate im dt. Panel von 15% gemessen und natürlich verzeichnen auch wir im eigenen Online-Panel opinion-people eine über Zeit rückläufige Antwortbereitschaft.

Woran aber liegt das nun? Ich denke, daß wir es mit drei großen Problemen zu tun haben.

1. Umfragen sind i.d.R. nicht so sexy, wie es dem Teilnehmer bei Rekrutierung ins Panel bzw. bei Einladung zur entsprechenden Umfrage gerne weißgemacht wird.

2. Fehlende Wertschätzung gegenüber Panel-Teilnehmern.

3. Die Art und Weise wie Interviews für einzelne Umfragen über Panels generiert werden, muß über Zeit zwangsläufig zu fallenden Response-Rates führen.

Getreu dem Motto “What you see isn’t always what you get” wird potentiellen Teilnehmern gerne der Umfrage-Himmel auf Erden versprochen: “Verdienen Sie je Umfrage bis zu 15,00 Euro”, “Spannende Umfragen”, “Beeinflußen Sie die Welt von Morgen”, “Ihre Meinung ist bares Geld wert”, …

Mal im Ernst: Meinen Sie, die Beantwortung einer 45minütigen Conjoint-Umfrage ist spannend? Oder die Beantwortung von Matrixfragen mit 10erSkala und 25 Statements zum Thema Finanzprodukte? Meinen Sie es macht Spaß, bei durchschnittlich 8,4 aus 10 Einladungen ausgescreent zu werden oder aber mitgeteilt zu bekommen, daß man zu spät dran ist? Oder für einen 30-Minüter mal eben mit 1,00 € abgespeist zu werden, wo bei Registrierung im Panel von bis zu 15,- € die Rede war? Eben.

Diese Zahl von 16% Beendigungsquote ist übrigens herausgekommen bei einem Selbsttest bei 5 großen Online-Panels über einen Zeitraum von ca. 6 Monaten. Gemeinsam mit zwei Mitarbeitern haben wir alle Einladungen, Teilnahmen usw. im Zeitraum von 7. Januar bis 16. Juni gezählt und dabei kam folgendes Ergebnis zustande:
Beendigungsquoten Online Panels

- Ich darf nur in 16% aller Fälle überhaupt vollständig teilnehmen
- Dann muß ich im Schnitt 20 Minuten Zeit aufwenden
- Und erhalte dafür durchschnittlich 0,89 €

Nochmal zur Erinnerung:
- Spannende Umfragen
- Geld Verdienen
- Produkte mitentwickeln
- … sehen in meinen Augen anders aus.

Ich glaube die Realität ist nicht das, was sich Panelteilnehmer unter diesen Punkten vorgestellt haben…

Weiterhin muß die Art und Weise, wie quasi alle Panels derzeit betrieben werden meines Erachtens zwangsläufig zu rückläufiger Teilnahmebereitschaft führen.

In etwa ist der klassische Ablauf bei Online-Panels wie folgt:

1. Schritt: Ich suche teilnahmewillige Personen: „Bitte, bitte werde Teil meines Panels!“

2. Schritt: Ich lade diese Personen projektbezogen auf Umfragen ein „Bitte, bitte nimm an dieser Umfrage teil!“

3. Schritt: in 8 aus 10 Fällen: „Ällabätsch – jetzt darfst Du doch nicht teilnehmen!“

Das muß sich ein bißchen so anfühlen, wie wenn man wochenlang von einem Flirtpartner angebaggert wird (mit Dinner for two, Kerzenschein, Geschenken und allem was dazu gehört) um dann einen waschechten Korb zu bekommen…

Um das Ganze nochmals etwas theoretischer darzustellen:
chart_projektablauf

Wir sprechen möglichst viele Menschen auf unterschiedlichste Art und Weise an und schaffen es tatsächliche einige wenige davon zu überzeugen, sich in unserem Panel zu registrieren. Dann verkaufen wir einzelne Projekte und ziehen projektbezogen Stichproben aus dem Panel, von welchen dann letztlich im Schnitt ca. 16% das Projekt beenden dürfen. Psychologisch für die restlichen 84% nicht gerade toll und auch bei den 16% die beantworten durften (oder mussten) kommt’s drauf an wie gut, spannend und kurzweilig der Fragebogen war, mit welchem Gefühl sie aus der Befragung kommen.

Ich glaube, daß dieses Vorgehen eher suboptimal ist und gute Gründe liefert, früher oder später auf Umfrageeinladungen nicht mehr zu reagieren, oder aber – und das wäre für die Ergebnisse noch fataler – das Antwortverhalten zu ändern um sich für Umfragen zu qualifizieren oder um sich möglichst schnell durch langweilige Umfragen zu klicken.

Zum Thema Surveytainment bzw. “wie spannend und entertaining sollte und wie langweilig darf ein Fragebogen sein” und zu Vorschlägen, wie man der sinkenden Teilnahmebereitschaft entgegenwirken kann, dann in der nächsten Folge mehr!

Diagnose Panelschwund

Vortrag von Christoph Irmer, CEO der ODC Services GmbH anlässlich des 10 jährigen Jubiläums der Globalpark AG.

Wie alle Panelanbieter kämpft ODC mit rückläufigen Teilnahmeraten und schneller steigenden Mortalitätsraten der Panelmitglieder. Als Gründe werden von Herrn Irmer in seinem Vortrag identifiziert:

  1. Panelistenrekrutierung ist deutlich schwieriger (u.a. sinkende Klickraten, Pop-Blocker, großer Wettbewerb)
  2. Marktforschung ist i.d.R. weniger ‚sexy‘ als versprochen (z.B. Umfragen sind in der Praxis selten spannend, (zu) viele Matrix-Fragen etc.)
  3. Zusammenarbeit von Panel-Anbietern und deren Kunden verläuft häufig nicht optimal (z.B. zu viele Screenouts, Quota-Fulls, falsche Versprechen, schlechte Qualität der Fragebogen)

Dieses führt schlussendlich zur Frustration der Panelisten und zu einer niedrigen Motivation, Studien zu beenden oder gar erst zu beginnen.

ODC wirkt mit dem sogenannten „ODC Panelist Motivation Score“ entgegen. Der Motivation Score unterteilt die Panelisten in drei Gruppen und berücksichtigt hierbei die Beendigungswahrscheinlichkeit der Umfragen:  „Top“-Motivierte werden zu Studien eingeladen, die eine niedrige Beendigungsquote haben; „Mid“-Motivierte werden zu Umfragen mit mittlerer Beendigungwahrscheinlichkeit eingeladen und „Low“- Motivierte zu Studien mit sehr hoher Completion Rate.

Hierfür wird der von EFS Panel standardmäßig integrierte PCI-Index genutzt und bei der Stichprobenziehung zu den Studien berücksichtigt. ODC führt seine stabilen Rücklaufquoten u.a. auf den Einsatz des Motivation Score zurück.

Weiterhin entwickelt ODC derzeit in Zusammenarbeit mit Globalpark ein Konzept, um einen sogenannten Master-Screener zu nutzen. Hierbei werden die Screening-Fragen von verschiedenen Umfragen in einen Screener zusammengefasst und der Panelist wird automatisch in die geeignete Studie geleitet. Dadurch wird die Teilnahmewahrscheinlichkeit für den Panelisten deutlich erhöht und somit seine Motivation an weiteren Studien im Panel teilzunehmen.

chart_gp