Die Umsetzung der Befragung wird im Folgenden anhand der Resonanz der Probanden kritisch betrachtet. Auch wenn es sich bei der Resonanz um relativ kleine Zahlen handelt, lassen sich aus diesen dennoch Rückschlüsse auf alle Probanden ziehen. Denn es ist davon auszugehen, dass einem relativ großen Teil der Befragten gleiche oder ähnliche Aspekte aufgefallen sind, dieser jedoch nicht den Aufwand betrieben hat, eine Rückmeldung diesbezüglich zu formulieren.
Bezüglich des Anschreibens wurde angemerkt, dass dieses bereits eine genauere Definition von Agentursoftware enthalten sollte (vier Probanden) und genauer beschreiben sollte, wie mit den gesammelten Daten vorgegangen wird (zwei Probanden). Insgesamt merkten 29 der angeschriebenen Agenturen an, dass sie skeptisch gegenüber der Glaubwürdigkeit der Umfrage seien. Dies lässt sich sicherlich dadurch begründen, dass in der heutigen Zeit allgemein eine große Skepsis gegenüber Links in Emails von unbekannten Absendern besteht. In einigen Fällen ließ sich diese Problematik jedoch durch eine persönliche Nachricht oder einen kurzen Bestätigungsanruf beheben. Zusätzlich antworteten einige Agenturen mit dem Hinweis, dass es sich bei ihnen um eine One-Man-Show handelt (38 Agenturen) oder sie keine Agentursoftware verwenden (26 Agenturen) und aus diesen Gründen nicht relevant für die Umfrage wären. Diese Resonanz zeigt, dass aus dem Anschreiben hätte deutlicher hervorgehen sollen, dass jede Agentur von Interesse für die Befragung ist. Dieser Aspekt hat deutliche Auswirkungen auf die Aussagekraft der ersten Frage der Umfrage, welche den Anteil der Agenturen ermitteln sollte, der eine solche Software verwendet.
Kritik an der Umfrage selbst wurde nur an der letzten Frage geäußert. Hierbei hätten sich zwei Probanden die Antwortmöglichkeit „keine Angabe“ gewünscht. Zudem merkten insgesamt fünf Probanden an, dass Sie mehr als 1.000.000 im Jahr verdienen und Ihnen diese Antwortmöglichkeit für die korrekte Beantwortung gefehlt hat.
Zudem hat die Durchführung der Umfrage aufgezeigt, dass die gesammelten Kontaktdaten nicht uneingeschränkt zutreffend und aktuell sind. Aus diesem Grund kamen pro Befragungsetappe durchschnittlich ca. fünf Prozent der versandten Emails nicht an. Außerdem gaben acht Agenturen die Rückmeldung, dass sie sich bereits aufgelöst haben und 22 der Angeschriebenen, dass es sich bei Ihrem Unternehmen nicht um eine Agentur handelt.
Weiter zu empirische Studie