Zum Inhalt springen

Wie geht Testentwicklung bei der dgp?

Die dgp-Testentwicklerinnen Dr. Anna-Lena Jobmann und Amelie Kleinmanns geben Einblick in ihre Arbeit und sprechen unter anderem über das aktuelle Testportfolio der dgp sowie über die Generierung von innovativen Testideen.

Wie lange arbeiten Sie schon bei der dgp, und welchen beruflichen Hintergrund haben Sie?

Anna-Lena Jobmann, Diplom-Psychologin, Dr. rer. nat.: Ich bin seit Oktober 2016 in der Stabstelle Testentwicklung bei der dgp tätig. Davor war ich über fünf Jahre lang bei der Bergischen Universität Wuppertal als wissenschaftliche Mitarbeiterin im Bereich Methodenlehre und Psychologische Diagnostik beschäftigt und habe dort promoviert.

Amelie Kleinmanns, M.Sc. Psychologie: Auch ich arbeite in der Stabstelle Testentwicklung, und das seit September 2017, also schon fast fünf Jahre. Zuvor war ich drei Jahre an der Ruhr-Universität Bochum im Projektteam Testentwicklung als wissenschaftliche Mitarbeiterin tätig. An der Ruhr-Universität habe ich auch meinen Bachelor und Master absolviert.

Welche Art von Tests gibt es bei der dgp?

Anna-Lena Jobmann: Hauptsächlich bietet die dgp online- sowie papierbasierte kognitive Leistungstests für die Auswahl von Bewerber*innen an. Dabei handelt es sich um sogenannte maximum performance Tests, d.h. die Tests erfordern die höchstmöglichen Leistungen/Fähigkeiten der Bewerber*innen, beispielsweise in Form von Rechenaufgaben oder Aufgaben zum Textverständnis. Diese Art von Testverfahren hat sich in großen Übersichtsarbeiten (Meta-Analysen) als bestmöglich geeignete Methode zur Vorhersage von Ausbildungs- und Berufserfolg gezeigt. Unsere kognitiven Eignungstests bauen auf Intelligenztheorien und zahlreichen wissenschaftlichen Befunden der sogenannten Differentiellen Psychologie auf. Über die Jahrzehnte wurden die Testverfahren der dgp auf die Laufbahnen des öffentlichen Dienstes, bzw. verschiedene Qualifikationsstufen zugeschnitten, und ermöglichen so eine passgenaue und wissenschaftlich fundierte Personalauswahl.


Wie lange dauert die Entwicklung eines Tests, und wie kommen Sie auf die neuen Testideen?


Amelie Kleinmanns: Wie lange es dauert einen neuen Test zu entwickeln, hängt von verschiedenen Faktoren ab. Sprechen wir zum Beispiel von einer Überarbeitung einer unserer bereits bestehenden Testbatterien, dann vergehen vom Beschluss bis zur fertigen Überarbeitung in der Regel ein bis zwei Jahre. Bei einer kompletten Neuentwicklung sprechen wir da schnell von drei bis fünf Jahren, da noch mal deutlich mehr Schritte bei der Entwicklung hinzukommen. Unsere Ideen für neue Tests generieren wir hauptsächlich aus neu entstehenden Kundenbedürfnissen. Diese spiegeln häufig sich verändernde Anforderungen an die verschiedenen Berufe im öffentlichen Dienst oder sich verändernde Rahmenbedingungen wider, wie als Beispiel die Notwendigkeit des Onlinetestens in der Pandemie. Eine weitere Quelle für frische Ideen sind natürlich auch aktuellste wissenschaftliche Erkenntnisse, die wir in unsere Tests einfließen lassen.

Was braucht es denn genau, um einen neuen Test zu entwickeln?

Anna-Lena Jobmann: (1) Zuallererst wird natürlich die Idee, bzw. das Konzept für das zu erarbeitende Testverfahren benötigt. Gegebenenfalls wird auch eine sogenannte Anforderungsanalyse durchgeführt, um die Anforderungen der Arbeitstätigkeit an die Bewerber*innen genau feststellen zu können, die im Test erfasst werden sollen. (2) Anschließend werden die für die Ausübung der Tätigkeit benötigten Fähigkeiten – auch mit Hilfe von wissenschaftlichen Studien – definiert. (3) Mit Hilfe dieser Definition werden Aufgaben konstruiert, die inhaltlich von mindestens einer weiteren Person gegengeprüft werden. (4) Anschließend werden erste Daten zu den Aufgaben erhoben. Wir achten dabei darauf, dass unsere neu entwickelten Aufgaben unter Realbedingungen erprobt werden. Mit Hilfe dieser Daten werden die Aufgaben statistisch – im Rahmen der sogenannten Testtheorien –bewertet. (5) Die guten Items werden dann zu Tests zusammengefasst. Für dieses Tests erfolgt die Normierung an einer repräsentativen und möglichst großen Stichprobe. Kurz gesagt: Zur Entwicklung von Tests benötigen wir Aufgaben und Daten.


Welches sind Ihre Hauptprojekte für 2022?

Anna-Lena Jobmann: Einerseits arbeiten weiter daran, dass unsere Papiertests „gepflegt“ werden: Dort steht insbesondere die Überarbeitung unserer Testbatterie für gewerbliche Berufe an.

Andererseits investieren wir viel Zeit in die Weiterentwicklung unserer Online-Tests. Die Pandemie hat als Beschleuniger dieser Entwicklung speziell für den öffentlichen Dienst gewirkt: Bei vielen Behörden war und ist die Online-Auswahl der Bewerber*innen mittlerweile alternativlos – trotz möglicher Bedenken und Herausforderungen. Darauf reagieren wir und optimieren unsere Online-Tests. Beispielswiese auch in Bezug auf Testsicherheit und Betrugsreduzierung werden wir weitere Möglichkeiten prüfen und bereitstellen.

Der Hauptfokus liegt für 2022 zudem in der Umstellung unserer Online-Testsystems auf das modulare Testen: Das bedeutet, dass die Tests anforderungsspezifisch in Zusammenarbeit mit den Psycholog*innen der dgp zusammengestellt werden können. Dennoch werden wir hier nicht die gewohnte Qualität der dgp verlassen und Qualitätsstandards für das modulare Testen definieren, wie beispielsweise eine theoretische Fundierung von Testmodulen.

Mittelfristig werden für die Module dann adaptive Tests entwickelt: Das heißt, dass nicht alle Bewerber*innen die gleichen Aufgaben bearbeiten, sondern passgenau, abhängig von ihren Fähigkeiten, Aufgaben zugewiesen bekommen. Die Entwicklung adaptiver Testmodule ist sehr zeit- und ressourcenaufwändig, und dafür werden wir in 2022 weitere Grundbausteine legen.

Mehr Neuigkeiten

Icon für Kalender 12.05.2025

Digitaler Staat Online: dgp beim Behörden Spiegel zum Thema Geschäftsprozessmanagement    

Am 12. Juni 2025 referiert Dr. Ulrich Stadelmaier, Co-Gesamtleiter der dgp, bei einer Online-Veranstaltung des Behörden Spiegels über Prozessmanagement. Melden Sie sich an, um mehr über dieses hochrelevante Thema zu erfahren.
Icon für Tags Veranstaltungen
Icon für Kalender 05.05.2025

Aufruf zur Teilnahme an einer Umfrage: Berufliche Extraversion und Arbeitszufriedenheit   

Unterstützen Sie die dgp-Abteilung "Forschung und Entwicklung" bei ihrer psychlogischen Studie zu Aspekten von Arbeitszufriedenheit! Ihre Antworten bleiben natürlich komplett anonym.
Icon für Tags Unternehmen
Icon für Kalender 10.04.2025

3. Erfahrungsaustausch zur Personalarbeit von Feuerwehren  

Auf Einladung der dgp kamen im März 2025 wieder Personalverantwortliche der Feuerwehren in den östlichen Bundesländern zu einem spannenden Austausch zusammen.
Icon für Tags Veranstaltungen
Icon für Kalender 09.04.2025

Webinar: Neuer Ansatz für Nachwuchs-Assessments – Pilotprojekt mit der Hansestadt Stade 

Die Hansestadt Stade hat mit der dgp ein neues und erfolgreiches Nachwuchs-Assessment konzipiert, welches im Rahmen eines Webinars am 7. Mai 2025 vorgestellt wird. Melden Sie sich jetzt an!
Icon für Tags Veranstaltungen
Icon für Kalender 07.04.2025

Personelle Veränderungen im Vorstand der dgp

Die Deutsche Gesellschaft für Personalwesen e. V. (dgp) hat ein neues Vorstandsgremium mit Michael Sothmann als neuem Vorstandsvorsitzenden und Isabel Limmer als stellvertretende Vorstandsvorsitzende. Die dgp freut sich auf die künftige Zusammenarbeit.
Icon für Tags Unternehmen
Icon für Kalender 31.03.2025

Webinar-Aufzeichnung: Wie sicher sind Online-Eignungstests?

Was passiert, wenn Bewerber*innen in Testverfahren täuschen, um ihre Ergebnisse zu verbessern? Im dgp-Webinar wird beleuchtet, wie häufig getäuscht wird, welche Folgen Täuschung hat und wie in der Praxis gegengesteuert wird.
Icon für Tags Veranstaltungen
Icon für Kalender 12.02.2025

Video: Potenziale von Bewerber*innen und Mitarbeiter*innen erkennen  

Ab sofort steht die Video-Aufzeichnung des Webinars zum Thema Potenzialdiagnostik zur Verfügung. Sie erfahren, was in der Personalpsychologie unter Potenzial verstanden wird und welche Relevanz es bei der Stellenbesetzung haben kann.
Icon für Tags Veranstaltungen
Icon für Kalender 28.01.2025

Schummeln leicht gemacht? Webinar zur Sicherheit von Online-Eignungstests 

Melden Sie sich jetzt für das kostenfreie Webinar "Sicherheit von Online-Eignungstests" am 20. März 2025 an! Sie erfahren, welche Fragen sich im Zusammenhang mit der Aussagekraft von Online-Tests stellen sowie wie man deren Integrität sicherstellen kann.
Icon für Tags Veranstaltungen
Icon für Kalender 28.01.2025

TBS-DTK-Transparenz-Zertifikat für die dgp

Das TBS-DTK-Transparenz-Zertifikat, vergeben vom Diagnostik- und Testkuratorium (DTK) der Föderation Deutscher Psychologenvereinigungen, dient als Gütesiegel für die Dokumentation psychologischer Testverfahren.
Icon für Tags Unternehmen