Expertenmeinung: Verfälschungssicherheit bei Online-Tests

  Expertenmeinung   Verfälschungssicherheit  bei  Online  Tests         Mit   Hilfe   von   wissenschaftlich   fundierten   Tests   und   Persönlichkeitsfragebögen   ist   es   möglich,   Vorhersagen   zum   beruflichen   Erfolg   auch   für   Bewerber   zu   machen,   die   bisher   noch   keine   beruflichen  Erfahrungen  gesammelt  haben,  wie  es  beispielsweise  bei  Azubis  der  Fall  ist.     Die  Vorauswahl  per  Online  Assessment  bringt  erhebliche  Kosten-­  und  Zeitersparnis.  Die  Bewerber   führen  die   Online  Tests  zu  Hause  an   ihrem  eigenen  Rechner  durch.  Eingeladen  werden   dann  nur   die  Bewerber,  die  gut  abgeschnitten  haben  bzw.  zum  Stellenprofil  passen.     Üblicherweise  gibt  es  jedoch  Vorbehalte,  auf  Tests  zu  vertrauen,  die  sozusagen  unüberwacht  bzw.   unkontrolliert  durchgeführt  werden.  Was  sind  die  Gründe?         Personentäuschung     Frage:  Kann  der  Kandidat  nicht  einfach  eine  andere  Person  wählen,  von  der  er  weiß,  dass  sie  den   Test   besser   absolviert   als   er   selbst?   Woher   weiß   man,   dass   der   Kandidat   den   Test   selbst   bearbeitet  hat?     cut-­e  Experte:   In  der  Praxis  ist  dieses  Problem  unbedeutend.  Bei  der  Vorauswahl   geht  es  immer   zunächst   darum,   Bewerber   mit   schlechten   Testergebnissen   auszumustern   und   nicht   die   Top   Bewerber   zu   finden   (sog.   Negativselektion).   Ein   Bewerber,   der   auf   Grundlage   seiner   guten   Testergebnisse   zu   einem   Vorstellungsgespräch   eingeladen   wird,   kann   und   sollte   vor   Ort   nachgetestet   werden.   Spätestens   dann   wird   es   auffallen,   wenn   die   zweiten   Testergebnisse   deutlich  schlechter  sind  als  die  ersten.  Wir  haben  darüber  hinaus  sehr  gute  Erfahrungen  mit  dem   Vorschalten   von   Warnhinweisen   gemacht.   Wenn   die   Bewerber   darüber   aufgeklärt   sind,   dass   Täuschungsversuche   beim   Online   Assessment   unangenehme   Konsequenzen   haben   können,   überlegen  sie  es  sich  sehr  genau,  ob  sie  die  Chance  auf  einen  Ausbildungsplatz  auf s  Spiel  setzen.   Die   Erfahrungen   aus   der   Praxis   zeigen,   dass   uns   und   unseren   Kunden   beim   Einsatz   unserer   Testverfahren  bisher  so  gut  wie  keine  Betrugsversuche  untergekommen  sind.         Trainieren  von  Tests     Frage:   Ist   es   möglich,   die   Tests   im   Internet   zu   trainieren?   Können   Teilnehmer,   die   die   Online   Tests  kennen,  sich  durch  Übung  einen  Vorteil  verschaffen?     cut-­e   Experte:   Grundsätzlich   halten   wir   kognitive   Fähigkeiten   für   trainierbar.   Also   ja,   die   Leistungen   in   Online   Tests   können   verbessert   werden.   Für   die   Auswahlentscheidung   spielt   dies   aber   keine   Rolle,   da   sich   Leistungsverbesserungen   nur   dann   einstellen,   wenn   die   Tests   längerfristig  trainiert  werden.  Stellen  Sie  sich  vor,  Sie  bräuchten  einen  guten  1.000  m  Läufer.  Zur   Auswahl   des   besten   Läufers   nehmen   Sie   deren   Laufzeiten   als   Entscheidungsbasis.   Trainiert   ein   Teilnehmer   den   1.000   m   Lauf   einen   Tag   vor   dem   Testlauf   ganz   intensiv,   so   hat   es   keinen,   vielleicht  sogar  einen  negativen  Effekt.  Trainiert  er  seine  Lauffähigkeiten  aber   kontinuierlich  über   ein   halbes   Jahr   vorher,   so   verbessert   er   sicher   seine   Leistung.   Sie   als   Entscheider   werden   dies   honorieren   und   freuen   sich   über   die   guten   Leistungen   des   Teilnehmers.   Die   Kompetenz   hat   der   Teilnehmer   aber   nachhaltig   erworben   und   sie   ist   Ihnen   schließlich   von   Nutzen.   Und   genauso   verhält  es  sich  mit  kognitiven  Fähigkeiten.  Wichtig  ist  allerdings,  dass  ein  Teilnehmer  sich  mit  den   Bedingungen   vertraut   machen   kann,   der   Läufer   die   Laufstrecke   und   der   Testteilnehmer   Beispielaufgaben   in   Augenschein   nehmen   kann,   da   dies   eine   wichtige   Voraussetzung   für   die   Testfairness  ist.    cut-­e  2002-­2009,    all  rights  reserved.   Seite  1     Expertenmeinung   Verfälschungssicherheit  bei  Online  Tests           Musterlösungen     Frage:   Wie   kann   man   ausschließen,   dass   im   Internet   oder   in   Schulen   Musterlösungen   kursieren   oder  die  Bewerber  die  Tests  mit  Screenshots  kopieren?     cut-­e   Experte:   In   der   Tat   stellt   in   der   heutigen   Zeit   die   Zugänglichkeit   von   Musterlösungen   in   Internetforen   ein   konkretes   Problem   für   herkömmliche   Testverfahren   dar.   Daher   sollte   man   bei   der   Auswahl   von   Online   Tests   darauf   achten,   dass   diese   nicht   statisch   sind,   sondern   unterschiedliche  Versionen  aus  einem  großen  Itempool  bilden  oder  sog.  Itemgeneratoren  nutzen.   Somit  bekommt  jeder  Teilnehmer  seine  eigene  Testversion,  Musterlösungen  helfen  dem  Bewerber   also   nicht   weiter.   Unsere   Tests   können   astronomische   Anzahlen   von   Parallelversionen   erzeugen,   so   dass   die   Wahrscheinlichkeit,   dass   zwei   Teilnehmer   den   gleichen   Test   sehen,   geringer   ist   als   zehnmal   hintereinander   sechs   Richtige   im   Lotto   zu   haben.   Und   trotzdem   ist   sichergestellt,   dass   die  Schwierigkeit  der  Tests  für  jeden  Teilnehmer  gleich  ist.         Hilfsmittel     Frage:   Wie   sieht   es   mit   Hilfsmitteln   aus?   Wenn   ein   Kandidat   zu   Hause   einen   Rechentest   bearbeiten   soll,   könnte   er   doch   z.B.   einen   Taschenrechner   zu   Hilfe   nehmen,   obwohl   das   laut   Testinstruktionen   möglicherweise   nicht   erlaubt   ist.   Oder   bei   einem   Gedächtnistest   könnten   Notizen  als  Gedächtnisstütze  gemacht  werden.     cut-­e  Experte:  Das  ist  richtig.  Dabei  liegt  die  Herausforderung  schon  bei  der  Testentwicklung.  Die   Testaufgaben  müssen  so  konzipiert  sein,  dass  die  Verwendung  von  Hilfsmitteln  überhaupt  keinen   Vorteil  bietet.  Wir  bieten  z.B.  einen  Test  zur  Messung  der  Rechenfertigkeit  an,  der  so  konstruiert   ist,  dass  die  Zuhilfenahme  eines  Taschenrechners  gar  nichts  nützt.  Die  Leerstellen  einer  Gleichung   müssen  dabei  so  gefüllt  werden,  dass  sich  die  angegebene  Lösung  ergibt.  Es  geht  also  um  einen   sicheren  und  schnellen  Umgang  mit  Gleichungen.       Haben  Sie  Fragen  oder  möchten  Sie  mehr  wissen?  Kontaktieren  Sie  uns:     cut-­e  GmbH   Neuer  Wall  40     20354  Hamburg     Telefon:  040.32503890   E-­Mail:  info@cut-­e.com     cut-­e:  smart.  valid.  preferred.    cut-­e  2002-­2009,    all  rights  reserved.   Seite  2