Der KI-Interviewer von HackerRank zeigt, wie Bewerbungsgespräche in Zukunft aussehen könnten. )

Ein Unternehmen, das für den Einsatz von Programmierherausforderungen zur Bewertung und Einstellung von Entwicklern bekannt ist, lässt seine Kunden nun einen KI-Interviewer ausprobieren. Chakra ist der Name dieses Agenten, der Interviews durchführt, Kandidaten bei der Arbeit beobachtet und sowohl ihre Antworten als auch den Weg, wie sie zu ihnen gelangten, bewertet. Nach etwa sechs Monaten in der Beta-Phase öffnet das Startup Chakra am Montag für alle Nutzer, und während der Tests wurden bereits mehr als 500.000 Interviews geführt.

Die Zahlen hinter Chakra

Mehr als 500.000 Interviews haben bereits stattgefunden, während Chakra auf Herz und Nieren geprüft wurde, wobei Snowflake, Snorkel und Capgemini unter den Unternehmen waren, die es ausprobierten. HackerRank testete das Produkt außerdem in seiner eigenen Organisation.

Das Startup teilt mit, dass verdächtige Aktivitäten bei Chakra-Interviews zwischen 70 % und 80 % seltener auftraten als bei vergleichbaren traditionellen HackerRank-Bewertungen, obwohl die Rate je nach Faktoren wie Geografie und Seniorität variierte.

Was Chakra eigentlich tut

Chakras Interviewformat gleicht eher der tatsächlichen Programmierarbeit als einem Standardtest. Kandidaten erhalten eine Aufgabe aus einem realen Code-Repository und bearbeiten sie in einem Arbeitsbereich, der einen KI-Assistenten beinhaltet. Während der Sitzung stützt sich Chakra auf den Kontext der Aktionen des Kandidaten, um Nachfragen zu stellen. Diese Fragen könnten beispielsweise dazu dienen, warum ein bestimmter Ansatz gewählt wurde oder wie die Lösung unter einer neuen Einschränkung angepasst würde.

HackerRank bezieht sich auf diese Fähigkeit als „KI-Kompetenz“, die darin besteht, ein Problem für KI zu formulieren, ihre Ausgabe zu beurteilen und sie auf eine Lösung hinzuweisen. Das Interview zielt darauf ab, diese Arten von Signalen einzufangen, darunter kritisches Denken und Urteilsvermögen, die sonst schwer zu messen sind.

„Die vorherige Modalität der Bewertung bestand darin, die Ausgabe zu bewerten“, sagte HackerRank-Mitbegründer und CEO Vivek Ravisankar in einem Interview. „Jetzt kann dank KI jeder ein Artefakt produzieren.“ Die Frage für Arbeitgeber werde, ob sie verstehen können, welches Denken und welches Urteilsvermögen in die Produktion dieses Artefakts einflossen.

Warum Unternehmen es verwenden

Seit einiger Zeit verlassen Unternehmen sich bei der Durchführung von Bewerbungsgesprächen auf KI. Sprachassistenten und ähnliche automatisierte Systeme übernehmen die Aufgabe der Kandidatenbewertung und beschleunigen so den Einstellungsprozess. Gleichzeitig nutzen Bewerber selbst KI-Tools, um sie während der Interviews zu unterstützen, oft ohne dass Arbeitgeber davon erfahren.

Der Einstellungsprozess wurde durch Chakra verändert, das das, was einst drei unterschiedliche Runden waren, in eine einzige Interviewrunde zusammenführt. Ein KI-Interviewer kümmert sich um die technische Bewertung, sodass menschliche Interviewer entscheiden können, ob sie mit einem Kandidaten zusammenarbeiten möchten und Fragen zum Unternehmen, Team und zur Rolle beantworten können.

TechCrunch wurde von Ravisankar mitgeteilt, dass Chakra dazu existiert, Kandidaten zu bewerten, nicht zu entscheiden, wer eingestellt wird, wobei diese Aufgabe bei den Menschen verbleibt. Er zog innerhalb des Unternehmens einen Vergleich zu Apples Übergang vom iPod zum iPhone heran, einer Verschiebung, bei der das frühere Produkt seinen Wert behält, während das neuere Produkt zeigt, in welche Richtung das Startup das Marktgeschehen sieht.

Die Frage des Schummelns

Es scheint, als ob die Nutzung von KI durch Kandidaten während eines Interviews das Schummeln vereinfachen würde. Stattdessen stellte das Unternehmen fest, dass verdächtige Aktivitäten bei Chakra-Interviews im Vergleich zu ähnlichen traditionellen HackerRank-Bewertungen um 70 % bis 80 % sanken.

TechCrunch wurde von Ravisankar mitgeteilt, dass die Nutzung von KI den Anreiz verringert, während eines Interviews externe Tools zu verwenden, die möglicherweise Antworten liefern könnten.

Das Argument der Voreingenommenheit

Ravisankar sagt, dass KI die stärker strukturierten Teile eines Interviews verwalten kann, indem sie Regeln befolgt, die vom Arbeitgeber vorgegeben werden. Er argumentiert, dass ein KI-System angewiesen werden kann, den gleichen Bewertungsgrundsatz auf jeden Bewerber anzuwenden, ohne von Faktoren wie ihrem Hintergrund oder ihrer Ausbildung beeinflusst zu werden.

„KI ist viel weniger voreingenommen als Menschen, wenn man sie richtig einstellt“, sagte Ravisankar.

Das Argument für die gleichmäßige Anwendung von Kriterien ist nicht vollständig überzeugend. Dies beseitigt nicht automatisch Voreingenommenheit aus einem KI-System. Tools, die für die Einstellung verwendet werden, können Voreingenommenheiten übernehmen oder verstärken, die in den Daten, Modellen und Kriterien dahinter enthalten sind, weshalb Aufsichtsbehörden genau darauf achten, wie sie bei Personentscheidungen eingesetzt werden.

Der regulatorische Gegenwind

Arbeitgeber, die automatisierte Einstellungstools verwenden, geraten unter regulatorische Kontrolle. Ein Beispiel ist New York City, das von Unternehmen verlangt, die bestimmte automatisierte Entscheidungsfindungstools im Einstellungsprozess einsetzen, dass diese zuerst unabhängig auf Voreingenommenheit überprüft werden müssen und Bewerber vor der Inbetriebnahme informieren müssen.

Ravisankar räumte ein, dass die Einstellung in einen regulierten Bereich fällt, und sagte, die Einhaltung dieser Regeln sei Teil dessen, was HackerRank konstruieren musste.

Was kommt als Nächstes

Chakra ist eine Wette gegen die Art von technischer Bewertung, die HackerRank über viele Jahre hinweg aufgebaut hat. Sein altes Angebot überprüfte hauptsächlich, ob Entwickler in der Lage waren, Programmieraufgaben korrekt zu lösen. Ravisankar ist der Ansicht, dass KI diesen Ansatz weniger effektiv macht, um Programmierfähigkeiten zu messen.

„Chakra wird die Schlagzeile sein“, sagte er. „Es wird der Weg sein, auf dem wir vorwärts gehen werden.“

TechCrunch Disrupt war der Ort, an dem HackerRank zum ersten Mal auftauchte, was den Start des Unternehmens im Jahr 2012 markierte. Seitdem ist das von Y Combinator unterstützte Unternehmen auf über 3.000 Geschäftskunden angewachsen, zu denen Amazon, Nvidia, Clay und Replit gehören, während es gleichzeitig eine Entwickler-Community aufgebaut hat, die weltweit mehr als 30 Millionen Menschen umfasst.

Das Unternehmen wettert darauf, dass KI sowohl die Art und Weise, wie Vorstellungsgespräche ablaufen, als auch das messen kann, was Arbeitgeber beurteilen können, verändern kann. Die Frage ist, ob diese Bewertung einer Prüfung auf Fairness standhält.

Schlüsseldaten Box

• Chakra: Der KI-Interviewer von HackerRank, ab Montag im Allgemeinen verfügbar
• Beta-Dauer: Ungefähr sechs Monate
• In Tests durchgeführte Interviews: Mehr als 500.000
• Unternehmen, die es ausprobiert haben: Snowflake, Snorkel, Capgemini
• Reduktion der Kennzeichnungen für verdächtige Aktivitäten: 70 % bis 80 % geringer in Chakra-Interviews.
• Kunden: Mehr als 3.000, darunter Amazon, Nvidia, Clay und Replit.
• Entwickler-Community: Weltweit über 30 Millionen.

Ein groß angelegter Test läuft, der zeigt, wie weit die KI in der Rekrutierung fortgeschritten ist. Hunderttausende von Interviews haben bereits während der Beta-Phase stattgefunden, und das Unternehmen testet seine Methode nun in großem Maßstab. Die Frage, ob KI Urteilsvermögen und Denkweise korrekt einschätzen kann, wird auf ihre Probe gestellt.

Quelle: “HackerRank’s AI interviewer offers a glimpse into what job interviews could become,” TechCrunch.