Indeed, wiens missie het is om mensen te helpen aan een baan, is ’s werelds nummer 1 vacaturesite. Meer dan 350 miljoen unieke bezoekers komen elke maand naar Indeed om in contact te komen met meer dan 3,5 miljoen werkgevers en meer dan 32 miljoen vacatures. Maar wat nog belangrijker is, is dat elke drie seconden iemand wordt aangenomen via Indeed.
Sinds de oprichting van Indeed heeft AI de miljoenen connecties tussen werkzoekenden en werkgevers op het platform mogelijk gemaakt, door middel van functies zoals ‘Uitnodigen om te solliciteren’, die op AI gebaseerde vacatureaanbevelingen naar werkzoekenden stuurt op basis van hun cv, Indeed-profiel en andere kwalificaties. Verbeteringen in AI – met name generatieve AI – helpen bij het matchen van werkzoekenden met banen op nieuwe en spannende manieren. Met behulp van OpenAI’s GPT-modellen en fine-tuning mogelijkheden heeft Indeed de gepersonaliseerde taal in de functie ‘Uitnodigen om te solliciteren’ verbeterd om beter uit te leggen waarom de achtergrond of eerdere werkervaring van een kandidaat een baan tot een goede match maakt.
Vroege AI-experimenten in vacaturematching
De vroege AI-modellen van Indeed matchten effectief werkzoekenden met vacatures van werkgevers en gaven korte uitleg voor deze matches. Maar de product- en engineeringteams van Indeed geloofden dat de GPT-modellen van OpenAI nog meer konden doen door natuurlijke taal te gebruiken om betere context te bieden waarom een kandidaat een specifieke vacatureaanbeveling ontvangt.
Het toevoegen van een meer inzichtelijk “waarom” aan vacatureaanbevelingen werd het doel voor het Indeed-team om met OpenAI samen te werken.
Het engineeringteam van Indeed begon in 2023 met OpenAI te werken, volgens de OpenAI-documentatie voor de Chat Completions API en itererend op zijn few-shot prompting. Gedurende het hele ontwikkelingsproces voerde het team rigoureuze A/B-tests uit en bewaakte en evalueerde het continu elke verandering, zowel tijdens de implementatiefase als na de lancering.
Fine-tuning van de OpenAI API voor gepersonaliseerde matchverklaringen
Indeed ontdekte dat het trainen van het model om te reageren met behulp van few-shot-prompting effectief was in het verhogen van het relevante “waarom” in uitleg, maar op de enorme schaal van Indeed resulteerde dit in een hoog tokenverbruik. Om de efficiëntie te verhogen, werkten OpenAI en Indeed samen om een kleiner GPT-model te fine-tunen dat in staat was om vergelijkbare resultaten te leveren, maar met 60% minder tokens.
Als onderdeel van het fine-tuningproces maakten ze gebruik van GPT-4 voor data-augmentatie en bouwden ze specifieke inhoudsrichtlijnen op. Het team bouwde ook een annotatiebewerking op, die het labelen van LLM-gegenereerde output, het creëren van grondwaarheden voor het faciliteren van geautomatiseerde evaluatie en het toevoegen van context om de modellen te helpen nuances te begrijpen, omvatte.
Verdere tests bevestigden de waarde van personalisatie in vacatureaanbevelingen, waardoor de pool van gekwalificeerde kandidaten werd vergroot. Om gepersonaliseerde vacatureaanbevelingen op te schalen, werkte Indeed samen met OpenAI om dedicated instances te adopteren die in januari 2024 werden geleverd. Het engineeringteam van Indeed heeft het fine-tuned GPT-model met succes op deze instances geïmplementeerd, waardoor ze werkgelegenheidskansen kunnen personaliseren voor miljoenen meer werkzoekenden.
“We hebben decennialang geïnvesteerd in onze eigen AI-matchingtechnologie om werkzoekenden en werkgevers te helpen verbinden. Ongeacht hoe goed onze matching ook is, uitlegbaarheid is de sleutel tot elk succesvol aanbevelingssysteem. Door de GPT-uitleg van OpenAI te combineren met Indeed’s eigen AI en enorme marktplaatsgegevens kunnen we meer mensen sneller verbinden met banen – een overwinning voor werkzoekenden, werkgevers en de samenleving”, zegt Chris Hyams, CEO van Indeed.
GPT-personalisatie leidt tot aantoonbare groei
De effectiviteit van door GPT ontwikkelde gepersonaliseerde berichten werd bewezen door een meerfasenexperiment dat in de loop van enkele maanden werd uitgebreid tot bijna 20 miljoen berichten per dag.
“We testen altijd manieren om de ‘Uitnodigen om te solliciteren’-ervaring te verbeteren en relevante kansen voor werkzoekenden te vinden. Het fine-tunen van OpenAI’s GPT-modellen heeft ons geholpen om meer gepersonaliseerde aanbevelingen te leveren, zelfs toen we opschaalden van 1 miljoen naar 20 miljoen berichten per dag”, zegt Horatio Lun, Indeed Platform PM.
Het Indeed-team testte een traditionele versie van ‘Uitnodigen om te solliciteren’ met vacaturematching tegen de door GPT aangestuurde versie die extra aangepaste context voor de sollicitant had. De prestatieverbetering was meteen merkbaar:
- 20% toename in gestarte sollicitaties
- 13% verbetering in downstream succes, wat aangeeft dat niet alleen meer kandidaten geneigd waren te solliciteren, maar dat werkgevers die sollicitanten ook geschikt vonden, wat uiteindelijk leidde tot meer aanwervingen
Door gebruik te maken van door GPT aangestuurde context voor zijn functie ‘Uitnodigen om te solliciteren’, ervoer Indeed een toename in zowel gekwalificeerde kandidaten als aanwervingen, wat tijdens het testen een positieve invloed had op de omzet.
“Belangrijk is dat we OpenAI op een ROI-positieve manier kunnen gebruiken, dus we zien veel mogelijkheden om te blijven investeren in deze nieuwe infrastructuur op manieren die ons zullen helpen de omzet te laten groeien”, zegt Chris Hyams, CEO van Indeed.
En ‘Uitnodigen om te solliciteren’ is slechts één voorbeeld van hoe Indeed succes boekt met OpenAI-technologie. Bijna een dozijn producten bij Indeed gebruiken OpenAI om meer gepersonaliseerde en aantrekkelijke ervaringen te leveren om werkzoekenden te helpen nieuwe kansen te ontdekken en werkgevers sneller aan te nemen.
Conclusie
Het succesverhaal van Indeed met OpenAI’s GPT-modellen onderstreept de transformerende kracht van AI in de wereld van recruitment. Door de implementatie van geavanceerde taalmodellen kunnen vacatureplatforms zoals Indeed de ervaring van zowel werkzoekenden als werkgevers aanzienlijk verbeteren. Dit leidt niet alleen tot meer succesvolle matches, maar ook tot een efficiënter en bevredigender proces voor alle betrokkenen.
Ben jij een werkzoekende op zoek naar de perfecte baan? Of een werkgever die op zoek is naar het juiste talent? Ontdek hoe Indeed, mogelijk gemaakt door OpenAI, jou kan helpen jouw doelen te bereiken. Bezoek vandaag nog Indeed en ervaar de kracht van gepersonaliseerde vacaturematching!