In Nederland zijn er 690 cao’s (collectieve arbeidsovereenkomsten) waar bijna 6 miljoen werknemers onder vallen. Het doel van een cao is de werknemer zekerheid geven over inkomen, rechtspositie, arbeidsduur en andere voorwaarden. Belangrijke afspraken dus!
Het ministerie van Sociale Zaken en Werkgelegenheid onderzoekt doorlopend wat er in de cao’s staat. Zowel als basis voor nieuw beleid, als om te achterhalen wat de impact is van eerder beleid. Deze onderzoeken worden uitgevoerd door de afdeling Cao Onderzoek en Beleidsinformatie (COB). Het onderzoeken van cao-afspraken is nu een arbeidsintensief proces. De medewerkers van COB doen dit handmatig. De meeste cao’s worden om de 1 à 2 jaar geüpdatet, dus het is een continu proces. Slechts 100 van de 690 cao’s kunnen nu onderzocht worden en het duurt lang voordat de rapportages opgeleverd kunnen worden, waardoor ze vaak deels verouderd zijn.
Daar willen we verandering in brengen! Wij zijn op zoek naar bedrijven die ons kunnen helpen om de kwalitatieve tekstanalyse van cao’s (grotendeels) te automatiseren, zodat we alle 690 cao’s kunnen analyseren én actuelere rapportages kunnen leveren. Hebben jullie hiervoor de oplossing en expertise? Dan ontvangen wij graag jullie pitch!
Waar zijn we naar op zoek?
Wij zijn op zoek naar een innovatief product/werkwijze waarmee het mogelijk is om compleet en actueel cao-onderzoek te realiseren. Wij willen zoveel mogelijk van het kwalitatieve tekstanalyse proces automatiseren, zodat onze onderzoekers zich kunnen richten op het onderzoeken van de bovenliggende trends en ontwikkelingen.
De oplossing moet flexibel te gebruiken zijn. COB voert veel herhalingsonderzoek uit (monitors) maar er zijn binnen deze onderzoeken vaak nieuwe thema’s en er worden regelmatig onderzoeken gestart naar nieuwe onderwerpen. Belangrijke randvoorwaarden is dat het proces en de uitkomsten ervan herleidbaar zijn. Wij moeten kunnen uitleggen waarom een bepaalde waarde of score aan een cao-(deel)tekst is toegekend. Zodat wij altijd kunnen toelichten hoe wij tot onze conclusies komen.
Samengevat zijn wij op zoek naar oplossingen die zoveel mogelijk van het onderstaande mogelijk maken:
Waarom we dit als challenge uitzetten
Voor ons vraagstuk is een maatwerkoplossing nodig, die in de huidige markt (voor zover wij weten) nog niet bestaat. We zijn op zoek naar een innovatieve oplossing die de huidige denkprocessen doorbreekt en die flexibel is. Hieronder is dit uitgewerkt:
Wat is er te winnen?
Wij willen de ruimte en tijd investeren om samen te werken aan dit uitdagende probleem. Indien er een product/werkwijze tot stand komt waarmee het mogelijk is om compleet en actueel cao-onderzoek te doen kunnen we verder gaan met een vervolg samenwerking om deze te implementeren voor andere onderzoeken. In de verdere toekomst kan je een rol spelen bij het tot stand brengen van een dashboard en het toegankelijk maken van de data voor derden. Naast COB zijn er verschillende andere partijen die cao-onderzoek uitvoeren. Het gaat om werkgevers- en werknemerspartijen (AWVN en FNV), universiteiten (AIAS-HSI) en partijen gericht op het leveren van informatie aan HR-managers (ExpertHR en Cao-web). We zetten ons netwerk graag voor jullie in om jullie verder te helpen bij succes.
Informatiebijeenkomst
We organiseerden voor deze challenge een online informatiebijeenkomst op 30 juni 2020 van 9.00-10.00. Lees hier de in de informatiebijeenkomst gestelde vragen en de antwoorden.
Vragen
Vragen over de inhoud van deze challenge kan je hier stellen op de discussion page. Vragen over het programma en de aanmeldingsprocedure zijn te stellen en te vinden bij de Frequently Asked Questions (FAQ).
Inschrijven en selectiecriteria
Inschrijven doe je door middel van het indienen van een Proposal (hier). Deze mag niet langer zijn dan vier pagina’s. Waar dit proposal verder aan moet voldoen en hoe hij wordt beoordeeld staat in de formele Selectieleidraad (pdf download). Lees die goed door!
Stuur met je proposal ook een ingevuld UEA in (Uniform Europees Aanbestedingsdocument (docx download)). Sla deze op als pdf.
De proposal mag in vrije vorm worden ingediend (presentatie/slide deck, briefvorm), maar moet als pdf-bestand (liggend of staand A4) worden geüpload (max. 30MB). Video’s, voorbeeldwebsites, etc. kunnen daarin worden opgenomen als link.
Pitches in English are allowed.
Timeline
Achtergrondinformatie
Maatschappelijke relevantie van cao-onderzoek
De cao is al bijna honderd jaar een van de belangrijkste instrumenten om arbeidsverhoudingen in Nederland te organiseren. De cao is het resultaat van een onderhandeling tussen werkgevers en werknemers, eventueel algemeen verbindend verklaard door de overheid. Daarmee is de cao het symbool van ons zowel gewaardeerde als bekritiseerde poldermodel. Het doel van een cao is de werknemer zekerheid geven over inkomen, rechtspositie, arbeidsduur en andere voorwaarden.
Er is sprake van een wisselwerking tussen cao en overheidsbeleid; bij het maken van beleid kunnen cao-afspraken dienen als het uitgangspunt, tegelijkertijd vormen cao-afspraken een effectmaat van het beleid. Het ministerie van Sociale Zaken en Werkgelegenheid faciliteert deze wisselwerking door het onderzoeken en monitoren van cao-afspraken, uitgevoerd door de afdeling Cao Onderzoek en Beleidsinformatie (COB).
Voorbeeld van deze wisselwerking is terug te vinden in het beleid rond individuele leer- en ontwikkelbudgetten. De overheid wil werknemers middels individuele leer- ontwikkelbudgetten meer regie geven bij het volgen van scholing. Bij het formuleren van het beleid rond deze budgetten zijn bestaande cao-afspraken op dit onderwerp in kaart gebracht, zodat beleid niet botst met deze afspraken en beleid en cao-afspraken elkaar versterken. Momenteel monitort COB de cao-afspraken om te zien of er meer en ruimere budgetten zijn afgesproken in cao’s, zoals het beleid onder andere beoogt.
Link naar voorbeelden van onze onderzoeken en publicaties
Onze onderzoeken worden gepubliceerd op de website van onze directie: www.uitvoeringarbeidsvoorwaardenwetgeving.nl. Informatie over het onderzoek dat onderwerp is van het SiR-programma vindt u hier.
Werkproces COB
Het onderzoek van COB bestaat uit onderstaande stappen. Het te ontwikkelen product/werkwijze dient met name ter vervanging van stap 1.
Stap 1: kwalitatieve data-analyse met behulp van Max QDA (zie bijlage print screen Max QDA)
Stap 1a Klaarzetten bestand
Bij de start van een onderzoek wordt het bestand klaargezet. In geval van een herhalingsonderzoek werken we verder in het ‘oude’ bestand. Dat biedt de mogelijkheid om de ‘oude’ cao’s te vergelijken met de ‘nieuwe’ cao’s (daarover meer in de volgende stap). In zowel een nieuw als een herhalingsonderzoek bestaat het klaar zetten van het bestand uit de volgende stappen:
Stap1b Toekennen van codes
Met Max QDA is het mogelijk om de informatie uit cao-teksten te kwantificeren. Dit doe je door aan (de relevante) stukken tekstcodes toe te kennen die de betekenis van het stuk tekst het beste weergeven (zie bijlage print screen Max QDA). Er zijn verschillende strategieën voor het toekennen van codes. Laatstgenoemde strategie werkt alleen in geval van herhalingsonderzoek:
Het komt regelmatig voor dat een tekst niet eenduidig aan een code toe te kennen is. In dat geval bespreken de collega’s van COB onderling welke code de betekenis van de cao-tekst het beste dekt.
Stap 1c Van codes naar databestand
Nadat Stap 1b het voor de gehele groep cao’s is doorlopen kan het in Max QDA gecreëerde databestand geëxporteerd worden naar Excel.
Stap 2: kwantitatieve data-analyse (Excel en SPSS) (zie de bijlage Factsheet interne externe flexibiliteit)
Voor de kwantitatieve data-analyse gebruiken we Excel en SPSS. In deze stap koppelen we informatie over de aantallen werknemers en de sector aan het bestand dat uit Max QDA is geëxporteerd. Dit koppelen gebeurt aan de hand van het CAO-nummer. Vervolgens worden diverse kruistabellen gedraaid. Ook kijken we naar de ontwikkeling van de afspraken over de jaren heen. Zijn er meer/minder afspraken dan vorig jaar?
Stap 3: Rapportage (zie de bijlage interne externe arbeidsflexibiliteit definitieve versie)
In de laatste stap worden de kruistabellen vertaald naar een onderzoeksrapport in word/pdf. Daarnaast maken we (steeds vaker) ook een interactieve rapportage in Power BI.
De onderzoeksrapporten worden gepubliceerd op de website van UAW, het Kennisplatform Werk en Inkomen en de site van Nederlandse Vereniging voor Arbeidsverhoudingen. De databestanden worden beschikbaar gesteld via het Dataregister van de Nederlandse Overheid.
Bijlagen:
Lees hier de in de informatiebijeenkomst gestelde vragen en de antwoorden.
Extra bijgevoegde bijlage met codes uit MAX-QDA (excel download)
anoniem 12-06-2020reageer
Ons bedrijf bestaat al meer dan 10 jaar dus je kunt ons geen start-up meer noemen. We zijn wel een innovatief MKB-bedrijf en we beschikken over de expertise om een passende oplossing te leveren. Mogen we dan wel meedoen?
Ministerie van SZW 08-07-2020reageer
Er wordt geen definitie van een start-up gehanteerd. We zoeken vooral jonge bedrijven in Nederland die voldoende affiniteit hebben met de challenge. De passendheid van de oplossing / kwaliteit van de ideeën is leidend in het selectieproces. Wel dient de Start-up geregistreerd te zijn bij de KvK.
Thomas Schijf 16-06-2020reageer
Er staat dat het Proposal niet meer langer dan 4 pagina's mag zijn. Er staat ook dat het Proposal mag in vrije vorm worden ingediend (presentatie/slide deck, briefvorm), betekend dan dat de slide deck ook niet meer dan 4 pagina's mag zijn?
Ministerie van SZW 08-07-2020reageer
Jouw verzoek tot deelneming beslaat totaal maximaal vier (4) (enkelvoudig beschreven/bedrukte) pagina’s A4. Tevens kan je een enkelvoudig beschreven bijlage van maximaal één A4 toevoegen voor een overzicht, afbeelding of een planning. Verzoeken met meer dan vier (4) pagina’s, plus eventueel een bijlage zoals omschreven, nemen we in beginsel niet in behandeling. Dit vereiste is onafhankelijk van de vorm waarin het verzoek wordt ingediend.
Menno Wouters 29-06-2020reageer
Is er al een link voor de informatiebijeenkomst morgen? Groet, Menno Wouters
anoniem 02-07-2020reageer
Krijgen de opdrachtnemer toegang tot alle oude factsheet, rapportages en CAO-teksten? Dat kan helpen met het trainen van het systeem.
Ministerie van SZW 08-07-2020reageer
Dit materiaal is beschikbaar en kan tijdens de Start-up in-residence periode gebruikt worden.
Richard Olyerhoek 14-07-2020reageer
Is het mogelijk om in de komende week twee of drie medewerkers van het ministerie, die betrokken zijn bij het huidige process en het gebruik van MaxQDA kort te interviewen?
anoniem 15-07-2020reageer
Dit is niet mogelijk. Mondelinge vragen hadden gesteld kunnen worden op de Meet-up van afgelopen 30 juni. Daarna t/m 14 juli zijn alleen schriftelijke vragen mogelijk. Uiteraard zal deze mogelijkheid wel bestaan nadat de opdracht is toegewezen.
Richard Olyerhoek 14-07-2020reageer
Is het mogelijk om de originele informatie te verstrekken van de paragrafen die in MaxQDA zijn geannoteerd (met de paragrafen als antwoorden op de vragen). Is deze informatie beschikbaar voor alle 100 CAO's die zijn geanalyseerd?
Ministerie van SZW 15-07-2020reageer
Ja, deze informatie is beschikbaar. Na gunning delen we deze gegevens met de Start-up.
Richard Olyerhoek 14-07-2020reageer
Zijn in het verleden de verschillen tussen het toekennen van codes of de beoordeling van uitkomsten geëvalueerd? Zijn er CAO's die door twee of meer experts zijn geanalyseerd? Hoe worden eventuele inconsistenties of conflicten opgelost?
Ministerie van SZW 15-07-2020reageer
De cao’s worden door één onderzoeker beoordeeld. We werken wel met meerdere onderzoekers aan één onderwerp/onderzoek. Elke onderzoeker bekijkt een deel van de steekproefcao’s voor dat onderzoek/onderwerp. Indien een cao-tekst onduidelijk is op een bepaald punt dan bespreken de onderzoekers die aan het onderwerp/onderzoek werken dit punt en wordt gezamenlijk bespoten welke code hierbij past. Dit geldt dus alleen wanneer de onderzoeker zelf aangeeft onduidelijkheden te zien in een bepaalde passage, of graag overleg wilt over een bepaalde interpretatie.
Richard Olyerhoek 14-07-2020reageer
Zijn er andere functionaliteiten van MaxQDA die worden gebruikt, of die u overweegt te gebruiken, naast het extraheren van de relevante content uit de alinea's? Zo niet, zou u een applicatie overwegen die de verwerking en analyse, end-to-end, met elkaar verbindt om het huidige gebruik van MaxQDA en PowerBI te vervangen?
Ministerie van SZW 15-07-2020reageer
Met behulp van MaxQDA extraheren we de relevante content op volgende manieren:
- We lezen de relevante paragrafen uit de cao door (we kijken daarvoor naar de inhoudsopgave van de cao) en hangen daar de juiste codes aan.
- We gebruiken de passages die in eerder onderzoek naar het onderwerp zijn gevonden en via de Ctr-f functie zoeken we deze passages op in de nieuwe cao.
- We doorzoeken de cao op het voorkomen van bepaalde woorden (lexical search). De passages die we op die manier vinden lezen we door en we hangen we hangen er de juiste codes aan. Dit is een methode die op een snelle manier alle cao’s in een keer doorzoekt en nagaat of bepaalde termen in de tekst voorkomen en waar in de tekst deze staan. Deze functionaliteit willen we graag behouden, of nog verder uitbreiden.
We gebruiken geen andere functionaliteiten van MaxQDA (bijvoorbeeld om de data te visualiseren of te analyseren). De mogelijkheden die de analyse module van MaxQDA biedt zijn voor ons te beperkt en/of is minder efficiënt dan SPSS of Excel.
Wij zouden een app die verwerking en analyse verbindt zeker overwegen. We zijn niet gebonden aan de programma die wij nu gebruiken (MaxQDA, SPSS, Excel en power BI). Het gaat ons om de kwaliteit en het gebruiksgemak.
Richard Olyerhoek 14-07-2020reageer
M.b.t. Het dashboard waarnaar in de documentatie wordt verwezen: kunt u ons een voorbeeld geven of ons naar een typisch dashboard van het ministerie verwijzen? Zijn de visualisaties in rapporten, zoals [https://intergov.startupinresidence.com/Content/battle/a001d99d-fcf9-48e4-900d-4849c3494b64/Bijlage%20A4f%20CAO%20onderz%20Arbeidsflex%20SZW.pdf], afkomstig van bestaande dashboards, of worden ze gemaakt als onderdeel van de rapportage?
Ministerie van SZW 15-07-2020reageer
Het gebruik van Power BI binnen het Ministerie van Sociale Zaken en Werkgelegenheid staat nog in de kinderschoenen. De dashboards die wij tot op heden hebben ontwikkeld kunnen daardoor alleen intern gedeeld worden. We hebben ook een pdf gemaakt voor het onderzoek ‘interne externe flexibele arbeidsrelaties’. De pdf heeft een goed beeld van de opzet van het dashboard, maar is niet interactief. Deze opzet is te vinden in bijlage III van het rapport ‘Interne en externe arbeidsflexibiliteit:
https://www.uitvoeringarbeidsvoorwaardenwetgeving.nl/mozard/document/docnr/571336
Richard Olyerhoek 14-07-2020reageer
Heeft u een voorkeur voor een visualisatie tool? Wilt u bijvoorbeeld PowerBI blijven gebruiken of staat u open voor het gebruik van andere visualisatie tools?
Ministerie van SZW 15-07-2020reageer
Wij staan open voor andere visualisatie tools.
Hoe stimuleren en helpen we werkgevers om meer mensen met een arbeidsbeperking aan te nemen?
Hoe stimuleren we kleine mkb’ers om aan de slag te gaan met een veilige en gezonde werkomgeving voor hun werknemers?
Hoe helpen we Inspectieteams met het breder toepasbaar maken en registreren van interventies?
Hoe stimuleren en helpen we werkgevers om meer mensen met een arbeidsbeperking aan te nemen?
Hoe stimuleren we kleine mkb’ers om aan de slag te gaan met een veilige en gezonde werkomgeving voor hun werknemers?
Hoe helpen we Inspectieteams met het breder toepasbaar maken en registreren van interventies?