Naam Examenleverancier :

Transcriptie

1 Naam Eamenleverancier : Toetsing Organisatieaudit Product Dienst Indien er sprake is van het toetsen van een product: Naam Product : Crebonummer : In te vullen door de Organisatie auditor van Kiwa Naar aanleiding van de resultaten van de uitgevoerde toetsing geeft Kiwa het volgende advies: Organisatieaudit: Positief: de getoetste dienst voldoet aan de gestelde eisen Negatief: de getoetste dienst voldoet niet aan de gestelde eisen Product: Positief: het getoetste product voldoet 100% aan de gestelde eisen Positief: het getoetste product voldoet tussen de 76% en 100% aan de gestelde eisen Negatief: het getoetste product voldoet voor minder dan 76% aan de gestelde eisen Dienst: Positief: de getoetste dienst voldoet aan de gestelde eisen Negatief: de getoetste dienst voldoet niet aan de gestelde eisen Datum: R. van Oorschot Manager Kiwa Educatie Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 1/17

2 Beoordeling audit eaminering Rapportage inkoopaudit eamenproducten en diensten op eaminering Product Opleiding crebo Beroepsgerichte deel Indien wijziging (tweede toetsing product) Datum audit Eamenleverancier nr Inhoudsauditor(en) Kiwa Toetstechnische auditor Organisatieauditor In te vullen door de IA (inhoudsauditor Kiwa) Wijziging betreft: alleen in te vullen als er een tweede/derde toetsing plaatsvindt In te vullen door de IA In te vullen door de IA In te vullen door de IA: achternaam en voorletters In te vullen door de TA (Toetstechnische auditor) : achternaam en voorletters In te vullen door de OA: achternaam en voorletters Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 2/17

3 Aspect 2.1 Eameninstrumenten Eamenstandaard 1: Het eameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen Onderscheid tussen ontwikkelingsgerichte toetsingen en eaminering Aangetoond Er is duidelijk kenbaar gemaakt dat het hier gaat om kwalificerende eamenproducten Goed Onvoldoende Oordeel Kiwa Slecht Geen oordeel Te weinig informatie beschikbaar Anders Toelichting: [voor de uitgebreide tekst: zie Normenbundel Eameninstrumenten 2012 van de Inspectie, pagina 6] In het geleverde eamenmateriaal moet duidelijk blijken dat het ook echt gaat om een eamen dat kan leiden tot een diploma. Bevindingen Inhoudsauditoren Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Bevindingen Toetstechnische auditoren Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 3/17

4 2.1.2 Dekking van het kwalificatiedossier Aangetoond Bij de inrichting van kwalificerende eamens is sprake van volledigheid en passende compleiteit, om de beroepsuitoefening op het vereiste beheersingsniveau zoals omschreven in het kwalificatiedossier, te eamineren. Dit betekent dat: voor opleidingen gericht op de beroepsgerichte kwalificatiestructuur de kwalificatie-eisen zijn opgenomen in de eamens, waarbij meer dan 75% van de werkprocessen per kerntaak - de essentie van het beroep inbegrepen wordt geëamineerd. Hierbij zijn de inhoud en de toetsvorm zodanig afgestemd op de vereisten, dat kennis, vaardigheden en houding in een goede balans passend worden beoordeeld. wettelijke beroepsvereisten - indien van toepassing volledig zijn geëamineerd met eamens die qua inhoud en toetsvorm passend zijn. Goed Voldoende Oordeel Kiwa Onvoldoende Slecht Geen oordeel Toelichting: Percentage benoemen Te weinig informatie beschikbaar Anders Ter informatie: Producten worden goedgekeurd indien de werkprocessen zijn gedekt in de range van de 76 en 100% van de werkprocessen per kerntaak van het desbetreffende kwalificatiedossier. De essentie van het beroep is hierin meegenomen. Het Keurmerk staat voor de bevinding/toetsing van 100% van alle producten en diensten van de eamenleverancier. De IA dient het betreffende Kwalificatiedossier (KD) te vergelijken met het eamenmateriaal. De IA dient gebruik te maken van het rapportmodel (bijlage). Eventuele afwijkingen dienen op het eerste blad van het rapport te worden vermeld. De TA hoeft deze standaard niet te toetsen. Bevindingen van de Inhoudsauditoren n.a.v. hun tool werkprocessen Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 4/17

5 2.1.3 Cesuur Aangetoond Oordeel Kiwa Er is een verantwoorde procedure gevolgd voor het bepalen van de cesuur, zowel voor eamenonderdelen als voor het eamen als geheel. De cesuur van het eameninstrumentarium ligt op het niveau waarop de student voldoet aan de vereisten van een beginnend beroepsbeoefenaar. De cesuur is zodanig opgesteld dat de beoordeling (en daarmee de waardering van de kennis, vaardigheden en houding van de student) in totaal niet lager uitpakt dan voor de vakbekwaamheid voor het beroep noodzakelijk is. (waarde) Er is sprake van een evenwichtige, niet oneigenlijk puntentoekenning die recht doet aan het belang van de kerntaken en werkprocessen. (balans) Er is sprake van een weging van de eamenopdrachten/-toetsen onderling, die geen afbreuk doet aan de genoemde cesuur. Goed Voldoende Onvoldoende Slecht Geen oordeel Te weinig informatie beschikbaar Anders Toelichting: Cesuur: de toekenning van de punten moet reëel zijn. Voert de leerling een opdracht voldoende uit, dan moet dit ook matchen met de cesuur (dus niet dat als een opdracht voldoende wordt uitgevoerd er een 8 (op de schaal tot 10) wordt toegekend). Dus laten zien wat /waarom de waardebepaling zo gemaakt is. Evenwichtig: de toekenning van de waarde moet in balans zijn. Voorbeeld: voor een steigerbouwer is het logisch dat de waarde van de toe te kennen punten voor het stabiel zetten van de steiger hoger ligt dan klantvriendelijk tegen een opdrachtgever te zijn. Weging: Heeft met bovenstaande punt te maken maar dan ook verfijnd niveau (bijvoorbeeld dat er per opdracht aangegeven wordt hoe zwaar de opdracht weegt) Bevindingen Inhoudsauditoren Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Schrijf de bevinding per onderdeel op (3, zie kolom aangetoond) Bevindingen Toetstechnische auditoren Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Schrijf de bevinding per onderdeel op (3, zie kolom aangetoond Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 5/17

6 2.1.4 Beoordelingswijze Aangetoond Het eameninstrumentarium is voorzien van een beoordelingsvoorschrift, dat een zo objectief mogelijke beoordeling waarborgt. Dit betekent dat: het beoordelingsvoorschrift is voorzien van richtlijnen die leiden tot een onafhankelijke beoordeling. de prestatie-indicatoren (of vergelijkbare beoordelingscriteria) herleidbaar in het beoordelingsvoorschrift zijn opgenomen en een correct antwoordmodel of beoordelingsschema beschikbaar is. de beoordelaar eruit kan opmaken welke (deel)waardering aan een prestatie van een student toegekend moet worden de beoordelaar eruit kan opmaken welke eindwaardering gegeven moet worden. de beoordelaar de gegeven waarderingen conform het beoordelingsvoorschrift herleidbaar kan onderbouwen. Oordeel Kiwa Toelichting: Uit de beoordelingsrichtlijnen blijkt dat de uitslag plaatsvindt op het niveau van de kerntaken en werkprocessen. De beoordeling wordt gebaseerd op de prestatie-indicatoren (of vergelijkbare beoordelingscriteria) uit het kwalificatiedossier. Als een eamen(onderdeel) niet wordt behaald, wordt op het niveau van de prestatie- indicator (of vergelijkbare beoordelingscriterium) verantwoord wat de oorzaak daarvan is. Goed Voldoende Onvoldoende Slecht Geen oordeel Te weinig informatie beschikbaar Anders Er dient dus een beoordelingsvoorschrift aanwezig te zijn waar bovenstaande 8 punten (zie kolom aangetoond) in opgenomen zijn. Bevindingen Inhoudsauditoren Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Schrijf de bevinding per onderdeel op (8, zie kolom aangetoond) Bevindingen Toetstechnische auditoren Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Schrijf de bevinding per onderdeel op (8, zie kolom aangetoond) Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 6/17

7 2.1.5 Transparantie Aangetoond Oordeel Kiwa Het eameninstrumentarium geeft alle betrokkenen een helder beeld van hoe het eamen (product of dienst) eruit ziet en hoe het wordt uitgevoerd en beoordeeld.. Er is opgenomen dat studenten en beoordelaars worden schriftelijk en tijdig geïnformeerd over de beoordelingscriteria en de wijze waarop het eamen (product of dienst) zal plaatsvinden en de wijze van beoordeling. (beschreven) Het eameninstrumentarium is voorzien van afnamecondities ( locatie, middel, materiaal, tijdsduur e.d.) en aanwijzingen voor de beoordelaars en de studenten (tijdsduur) voor de uitvoering van het eamen. Goed Voldoende Onvoldoende Slecht Geen oordeel Te weinig informatie beschikbaar Anders Toelichting: Informatie: deze dient vooraf gegeven te zijn! Afnamecondities: bij sommige eamens dient de kandidaat zelf materiaal mee te nemen, vaak is het aanwezig. Bevindingen Inhoudsauditoren Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Schrijf de bevinding per onderdeel op (2) Bevindingen Toetstechnische auditoren Let op dat in de bevinding wordt aangegeven of de standaard aanwezig is en zo ja: waar? Schrijf de bevinding per onderdeel op (2) Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 7/17

8 Oordeel Aspect 2.1 Eameninstrumenten Eamenstandaard 1: Het eameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen Opmerkingen Naam Inhoudsauditor: Datum: Handtekening Positief: het getoetste product voldoet 100% aan de gestelde eisen Positief: het getoetste product voldoet tussen de 76% en 100% aan de gestelde eisen Negatief: het getoetste product voldoet voor minder dan 76% aan de gestelde eisen Oordeel Aspect 2.1 Eameninstrumenten Eamenstandaard 1: Het eameninstrumentarium sluit aan op de uitstroomeisen en voldoet aan de toetstechnische eisen Opmerkingen Naam Toetstechnische auditor: Datum: Handtekening Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 8/17

9 Aspect 2.2 Afname en beoordeling. Indien het een ingekochte dienst betreft (anders niet van toepassing) Eamenstandaard 2: De eamenprocessen van afname en beoordeling zijn deugdelijk Authentieke afname Het eamen bevat tenminste activiteiten die de student als beginnend beroepsbeoefenaar in het toekomstige beroep uitvoert, Aangetoond afgestemd op het kwalificatiedossier. De werkomstandigheden en de sociale contet tijdens de beoordeling van het eamen komen zoveel mogelijk overeen met die in het toekomstige beroep; Het beroepenveld is betrokken bij de eaminering en beoordeelt de afname en beoordeling als realistisch. Goed Voldoende Oordeel Kiwa Onvoldoende Slecht Geen oordeel Te weinig informatie beschikbaar Anders Toelichting: Bevindingen van de Inhoudsauditoren GELDT DUS NIET VOOR PRODUCTAUDIT! Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 9/17

10 2.2.2 Betrouwbaarheid. Indien het een ingekochte dienst betreft (anders niet van toepassing) Aangetoond De afname en beoordeling zijn deugdelijk en verlopen zoals beoogd. In gelijke gevallen wordt gelijk geoordeeld. De beoordeling is zo objectief mogelijk. Voorzieningen die zijn getroffen om dat te bereiken worden adequaat toegepast. Eamenopdrachten, afnamecondities en beoordelingen zijn voor alle studenten zodanig opgezet en toegepast dat geen afbreuk wordt gedaan aan de betrouwbaarheid van de uitkomsten van de eamenopdracht of het eamenprogramma als geheel, noch aan het niveau daarvan. Er is sprake van een deskundige beoordeling van studenten gericht op het vakinhoudelijk correct beoordelen van de vereiste kennis, houding en vaardigheden van de student. Goed Voldoende Oordeel Kiwa Onvoldoende Slecht Geen oordeel Te weinig informatie beschikbaar Anders Toelichting: Bevindingen van de Inhoudsauditoren GELDT DUS NIET VOOR PRODUCTAUDIT! Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 10/17

11 Oordeel Aspect 2.2 Afname en beoordeling Eamenstandaard 2: De eamenprocessen van afname en beoordeling zijn deugdelijk. opmerkingen Naam Inhoudsauditor(en): GELDT DUS NIET VOOR PRODUCTAUDIT! Datum: Handtekening Positief: de getoetste dienst voldoet aan de gestelde eisen Negatief: de getoetste dienst voldoet niet aan de gestelde eisen Kwaliteit van eaminering bij de opleiding oordeel In te vullen door Kiwa organisatie crebo en cohort invullen opmerkingen Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 11/17

12 Product/ dienst Onderscheid ontwikkel en eaminering Dekking Cesuur Beoordelingswijze Transparantie Standaard Authentieke afname Betrouwbaarheid Standaard 2 Overzicht van de beoordeling van producten en/of diensten door de OA van Kiwa 1 Gebied 2: Eaminering en diplomering Eamenstandaard 1 Aspect 2.1 Eameninstrumenten Indicatoren Eamenstandaard 2 Proces afname en beoordeling Indicatoren crebo opleiding P/D Goed Onvoldoende Onvoldoende Slecht Geen oordeel De eamenkwaliteit is beoordeeld als Aan alle standaarden is voldaan, de elementen in het portret worden op een uitstekende wijze uitgevoerd Aan alle standaarden is voldaan. Er wordt voor een grootste deel aan de omschrijving van de portretten voldaan, waaronder de essentiële onderdelen Aan één standaard wordt niet voldaan Aan twee of drie standaarden wordt niet voldaan Te weinig informatie beschikbaar Anders Normering: Binnen de audit geldt dat de eamenkwaliteit van een opleiding voldoende is wanneer alle twee de standaarden voldoende zijn en per standaard aan alle indicatoren is voldaan. In artikel van de WEB wordt gesproken over standaarden voor de kwaliteit van de eamens. Deze standaarden en beoordelingsnorm zijn opgenomen in een ministeriele Regeling Eamenstandaarden MBO en maken tegelijk integraal deel uit van het waarderingskader. Om deze reden worden de aspecten hier ook standaarden genoemd. De wettelijke beroepsvereisten moeten in de eamens zijn verwerkt. 1 Normenbundel Eameninstrumenten 2012 (Onderwijsinspectie) Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 12/17

13 Voor de eamenkwaliteit van een opleiding wordt een oordeel uitgesproken op een vijf puntschaal (goed voldoende onvoldoende slecht- geen oordeel. Geen oordeel is een etra uitleg van slecht. De eamenkwaliteit van een opleiding is voldoende of goed wanneer alle drie de standaarden voldoende zijn en er per standaard aan alle indicatoren is voldaan. Beoordeling product en dienstlevering borging door de Organisatieauditor Eamenstandaard Diplomering Indicatoren 1. Levering eamenproducten en of diensten is transparant en voldoet om de onderwijsinstellingen aan de formele eisen te laten voldoen besluitvorming diplomering Verantwoordelijkheid eamencommissie Items Product Dienst Opmerkingen 1 De eamenproducten zijn voor verspreiding vastgesteld door de leverancier. 2 De onderwijsinstelling heeft op verzoek inzage in het verslag van de uitslag van de vaststellingsvergadering met gespecificeerde kwaliteitscontrole. 3 De normering en cesuur worden ter beschikking van de onderwijsinstelling gesteld. 4 De leverancier stelt het eamenproduct (inclusief verantwoordingsdocumentatie) tijdig beschikbaar ter vaststelling door de onderwijsinstelling. 5 Het beoordelingsvoorschrift is aanwezig 6 Het beoordelingsvoorschrift is eenduidig voor alle beoordelaars 7 De toets is voorzien van aanwijzingen voor de uitvoering van de eamens 8 De toets is op het gebied van de lay out conform de lay out van de eameninstelling. 9 Er is vastgelegd hoe te handelen indien de inspectie beoordeelt dat de eamenproducten niet aan de criteria voldoen. 10 Kennis, vaardigheden en houding zijn vastgesteld en vastgelegd. Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 13/17

14 11 De uitslagen van de afgenomen toetsen/eamens (producten en diensten) zijn vastgelegd. De adviezen aan de eamencommissie van de onderwijsinstelling zijn vastgelegd. Advies de school om dit en hoe goed te regelen 12 Er is vastgelegd hoe te handelen bij geschillen over de uitslag product of dienst 13 Er is vastgelegd hoe de student inzagerecht heeft in het gemaakte eamen (product of dienst) 14 Er is vastgelegd over de wijze waarop de studenten de toetsing (product of dienst) kunnen evalueren. 15 Er is een formeel evaluatiemoment en procedure vastgelegd tussen de onderwijsinstelling en de eamenleverancier. Aan de school om dit en hoe goed te regelen Aan aan de school om dit en hoe goed te regelen Aan de school om dit en hoe goed te regelen Oordeel 1. Levering eamenproducten is transparant en voldoet om de roc s aan de formele eisen te laten voldoen opmerkingen Naam Organisatieauditor(en): Datum: Handtekening Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 14/17

15 2. Het contract leverancier afnemer is transparant en voldoet (door de Organisatieauditor) Items van een product en of dienst Product Dienst Opmerkingen 1 De namen van de contractpartijen zijn vermeld. 2 De looptijd is in het contract opgenomen. 3 Het contract is voorzien van dagtekening en ondertekening van de contractpartijen. 4 Het contract bevat: een beschrijving/vermelding van: het (de) in te kopen eamen(s). Indien van toepassing: het aantal versies en de aanlevering daarvan. het crebo-nummer en de kwalificatie. het cohort van het Kwalificatiedossier. een vermelding van de plaats van afname. de levering van hulpmiddelen en faciliteiten. Wie verantwoordelijk is voor: a. inrichting van de eamenlocatie. b. aanwezigheid van deskundige beoordelaars. c. melding van onregelmatigheden tijdens de afname. d. de rapportage van de resultaten. 5 Per in te kopen eamen is bekend of het eamen voldoet aan de eisen conform het toezichtkader van de inspectie wat betreft: - uitstroomeisen. - toetstechnische eisen. 6 De wijze waarop geheimhouding wordt gewaarborgd is vermeld. 7 De aanlevertermijn van noodzakelijke bescheiden door de contractpartijen is vermeld. 8 In de overeenkomst is een verwijzing naar een bij de leverancier geldende klachtenprocedure opgenomen, waarin uitgewerkt is hoe moet worden gehandeld als de afnemer inhoudelijke en/of toetstechnische mankementen aan het (de) ingekochte eamen(s) vaststelt voor, tijdens of na de afname van een eamen. Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 15/17

16 9 In de overeenkomst is vastgelegd hoe de aansprakelijkheid van de leverancier is geregeld indien zij in gebreke blijft. 10 In de overeenkomst is vastgelegd wanneer en op welke wijze het (de) ingekochte eamen(s) worden geëvalueerd. 11 In de overeenkomst is vastgelegd op welke manier afnemers van eamens van de resultaten van de evaluatie op de hoogte worden gesteld. Oordeel 2. Het contract leverancier afnemer is transparant en voldoet Opmerkingen Naam Organisatieauditor(en) : Datum: Handtekening Product: Positief: het getoetste product voldoet 100% aan de gestelde eisen Negatief: het getoetste product voldoet niet 100% aan de eisen Dienst: Positief: de getoetste dienst voldoet aan de 100% gestelde eisen Negatief: de getoetste dienst voldoet niet aan de 100% gestelde eisen Kwaliteit dienst - borging Oordeel In te vullen door de Kiwa organisatie crebo en cohort invullen opmerkingen Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 16/17

17 Eisen uit het Keurmerk Eamenleverancier (door de Organisatieauditor) Artikel Items van een product en of dienst Product Dienst Verwijzing Keurmerk De organisatie dient te beschikken over een X X goedgekeurd verslag Beschikbaar stellen van scholing X X Juridische status X X Vastleggen van het primaire proces X X Privacyreglement/geheimhouding medewerkers X X Klachtenprocedure/ klachtenmanagement X X Klanttevredenheid X X Beroepenveld X X Vaststellen deskundigheid medewerkers X X Interne audit X X Ontwikkelen/vaststellen beoordelingsinstrumenten X Maatregelen zorgvuldig gebruik X Leveringsvoorwaarden Evaluatie van het product /dienst Oordeel Naam Organisatieauditor(en) : Overige criteria Keurmerk Eamenleverancier Datum: opmerkingen Handtekening Product: Positief: het getoetste product voldoet 100% aan de gestelde eisen Negatief: het getoetste product voldoet niet 100% aan de eisen Dienst: Positief: de getoetste dienst voldoet 100% aan de gestelde eisen Negatief: de getoetste dienst voldoet niet 100 %aan de gestelde eisen Auditrapport Keurmerk Eamenleverancier versie 3.1 voor de auditoren (oktober 2013) Pagina 17/17