de haalbaarheid van de ASQ-3 “home procedure” werd beoordeeld in een veldstudie in een Noord-Indiase stedelijke omgeving. Voorafgaand aan de vijf maanden dataverzameling, was er een 11-daagse training, inclusief vertaling, culturele aanpassingen en standaardisatie van de examinatoren. In het translationele proces werden vier items gewijzigd om geschikt te zijn voor de studiepopulatie. De algemene feedback, zowel tijdens de training van de examinatoren als tijdens de klinische proef, gaf aan dat kinderen, verzorgers en examinatoren de ASQ-3 “home procedure” doorgaans prettig vonden om bij te wonen. De examinatoren ervaren de ASQ-3 “home procedure” als een redelijk en haalbaar instrument om toe te dienen in de huidige klinische proef. Tijdens het onderzoek werden alle geïnitieerde sessies afgerond en met zeer weinig gemiste observaties. De ICC-waarden laten een hoge mate van overeenstemming tussen de waarnemers zien, zowel tijdens de standaardisatie als tijdens de hoofdstudie, wat wijst op de haalbaarheid van de ASQ-3 in termen van het verzamelen van betrouwbare gegevens.
bovendien lagen de totale ASQ-scores in het volledige bereik van mogelijke waarden, maar sommige items vertoonden geen variabiliteit. De correlatiecoëfficiënten toonden een bevredigende overeenstemming tussen de vijf subschalen en de totale schaal, maar de gestandaardiseerde Alfa-waarden varieerden in de verschillende subschalen en leeftijdsniveaus, wat wijst op een zekere zwakte van de interne consistentie.
voor de culturele aanpassingen van de ASQ-3-formulieren, werden vier items in de 11 relevante formulieren geïdentificeerd als onjuist in een Noord-Indiase context, en werden gewijzigd. Dit is in overeenstemming met andere studies over de vertaling en aanpassingen van de ASQ aan nieuwe culturele contexten die vergelijkbare veranderingen op itemniveau melden . Het kan lijken dat sommige items zijn meer uitdagend om te gebruiken in andere culturen. Bijvoorbeeld, het item met betrekking tot een vork werd gewijzigd in de huidige studie, ook een studie in Ecuador meldt dat items met betrekking tot het gebruik van een vork werden verwijderd omdat ze niet vaak worden gebruikt . In de eerder genoemde studie uit India werden de items met vorken ook grotendeels onbeantwoord gelaten, wat erop wijst dat de items irrelevant waren voor de kinderen in de steekproef . Bovendien bleken spiegels ongewoon te zijn voor de huidige onderzoekspopulatie, wat ook werd aangetoond in eerdere aanpassingen . In de ASQ-3 handleiding worden de mirror-items gemarkeerd als mogelijke problematische items voor veel culturen . Dit zou erop kunnen wijzen dat er een aantal zaken zijn die meer cultureel specifiek zijn dan andere, en die met bijzondere aandacht moeten worden bekeken bij het interpreteren van de resultaten van studies, evenals wanneer nodig aanpassingen worden aangebracht in toekomstige studies.
in dit onderzoek toonden achttien items geen variabiliteit aangezien alle kinderen in de specifieke leeftijdscategorieën de relevante vaardigheid voor het item hadden ontwikkeld, bijvoorbeeld de vaardigheid van lopen in de bruto motorische subschaal. Dit kan incidenteel zijn geweest omdat de groepen op elk leeftijdsniveau klein waren (variërend van 16 tot 52 deelnemers in elke leeftijdscategorie). Het aantal constante items kan echter ook een uitdrukking zijn van culturele verschillen in de opvoeding van kinderen en verwachtingen voor de ontwikkeling van kinderen tussen Noord-India en de VS. Deze laatste aanname geeft aanleiding tot het idee dat de 18 constante items niet geschikt zijn voor de ontwikkeling van deze Noord-Indiase steekproef van zuigelingen en peuters, en moeten worden aangepast en/of gegroepeerd leeftijd adequaat voorafgaand aan verder gebruik.
de interne consistentie van de ASQ-3 bij overdracht naar een Noord-Indiase instelling werd uitgedrukt door correlaties tussen de totale scores en de subschaal scores, en door gestandaardiseerde Alfas. De sterke en consistente correlatiecoëfficiënten tussen alle vijf subschalen en de totale ASQ-3 Schaal wijzen op concurrency. De gematigde correlatiecoëfficiënten tussen de vijf subschalen worden verwacht, wat wijst op een zekere mate van overeenstemming tussen de subschalen, maar tegelijkertijd onderstreept dat de subschalen verschillende ontwikkelingsvaardigheden meten. Deze resultaten zijn in overeenstemming met de correlaties tussen de verschillende subschalen en de totale scores beschreven in de ASQ-3 handleiding . Voor de gestandaardiseerde Alpha ‘ s is het beeld echter niet zo duidelijk. De 66 Alfa-waarden variëren van zeer intern consistent tot onbevredigend en in twee gevallen negatief. De gestandaardiseerde Alfas voor de totale schaal op de verschillende leeftijdsgroepen geven over het algemeen aan dat de schaal zeer intern consistent is en dezelfde thematische gebieden meet. Voor de subschalen echter, de waarden variëren. De berekeningen van de gestandaardiseerde Alfa ‘ s ontvouwen daarom extra problematische items die onbevredigende Alfa-waarden veroorzaken, en zelfs negatieve covariantie van items. Deze items zijn inconsistent met de andere items in de subschaal, en daarom kan niet hetzelfde ontwikkelingsgebied in deze setting te beoordelen. Analyse van relevante subschalen bij het verwijderen van aangepaste items leidt niet consequent tot een verbeterde interne consistentie, en geeft dus aan dat deze niet de primaire oorzaak zijn van de slechte interne consistentie. De problematische items moeten verder worden onderzocht om inzicht te krijgen in waarom bepaalde items in deze culturele setting inconsistentie vertonen. Met verdere aanpassingen aan bepaalde items zou er een mogelijkheid zijn om de interne consistentie van de schalen te verbeteren en vervolgens het niveau van betrouwbaarheid te verhogen.
de berekeningen van de gestandaardiseerde Alfas zijn gevoelig voor het aantal items dat in de analyse is opgenomen . In de Alfa-berekeningen van de totale schaal zijn 30 posten opgenomen, terwijl slechts zes posten zijn opgenomen in de berekeningen van de subschaal Alfa ‘ s. Constante items zijn uitgesloten van de analyse van gestandaardiseerde Alfas, en daarom kan het aantal items zelfs minder dan Zes op bepaalde leeftijd niveaus in deze studie, omdat een totaal van 18 items zijn constant. Dit kan de Alfa-waarden in de relevante subschalen en leeftijdsniveaus nog verder verlagen. Twee Alfa-waarden zijn bijzonder problematisch in onze berekeningen. Deze zijn in de Persoonlijke sociale schaal op 24 en 36 maanden waar items negatieve gemiddelde covariantie veroorzaken, en dus in strijd met de veronderstellingen van de berekeningen, wat resulteert in geen alfa-waarden weergegeven in de resultaten.
in het technisch rapport van het ASQ – 3-Handboek worden de gestandaardiseerde Alfa-waarden uit hun steekproef van 18 000 kinderen vermeld. Er werd geconcludeerd dat de algemene interne consistentie van de subschalen goed tot aanvaardbaar was. De tabel van de Alfas voor alle leeftijdsintervallen heeft echter waarden van 0,51 tot 0,87. De Persoonlijke sociale subschaal is de schaal met de armste waarden. In een studie over de cross culturele aanpassing van de ASQ-2 aan een Koreaanse setting, varieerden de gestandaardiseerde Alfa-waarden van alle subschalen van 0,30 tot 0,91, opnieuw met de armste waarden in de Persoonlijke sociale subschaal . In hun bespreking van de studie, Heo, Squires en Yovanoff beweren dat Persoonlijke sociale items zoals eten en dressing vaardigheden zal leiden tot verschillen tussen de Koreaanse en de Amerikaanse sample. Gladestone et al. argumenteer op dezelfde manier in hun rapport over de wijziging van westerse screeningsinstrumenten naar een Malawische setting dat culturele verschillen vaak voorkomen op het gebied van sociale ontwikkeling. Deze veronderstellingen zijn in overeenstemming met de huidige studie, waar de Persoonlijke sociale subschalen de over het algemeen armste Alfa-waarden bieden. In het proces van verdere aanpassing van de ASQ-3 naar een Noord-Indiase setting, De Persoonlijke sociale subschaal moet worden behandeld met bijzondere zorg.
we hebben ASQ-3 als “home procedure”toegediend. Feedback en observaties tijdens de sessies geven aan dat de ASQ-3 “home procedure” in het algemeen een plezierige tijd was voor zowel kinderen als verzorgers. Examinatoren ervaren de aangepaste ASQ-3 als redelijk in het beoordelen van kinderen uit het gebied. Dit geeft aan dat de geldigheidstermijn van de aangepaste ASQ-3 bevredigend was. De sessies waren kort en alle 422 kinderen voltooiden hun sessie zodra deze werd gestart. Kinderen kregen tijdens sessies tijd om te oefenen met mogelijk onbekend materiaal en werden gescoord op basis van hun prestaties tijdens sessies. Op basis van de mogelijkheid van het verzamelen van informatie zowel uit observatie en zorgverlener rapport ontbrekende gegevens waren schaars. Deze factoren ondersteunen de haalbaarheid van de ASQ-3 “home procedure” in grote populatie-gebaseerde studies. Bovendien werd de evaluatie van de ontwikkeling tegen lage kosten uitgevoerd. De examinatoren waren geen psychologen, de ASQ-3 kit werd online gekocht en er was slechts één kit nodig voor de studieplaats. De benodigde materialen en apparatuur voor de “home procedure” werden gekocht op lokale markten, of gedownload van het Internet. Toegankelijke tools tegen lage kosten, die gemakkelijk te gebruiken zijn en die plezierig zijn voor de kinderen in een bepaalde cultuur zijn in overeenstemming met de aanbevelingen van Fernald, Kariger, Engle en Raikes in hun toolkit voor de beoordeling van de ontwikkeling van kinderen in lage en middeninkomenslanden.
De “thuisprocedure” – benadering vereist echter enige opleiding van examinatoren, naast oefensessies na de initiële opleiding. In ons onderzoek voerden we een 11-daagse training uit, waarbij ook werd gesproken over culturele aanpassingen. De ICCs zowel de standaardisatieoefeningen tijdens de opleiding als de kwaliteitscontrole tijdens de studieperiode tonen aan dat de examinatoren door intensieve training en daaropvolgende praktijk erin geslaagd zijn een hoge mate van overeenstemming te bereiken in hun scorings. De bevredigende ICC ‘ s dienen als verdere ondersteuning dat de ASQ-3 “home procedure” een gunstige benadering kan zijn om efficiënt betrouwbare gegevens over de ontwikkelingsstatus van kinderen voor onderzoeksdoeleinden te verkrijgen.
een uitdaging van de ASQ-3 “home procedure” voor onderzoeksdoeleinden is dat, hoewel het de bedoeling was van de examinatoren om zoveel mogelijk van de vaardigheden van de kinderen tijdens sessies te observeren, sommige ASQ items deze mogelijkheid niet bieden vanwege de inherente structuur. Analyse toont aan dat de motorische schalen en de probleemoplossende schalen de meeste items bevatten die door examinatoren kunnen worden waargenomen tijdens een assessmentsessie. De twee resterende schalen, communicatie en persoonlijke sociale omvatten meer items die informatie van de verzorger nodig hebben om te scoren. De schalen kunnen daarom worden gezien als gegevens van verschillende kwaliteit, drie van de schalen bieden objectieve informatie gescoord door opgeleide examinatoren, en twee van de schalen zijn meer afhankelijk van het subjectieve rapport van zorgverleners.
Ouderrapport geeft wel een risico op onnauwkeurigheid en/of overstatements in het rapport van de ontwikkeling van het kind als gevolg van factoren zoals sociale wenselijkheid, onervarenheid van verzorgers bij het interpreteren van de vaardigheden van hun kind en/of hun onvermogen om het gedrag van het kind nauwkeurig te rapporteren . Het ASQ-systeem is echter ontwikkeld en gebaseerd op de overtuiging dat verzorgers informatie kunnen verstrekken voor een goede beoordeling van hun kinderen. Bijvoorbeeld, een studie die de ASQ voltooiing van lage en middeninkomens ouders in de VS vergelijkt met de daaropvolgende beoordeling door de Bayley schaal van baby en peuter ontwikkeling, toont geen verschillen in de nauwkeurigheid van scores in de twee groepen van ouders, het geven van steun aan het idee dat ouders-voltooiing van de ontwikkeling van kinderen vragenlijsten betrouwbare gegevens ook in groepen met een hoog risico te geven . Voor nu, bij het gebruik van de ASQ-3 “home procedure” voor onderzoeksdoeleinden in deze culturele setting, moeten gegevens zorgvuldig worden geïnterpreteerd met het verschil in de kwaliteit van informatie in het achterhoofd.
de totale ASQ-3 scores variëren van nul (geen scores) tot 300 (volledige score), in onze studie varieerden de scores van 30 tot 300. De vijf subschalen varieerden van nul tot 60 (volledige subschaalscore). Onze resultaten impliceren dat hoewel de gegevens niet perfect normaal verspreid zijn, de ASQ-3 erin geslaagd is om kinderen in beide uiteinden van de schaal te identificeren. De totale ASQ-scores hebben een gemiddelde van 231,9 en SD van 50, terwijl voor de subschalen de gemiddelde scores variëren van 44,8 tot 47,8. Een studie van Kerstjens et al. vergelijkt gemiddelde subschaal waarden tussen Nederlandse, Amerikaanse, Noorse en Koreaanse monsters. De gemiddelde waarden uit onze studie zijn over het algemeen lager op alle subschalen, met uitzondering van de fijne motorische subschalen waar de gemiddelde waarden uit onze studies iets groter zijn dan in de Nederlandse en Amerikaanse steekproef, maar nog steeds lager dan in de Noorse en Koreaanse steekproef. De bedoeling van deze studie was niet om de ASQ-3 formeel te valideren voor een Noord-Indiase setting en het vaststellen van cut off scores voor ontwikkelingsachterstand bij de kinderen. De verschillen in gemiddelde waarden van de subschaal moeten daarom zorgvuldig worden geïnterpreteerd. Fernald, Kariger, Engle en Raikes benadrukken dat wanneer er geen cut-off-scores worden vastgesteld voor de gegeven cultuur waar het screeningsinstrument wordt gebruikt, het gebruik ervan beperkt moet worden tot het vergelijken van groepen. De verschillen tussen gemiddelde waarden in onze studie en andere studies onderstrepen deze stelling. Totdat verdere validatie is uitgevoerd op de ASQ-3 voor deze specifieke populatie, zijn er geen cut-off scores haalbaar voor deze Noord-Indiase steekproef, en de gegevens moeten worden beperkt tot de vergelijking van groepen.
bij het evalueren van de overdracht van een beoordelingsinstrument naar een nieuwe culturele context is betrouwbaarheid van de test-hertest van belang. In het kader van deze studie was een dergelijke evaluatie niet mogelijk. Dit is een duidelijke zwakte van de studie. Bovendien verdient het de voorkeur de vertaalde vragenlijst voorafgaand aan de studie te testen en ruimte te bieden voor verdere aanpassingen voorafgaand aan de start van de studie op basis van voorlopige berekeningen van interne consistentie, variabiliteit en constante elementen. Deze beperkingen van de studie, samen met andere opmerkingen in het Discussiegedeelte, zouden de basis moeten vormen voor verdere pogingen om de ASQ-3 over te brengen naar nieuwe culturele omgevingen.