EL DESAFÍO DE EVALUAR FAMILIAS DESDE UN ENFOQUE ECO-SISTÉMICO: NUEVOS APORTES A LA CONFIAB CONFIABILID ILIDAD AD Y VALIDEZ VALIDEZ DE LA ESCALA ESCAL A NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
EL DESAFÍO DE EVALUAR FAMILIAS DESDE UN ENFOQUE ECO-SISTÉMICO: NUEVOS APORTES A LA CONFIABILIDAD Y VALIDEZ DE LA ESCALA NCFAS Esteban Gómez Muzzio1 Protectora de la Inancia
RESUMEN Se presentan un estudio sobre nuevos aportes a la conabilidad y validez de la Escala de Evaluación Familiar de Carolina del Norte, NCFAS, en su versión en español. El estudio se realizó con población en vulnerabilidad psicosocial (N=782) atendida en los programas “Viviendo en Familia” de la Protectora de la Inancia. Se exploró la consistencia interna, obteniendo valores de ala de Cronbach entre .733 y .873 al ingreso, y entre .681 y .908 al egreso. Dentro de cada dimensión, los ítems especícos correlacionaron signicativamente con su ítems globales, con p< .001, y con la mayoría de las correlaciones ubicándose en niveles moderado a alto. El instrumento se mostró sensible a cambios pre-post en la intervención, sirv iendo para nes de evaluación de resultados y además l as dimensiones principales de la NCFAS evaluadas al egreso, se asocian signicativamente ( p< .001) a las condiciones de “niño institucionalizado”, “egreso exitoso”, “egreso no exitoso” y “buen pronóstico” de los casos al egreso, mostrando una adecuada validez concurrente con criterios de logro en la intervención. Palabras Clave: evaluación amiliar, NCFAS, confabilidad y validez, intervención amiliar .
INTRODUCCIÓN Día tras día, millones de amilias en el mundo enrentan el desaío de criar a sus hijos e hijas bajo condiciones de gran adversidad y vulnerabilidad biopsicosocial, sometiéndose a elevados niveles de estrés y generando dinámicas progresivas de tensión, conicto, sintomatología y deterioro uncional y relacional. En un elevado porcentaje de estas amilias se observan s ituaciones de maltrato inantil, negligencia parental, violencia intraamiliar, depresión materna y alcoholismo, entre muchos 1
Psicólogo y Magíster en Psicología Clínica. Investigador de la Unidad de Diseño y Evaluación de Programas y asesor de la Dirección Estratégica, Protectora de la Inancia, Chile. El autor agradece a Bernardita Ciuentes y Edgar Valencia por sus valiosos aportes a un borrador previo de este artículo; y a Priscilla Martens de National Family Preservation Network, por s u apoyo al desarrollo de la versión en español de la escala NCFAS.
95
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
otros problemas, que al concatenarse entre sí terminan por sumir a sus miembros
Una aproximación distinta, propone el uso de instrumentos válidos y
en una condición de multiproblematicidad, dolor y desesperanza de la que cada vez
conables que hayan sido sometidos a procedimientos de análisis y pereccionamiento
les cuesta más recuperarse por sí solos (Gómez, Muñoz y Haz, 2007). El impacto de
continuo en el tiempo (Cumsille, 1996). En línea con este enoque, la evaluación
estas condiciones sobre el desarrollo humano y especícamente sobre el desarrollo
amiliar integral en los programas psicosociales ha sido denida como “el proceso
inantil ha sido sistemática y contundentemente documentado alrededor del mundo
de identicar, recolectar y sopesar inormación para comprender los actores signicativos que aectan la protección, permanencia y bienestar inantil, las
(Calkins et al., 2007; Walker et al., 2007), generando un imperativo técnico y ético para mejorar los sistemas de apoyo a las amilias, tanto en sus aspectos teóricos y metodológicos, como de eciencia, ecacia y costo-eectividad. De no activarse mecanismos de resiliencia que lleven a la amilia a generar procesos de reorganización ante la adversidad, procesos que les permitan recuperar y mantener un nivel de ajuste entre sus recursos y necesidades (Kotliarenco y Gómez, 2010), es probable que el sistema amiliar tienda a su disolución con la consecuencia de que uno o varios de sus hijos, sean sacados de la amilia transitoriamente y protegidos en residencias o amilias de acogida, lo cual, aunque sea necesario, conlleva eectos diíciles de manejar, tanto para el niño como para su amilia, en múltiples planos a considerar. Resulta entonces de una importancia capital apoyar adecuadamente a estas amilias, pues la intervención amiliar oportuna, pertinente y competente tiene un enorme potencial para activar mecanismos de resiliencia en amilias e individuos sometidos a condiciones de adversidad (Kalil, 2003). Pero entre las buenas intenciones y la implementación eectiva de estrategias con eecto terapéutico, hay un espacio, que muchas veces se observa teñido por la conusión y dispersión de la acción proesional producto de la alta de un oco claro que precise las metas a alcanzar. Al trabajar con amilias en vulnerabilidad biopsicosocial, se hace necesario contar con metodologías orientadas por una evaluación precisa de las necesidades y recursos, riesgos y oportunidades, en cada uno de los miembros signicativos de la amilia y en la amilia como un todo. Así, la evaluación integral de amilias emerge como un desa ío prioritario y no siempre ácil de llevar a la práctica (véase Cumsille, 1996). Es habitual que cada equipo, tras identicar esta necesidad, intente desarrollar sus propios sistemas y criterios particulares de evaluación. El riesgo de este tipo de aproximación es no contar con un lenguaje común, que permita unicar la mirada entre diversos proesionales y entre distintos programas; así como la carencia de estudios sobre la conabilidad y validez de dichos criterios.
capacidades protectoras parentales y la habilidad de la amilia para garantizar la seguridad de sus niños” (Johnson et al., 2006, p. 1). Este acercamiento a la evaluación amiliar, implica un esuerzo inicial de entrenamiento y reexión, pero los benecios a mediano y largo plazo para los programas de intervención amiliar son evidentes: (a) se cuenta con medidas conables y válidas que permiten tanto el diagnóstico inicial de un caso como la elaboración de su plan de intervención y la evaluación al egreso; (b) se cuenta con instrumentos que permiten realizar una evaluación pre-post de la eectividad y costo-eectividad del programa de intervención y (c) los resultados de dichas evaluaciones pueden ser comunicados y diundidos a gran escala, logrando el apoyo de la comunidad proesional especializada. Por tanto, parece ser una buena idea que los procesos de modernización y proesionalización en que se encuentran inmersas las organizaciones sociales en Chile y Latinoamérica consideren, en el diseño de sus programas de intervención con amilias vulnerables, el uso de instrumentos válidos y conables; y sin embargo, este camino puede no ser tan sencillo, ya que se cuenta con escasas opciones para la evaluación de amilias en la actualidad, siendo incluso más reducidas cuando no se quiere evaluar únicamente los décit y necesidades, sino también los recursos y ortalezas con que se cuenta. Además, muchos de los instrumentos disponibles para evaluar amilias son auto-reportes (por ejemplo, el Family Assessment Device – FAD, el Family Adaptability and Cohesión Evaluation Scales – FACES IV o el Family Assessment Measure – FAM III , Johnson et al., 2006), y los auto-reportes han sido criticados por usar una uente de nivel individual para evaluar una dimensión de orden amiliar, con las consecuentes amenazas a la validez de la evaluación, debiendo usarse con ciertos resguardos al generalizar los resultados (Cumsille, 1996). Una alternativa o complemento a las medidas de auto-reporte son las medidas observacionales, que pueden ser (a) esquemas de codicación de la interacción, por ejemplo mediante el uso de registro de secuencias de interacción en video (son muy precisos y permiten un nivel de evaluación micro-analítico, pero son muy costosos y diíciles de implementar), o (b) escalas de clasicación del uncionamiento amiliar en torno a un esquema
96
97
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
otros problemas, que al concatenarse entre sí terminan por sumir a sus miembros
Una aproximación distinta, propone el uso de instrumentos válidos y
en una condición de multiproblematicidad, dolor y desesperanza de la que cada vez
conables que hayan sido sometidos a procedimientos de análisis y pereccionamiento
les cuesta más recuperarse por sí solos (Gómez, Muñoz y Haz, 2007). El impacto de
continuo en el tiempo (Cumsille, 1996). En línea con este enoque, la evaluación
estas condiciones sobre el desarrollo humano y especícamente sobre el desarrollo
amiliar integral en los programas psicosociales ha sido denida como “el proceso
inantil ha sido sistemática y contundentemente documentado alrededor del mundo
de identicar, recolectar y sopesar inormación para comprender los actores signicativos que aectan la protección, permanencia y bienestar inantil, las
(Calkins et al., 2007; Walker et al., 2007), generando un imperativo técnico y ético para mejorar los sistemas de apoyo a las amilias, tanto en sus aspectos teóricos y metodológicos, como de eciencia, ecacia y costo-eectividad. De no activarse mecanismos de resiliencia que lleven a la amilia a generar procesos de reorganización ante la adversidad, procesos que les permitan recuperar y mantener un nivel de ajuste entre sus recursos y necesidades (Kotliarenco y Gómez, 2010), es probable que el sistema amiliar tienda a su disolución con la consecuencia de que uno o varios de sus hijos, sean sacados de la amilia transitoriamente y protegidos en residencias o amilias de acogida, lo cual, aunque sea necesario, conlleva eectos diíciles de manejar, tanto para el niño como para su amilia, en múltiples planos a considerar. Resulta entonces de una importancia capital apoyar adecuadamente a estas amilias, pues la intervención amiliar oportuna, pertinente y competente tiene un enorme potencial para activar mecanismos de resiliencia en amilias e individuos sometidos a condiciones de adversidad (Kalil, 2003). Pero entre las buenas intenciones y la implementación eectiva de estrategias con eecto terapéutico, hay un espacio, que muchas veces se observa teñido por la conusión y dispersión de la acción proesional producto de la alta de un oco claro que precise las metas a alcanzar. Al trabajar con amilias en vulnerabilidad biopsicosocial, se hace necesario contar con metodologías orientadas por una evaluación precisa de las necesidades y recursos, riesgos y oportunidades, en cada uno de los miembros signicativos de la amilia y en la amilia como un todo. Así, la evaluación integral de amilias emerge como un desa ío prioritario y no siempre ácil de llevar a la práctica (véase Cumsille, 1996). Es habitual que cada equipo, tras identicar esta necesidad, intente desarrollar sus propios sistemas y criterios particulares de evaluación. El riesgo de este tipo de aproximación es no contar con un lenguaje común, que permita unicar la mirada entre diversos proesionales y entre distintos programas; así como la carencia de estudios sobre la conabilidad y validez de dichos criterios.
capacidades protectoras parentales y la habilidad de la amilia para garantizar la seguridad de sus niños” (Johnson et al., 2006, p. 1). Este acercamiento a la evaluación amiliar, implica un esuerzo inicial de entrenamiento y reexión, pero los benecios a mediano y largo plazo para los programas de intervención amiliar son evidentes: (a) se cuenta con medidas conables y válidas que permiten tanto el diagnóstico inicial de un caso como la elaboración de su plan de intervención y la evaluación al egreso; (b) se cuenta con instrumentos que permiten realizar una evaluación pre-post de la eectividad y costo-eectividad del programa de intervención y (c) los resultados de dichas evaluaciones pueden ser comunicados y diundidos a gran escala, logrando el apoyo de la comunidad proesional especializada. Por tanto, parece ser una buena idea que los procesos de modernización y proesionalización en que se encuentran inmersas las organizaciones sociales en Chile y Latinoamérica consideren, en el diseño de sus programas de intervención con amilias vulnerables, el uso de instrumentos válidos y conables; y sin embargo, este camino puede no ser tan sencillo, ya que se cuenta con escasas opciones para la evaluación de amilias en la actualidad, siendo incluso más reducidas cuando no se quiere evaluar únicamente los décit y necesidades, sino también los recursos y ortalezas con que se cuenta. Además, muchos de los instrumentos disponibles para evaluar amilias son auto-reportes (por ejemplo, el Family Assessment Device – FAD, el Family Adaptability and Cohesión Evaluation Scales – FACES IV o el Family Assessment Measure – FAM III , Johnson et al., 2006), y los auto-reportes han sido criticados por usar una uente de nivel individual para evaluar una dimensión de orden amiliar, con las consecuentes amenazas a la validez de la evaluación, debiendo usarse con ciertos resguardos al generalizar los resultados (Cumsille, 1996). Una alternativa o complemento a las medidas de auto-reporte son las medidas observacionales, que pueden ser (a) esquemas de codicación de la interacción, por ejemplo mediante el uso de registro de secuencias de interacción en video (son muy precisos y permiten un nivel de evaluación micro-analítico, pero son muy costosos y diíciles de implementar), o (b) escalas de clasicación del uncionamiento amiliar en torno a un esquema
96
97
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
conceptual determinado (son más generales y permiten una evaluación macro-
cuidador, uso de drogas/alcohol del cuidador. La sub-escala Interacciones Familiares
analítica, siendo menos costosas y más áciles de implementar, pero posiblemente
evalúa aspectos relacionales y vinculares entre los miembros de la amilia, con los
menos precisas rente a ciertos conceptos, por ejemplo, el apego o la sensibilidad
siguientes ítems: interacciones amiliares en general (ítem global), apego con el
parental) (Cumsille, 1996).
niño, expectativas sobre el niño, apoyo mutuo dentro de la amilia, relación entre
La Escala de Evaluación Familiar de Carolina del Norte, NCFAS, es una medida observacional del segundo tipo, es decir, una escala de clasicación conceptual del uncionamiento amiliar integral y ha sido considerada como una alternativa de primer nivel para el desaío de evaluar amilias incorporando sus problemas como sus recursos (Johnson et al., 2006). En consideración a ello, este trabajo buscó avanzar el conocimiento sobre el uso de la NCFAS en Chile, constituyéndose en la segunda publicación, a la echa, sobre la versión en español del instrumento.
ANTECEDENTES La Escala de Evaluación Familiar de Carolina del Norte , NCFAS, se undamenta en la teoría ecológica del desarrollo humano, evaluando el constructo “ uncionamiento
amiliar ” en diversas dimensiones que han demostrado relevancia teórica, empírica y práctica para el estudio e intervención con amilias en situación de vulnerabilidad biopsicosocial (Reed-Ashcrat et al., 2001; Kirk, Kim y Grith, 2005). El proceso de desarrollo del instrumento, detallado en otras publicaciones (Reed-Ashcrat et al., 2001; Valencia y Gómez, 2010), ha tomado las últimas dos décadas y ha ido pereccionando la escala en sucesivas oportunidades hasta su versión 2.0. En su ormato actual, la NCFAS cuenta con cinco sub-escalas o dimensiones que evalúan el uncionamiento amiliar: Entorno, Competencias Parentales, Interacciones Familiares, Seguridad Familiar y Bienestar del Niño. En total, la NCFAS tiene 36 ítems, 5 ítems globales que corresponden a cada dimensión y 31 ítems especícos (Kirk, Kim y Grith, 2005). La sub-escala Entorno evalúa condiciones del contexto de desarrollo del grupo amiliar, tales como: entorno en general (ítem global), estabilidad de la vivienda, seguridad en la comunidad, habitabilidad de la vivienda, ingreso/empleo, manejo nanciero, comida y nutrición, higiene personal, transporte y entorno de aprendizaje. La sub-escala Competencias Parentales pondera características uncionales de las guras parentales y la adecuación en el ejercicio de sus unciones de supervisión y control, con los siguientes ítems: competencias parentales en general (ítem global), supervisión del niño, prácticas disciplinarias, entrega de oportunidades de desarrollo/crecimiento, salud mental del cuidador, salud ísica del
98
los progenitores/cuidadores. La sub-escala Seguridad Familiar registra presencia o ausencia de condiciones de buen trato o mal trato hacia el niño, incluyendo: seguridad amiliar en general (ítem global), abuso ísico en el niño, abuso sexual en el niño, abuso emocional en el niño, negligencia en el niño, violencia doméstica entre los progenitores/cuidadores. Por último, la sub-escala Bienestar del Niño conlleva una valoración de conductas adaptativas y calidad de las relaciones interpersonales del niño, niña o adolescente, e incluye los s iguientes ítems: bienestar del niño en general (ítem global), salud mental del niño, comportamiento del niño, desempeño escolar, relación con el cuidador, relación con hermano/s, relación con pares, cooperación/ motivación a permanecer en la amilia. La NCFAS tiene una estructura de evaluación de seis puntos, entre problema serio (-3) y clara ortaleza (+2), para cada ítem. Esta estructura de puntuación permite visualizar un rango de problemas (-3, problema serio, -2, problema moderado y -1 problema leve), una línea de base o uncionamiento adecuado (0) y un rango de ortalezas y recursos (+1 leve ortaleza, y +2 clara ortaleza). La orma de puntuación es valorando cada uno de los ítems especícos, para luego valorar el ítem global de la sub-escala; para que el proesional pueda puntuar cada ítem, la escala orece deniciones operacionales que describen el problema serio, la línea de base/ adecuado y la clara ortaleza, dejando la s otras puntuaciones a criterio del evaluador. Las puntuaciones se asignan en dos oportunidades, cuando la amilia ingresa al programa ( Ingreso) y luego cuando naliza su proceso de intervención ( Egreso). En una publicación previa se detalló la orma de utilizar la escala, ilustrando su uso con ejemplos de ítems y deniciones (Valencia y Gómez, 2010). La NCFAS hoy se utiliza en más de 450 agencias y organizaciones en el mundo, es la escala recomendada o de uso obligado en numerosos sistemas de protección a la inancia en Estados Unidos, y se ha usado en la evaluación de programas de visita domiciliaria (De la Rosa et al., 2005; De la Rosa, Perry y Johnson, 2009), intervención y apoyo amiliar (Kirk y Grith, 2007; Richardson, 2008), prevención de maltrato inantil y negligencia parental (Fernandez, 2007; Gómez, Ciuentes y Ross, 2010), intervención en violencia intraamiliar (Coll y Stewart, 2006), programas en contextos de salud mental (Walker et al., 1996; Lee y Lindsey, 2010) y programas de intervención amiliar en contextos educativos
99
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
conceptual determinado (son más generales y permiten una evaluación macro-
cuidador, uso de drogas/alcohol del cuidador. La sub-escala Interacciones Familiares
analítica, siendo menos costosas y más áciles de implementar, pero posiblemente
evalúa aspectos relacionales y vinculares entre los miembros de la amilia, con los
menos precisas rente a ciertos conceptos, por ejemplo, el apego o la sensibilidad
siguientes ítems: interacciones amiliares en general (ítem global), apego con el
parental) (Cumsille, 1996).
niño, expectativas sobre el niño, apoyo mutuo dentro de la amilia, relación entre
La Escala de Evaluación Familiar de Carolina del Norte, NCFAS, es una medida observacional del segundo tipo, es decir, una escala de clasicación conceptual del uncionamiento amiliar integral y ha sido considerada como una alternativa de primer nivel para el desaío de evaluar amilias incorporando sus problemas como sus recursos (Johnson et al., 2006). En consideración a ello, este trabajo buscó avanzar el conocimiento sobre el uso de la NCFAS en Chile, constituyéndose en la segunda publicación, a la echa, sobre la versión en español del instrumento.
ANTECEDENTES La Escala de Evaluación Familiar de Carolina del Norte , NCFAS, se undamenta en la teoría ecológica del desarrollo humano, evaluando el constructo “ uncionamiento
amiliar ” en diversas dimensiones que han demostrado relevancia teórica, empírica y práctica para el estudio e intervención con amilias en situación de vulnerabilidad biopsicosocial (Reed-Ashcrat et al., 2001; Kirk, Kim y Grith, 2005). El proceso de desarrollo del instrumento, detallado en otras publicaciones (Reed-Ashcrat et al., 2001; Valencia y Gómez, 2010), ha tomado las últimas dos décadas y ha ido pereccionando la escala en sucesivas oportunidades hasta su versión 2.0. En su ormato actual, la NCFAS cuenta con cinco sub-escalas o dimensiones que evalúan el uncionamiento amiliar: Entorno, Competencias Parentales, Interacciones Familiares, Seguridad Familiar y Bienestar del Niño. En total, la NCFAS tiene 36 ítems, 5 ítems globales que corresponden a cada dimensión y 31 ítems especícos (Kirk, Kim y Grith, 2005). La sub-escala Entorno evalúa condiciones del contexto de desarrollo del grupo amiliar, tales como: entorno en general (ítem global), estabilidad de la vivienda, seguridad en la comunidad, habitabilidad de la vivienda, ingreso/empleo, manejo nanciero, comida y nutrición, higiene personal, transporte y entorno de aprendizaje. La sub-escala Competencias Parentales pondera características uncionales de las guras parentales y la adecuación en el ejercicio de sus unciones de supervisión y control, con los siguientes ítems: competencias parentales en general (ítem global), supervisión del niño, prácticas disciplinarias, entrega de oportunidades de desarrollo/crecimiento, salud mental del cuidador, salud ísica del
los progenitores/cuidadores. La sub-escala Seguridad Familiar registra presencia o ausencia de condiciones de buen trato o mal trato hacia el niño, incluyendo: seguridad amiliar en general (ítem global), abuso ísico en el niño, abuso sexual en el niño, abuso emocional en el niño, negligencia en el niño, violencia doméstica entre los progenitores/cuidadores. Por último, la sub-escala Bienestar del Niño conlleva una valoración de conductas adaptativas y calidad de las relaciones interpersonales del niño, niña o adolescente, e incluye los s iguientes ítems: bienestar del niño en general (ítem global), salud mental del niño, comportamiento del niño, desempeño escolar, relación con el cuidador, relación con hermano/s, relación con pares, cooperación/ motivación a permanecer en la amilia. La NCFAS tiene una estructura de evaluación de seis puntos, entre problema serio (-3) y clara ortaleza (+2), para cada ítem. Esta estructura de puntuación permite visualizar un rango de problemas (-3, problema serio, -2, problema moderado y -1 problema leve), una línea de base o uncionamiento adecuado (0) y un rango de ortalezas y recursos (+1 leve ortaleza, y +2 clara ortaleza). La orma de puntuación es valorando cada uno de los ítems especícos, para luego valorar el ítem global de la sub-escala; para que el proesional pueda puntuar cada ítem, la escala orece deniciones operacionales que describen el problema serio, la línea de base/ adecuado y la clara ortaleza, dejando la s otras puntuaciones a criterio del evaluador. Las puntuaciones se asignan en dos oportunidades, cuando la amilia ingresa al programa ( Ingreso) y luego cuando naliza su proceso de intervención ( Egreso). En una publicación previa se detalló la orma de utilizar la escala, ilustrando su uso con ejemplos de ítems y deniciones (Valencia y Gómez, 2010). La NCFAS hoy se utiliza en más de 450 agencias y organizaciones en el mundo, es la escala recomendada o de uso obligado en numerosos sistemas de protección a la inancia en Estados Unidos, y se ha usado en la evaluación de programas de visita domiciliaria (De la Rosa et al., 2005; De la Rosa, Perry y Johnson, 2009), intervención y apoyo amiliar (Kirk y Grith, 2007; Richardson, 2008), prevención de maltrato inantil y negligencia parental (Fernandez, 2007; Gómez, Ciuentes y Ross, 2010), intervención en violencia intraamiliar (Coll y Stewart, 2006), programas en contextos de salud mental (Walker et al., 1996; Lee y Lindsey, 2010) y programas de intervención amiliar en contextos educativos
98
99
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
(urner et al., 2009). La NCFAS ue sometida a un estudio de comparación con otros 85 instrumentos por investigadores de la Universidad de Berkeley, ubicándola en el
criterios al egreso (institucionalización del niño versus permanecer en su hogar) y en
primer lugar en términos de su utilidad práctica en programas sociales, así como para
cambios en la intervención, siendo considerada adecuada para evaluar programas de
la investigación con amilias vulnerables (Johnson et al., 2006). En junio de 2009,
intervención amiliar (Kirk et al., 2005; Johnson et al., 2006; Kirk y Grith, 2007).
el Caliornia Evidence-Based Clearinghouse or Child Welare (CEBC) le asignó en su reporte de instrumentos de evaluación bas ados en evidencia el ranking “ A, Reliability
Sin embargo, un estudio que evaluó la NCFAS en contexto de centros de atención en salud mental (Lee y Lindsey, 2010), no logró replicar la validez estructural de la
and Validity Demonstrated ” (ver htt p://www.cebc4cw.org/assmt-ncas#explain).
escala, encontrando tres sub-escalas en vez de las cinco originales, sugiriendo que
ras un acuerdo entre National Family Preservation Network (organización que apoyó el desarrollo de la escala y su diusión) y Protectora de la Inancia, el autor realizó la traducción al español, siendo revisada y certicada por la Universidad Finis errae. En Chile, actualmente la escala NCFAS (NCFAS, NCFAS-R o NCFAS-G) se usa en la Protectora de la Inancia, en la Fundación San José para la Adopción, en el Centro de Estudios y Atención al Niño y la Mujer - CEANIM, en el programa piloto
seguimiento a 12 meses (Kirk et al., 2005). La NCFAS se ha mostrado sensible a los
debiese revisarse la estructura del instrumento para incorporar ítems y deniciones/ criterio que sean especícas al contexto de operadores en salud mental, mejorando su validez de contenido para los desaíos especícos de la intervención en salud mental inanto-juvenil; una reexión adicional de los autores sugiere que los proesionales de este campo podrían requerir mayor capacitación en un enoque amiliar de trabajo, por sobre el énasis individual actualmente vigente, lo que podría haber tenido un impacto en los resultados obtenidos. El estudio realizado en Chile por
“Abriendo Caminos” de la Universidad Diego Portales y en un proyecto Fondecyt de la Escuela de Psicología de l a Ponticia Universidad Católica de Chile.
Valencia y Gómez (2010) apoyó parcialmente la estructura de la escala, sugir iendo a
Estudios sobre la NCFAS
conservando una estructura de cinco actores, que resultan muy similares a los de la
La conabilidad y validez de la NCFAS ha sido estudiada por los creadores del instrumento en tres estudios sucesivos realizados con programas intensivos de
partir del análisis actorial ciertas modicaciones en la agrupación de los ítems, pero escala original.
intervención amiliar psicosocial (Reed, 1998, y Reed-Ashcrat et al., 2001; Kirk et
Cabe mencionar que un estudio exploratorio en curso, sobre la uerza de la concordancia inter-evaluadores de la NCFAS medida con el índice de Kappa, ha
al., 2005; y Kirk y Grith, 2007) y por tres estudios independientes, uno conducido en Estados Unidos en un contexto de salud mental juvenil (Lee y Lindsey, 2010), otro
mostrado resultados preliminares interesantes (Pino, manuscrito no publicado). As í,
realizado en Chile en programas de intervención amiliar psicosocial con la versión
moderado hasta muy alto) en las puntuaciones especícas asignadas a cada ítem
en español de la escala (Valencia y Gómez, 2010) y un tercer estudio en curso, aun
para el 33,4% (dupla 1, n=25) y el 41,6% de los ítems (dupla 2, n=13), revelando
no publicado, que busca explorar preliminarmente la conabilidad inter-evaluadores
heterogeneidad en varias de las puntuaciones especícas; al agrupar las puntuaciones
(Pino, manuscrito no publicado).
en dos rangos por ítem (rango problema versus rango adecuado/ortaleza), los niveles de conabilidad aumentaron hasta niveles adecuados de concordancia para
Estos estudios han orecido pruebas robustas respecto a la consistencia
un inorme de avance reporta niveles adecuados de concordancia (Kappa con nivel
interna de la escala, obteniendo en el estudio de Reed-Ashcrat et al. (2001) valores de ala de Cronbach entre .76 y .93, en el estudio de Kirk et al. (2005), coecientes
el 61,1% (dupla 2) y 77,8% de los ítems de la escala (dupla 1). Una de las posibles
entre .72 y .90, en el estudio de Kirk y Grith (2007) valores entre .77 y .94,
debiese ser aplicada al menos entre dos o más evaluadores, quienes “negocian” las
en el estudio de Lee y Lindsey (2010), valores entre .66 y .92, y en el estudio de
puntuaciones hasta llegar a un acuerdo o consenso intersubjetivo sobre la puntuación
Valencia y Gómez (2010), coecientes entre .78 y .86. Asimismo, s e ha establecido
óptima para cada ítem de la escala. Sin embargo, al ser un estudio exploratorio no terminado, estos datos deben ser considerados con extrema precaución.
una adecuada validez convergente de las dimensiones de la NCFAS en comparación con instrumentos estandarizados de evaluación amiliar, con p< .01 y valores r de Pearson entre .26 y .71 (Reed-Ashcrat et al., 2001).
consecuencias de estos hallazgos preliminares es reorzar el criterio de que la NCFAS
El programa Viviendo en Familia La Protectora de la Inancia –organización chilena sin nes de lucro con
El instrumento ha demostrado una adecuada validez concurrente con
100
101
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
(urner et al., 2009). La NCFAS ue sometida a un estudio de comparación con otros 85 instrumentos por investigadores de la Universidad de Berkeley, ubicándola en el
criterios al egreso (institucionalización del niño versus permanecer en su hogar) y en
primer lugar en términos de su utilidad práctica en programas sociales, así como para
cambios en la intervención, siendo considerada adecuada para evaluar programas de
la investigación con amilias vulnerables (Johnson et al., 2006). En junio de 2009,
intervención amiliar (Kirk et al., 2005; Johnson et al., 2006; Kirk y Grith, 2007).
el Caliornia Evidence-Based Clearinghouse or Child Welare (CEBC) le asignó en su reporte de instrumentos de evaluación bas ados en evidencia el ranking “ A, Reliability
Sin embargo, un estudio que evaluó la NCFAS en contexto de centros de atención en salud mental (Lee y Lindsey, 2010), no logró replicar la validez estructural de la
and Validity Demonstrated ” (ver htt p://www.cebc4cw.org/assmt-ncas#explain).
escala, encontrando tres sub-escalas en vez de las cinco originales, sugiriendo que
ras un acuerdo entre National Family Preservation Network (organización que apoyó el desarrollo de la escala y su diusión) y Protectora de la Inancia, el autor realizó la traducción al español, siendo revisada y certicada por la Universidad Finis errae. En Chile, actualmente la escala NCFAS (NCFAS, NCFAS-R o NCFAS-G) se usa en la Protectora de la Inancia, en la Fundación San José para la Adopción, en el Centro de Estudios y Atención al Niño y la Mujer - CEANIM, en el programa piloto
seguimiento a 12 meses (Kirk et al., 2005). La NCFAS se ha mostrado sensible a los
debiese revisarse la estructura del instrumento para incorporar ítems y deniciones/ criterio que sean especícas al contexto de operadores en salud mental, mejorando su validez de contenido para los desaíos especícos de la intervención en salud mental inanto-juvenil; una reexión adicional de los autores sugiere que los proesionales de este campo podrían requerir mayor capacitación en un enoque amiliar de trabajo, por sobre el énasis individual actualmente vigente, lo que podría haber tenido un impacto en los resultados obtenidos. El estudio realizado en Chile por
“Abriendo Caminos” de la Universidad Diego Portales y en un proyecto Fondecyt de la Escuela de Psicología de l a Ponticia Universidad Católica de Chile.
Valencia y Gómez (2010) apoyó parcialmente la estructura de la escala, sugir iendo a
Estudios sobre la NCFAS
conservando una estructura de cinco actores, que resultan muy similares a los de la
La conabilidad y validez de la NCFAS ha sido estudiada por los creadores del instrumento en tres estudios sucesivos realizados con programas intensivos de
partir del análisis actorial ciertas modicaciones en la agrupación de los ítems, pero escala original.
intervención amiliar psicosocial (Reed, 1998, y Reed-Ashcrat et al., 2001; Kirk et
Cabe mencionar que un estudio exploratorio en curso, sobre la uerza de la concordancia inter-evaluadores de la NCFAS medida con el índice de Kappa, ha
al., 2005; y Kirk y Grith, 2007) y por tres estudios independientes, uno conducido en Estados Unidos en un contexto de salud mental juvenil (Lee y Lindsey, 2010), otro
mostrado resultados preliminares interesantes (Pino, manuscrito no publicado). As í,
realizado en Chile en programas de intervención amiliar psicosocial con la versión
moderado hasta muy alto) en las puntuaciones especícas asignadas a cada ítem
en español de la escala (Valencia y Gómez, 2010) y un tercer estudio en curso, aun
para el 33,4% (dupla 1, n=25) y el 41,6% de los ítems (dupla 2, n=13), revelando
no publicado, que busca explorar preliminarmente la conabilidad inter-evaluadores
heterogeneidad en varias de las puntuaciones especícas; al agrupar las puntuaciones
(Pino, manuscrito no publicado).
en dos rangos por ítem (rango problema versus rango adecuado/ortaleza), los niveles de conabilidad aumentaron hasta niveles adecuados de concordancia para
Estos estudios han orecido pruebas robustas respecto a la consistencia
un inorme de avance reporta niveles adecuados de concordancia (Kappa con nivel
interna de la escala, obteniendo en el estudio de Reed-Ashcrat et al. (2001) valores de ala de Cronbach entre .76 y .93, en el estudio de Kirk et al. (2005), coecientes
el 61,1% (dupla 2) y 77,8% de los ítems de la escala (dupla 1). Una de las posibles
entre .72 y .90, en el estudio de Kirk y Grith (2007) valores entre .77 y .94,
debiese ser aplicada al menos entre dos o más evaluadores, quienes “negocian” las
en el estudio de Lee y Lindsey (2010), valores entre .66 y .92, y en el estudio de
puntuaciones hasta llegar a un acuerdo o consenso intersubjetivo sobre la puntuación
Valencia y Gómez (2010), coecientes entre .78 y .86. Asimismo, s e ha establecido
óptima para cada ítem de la escala. Sin embargo, al ser un estudio exploratorio no terminado, estos datos deben ser considerados con extrema precaución.
una adecuada validez convergente de las dimensiones de la NCFAS en comparación con instrumentos estandarizados de evaluación amiliar, con p< .01 y valores r de Pearson entre .26 y .71 (Reed-Ashcrat et al., 2001).
consecuencias de estos hallazgos preliminares es reorzar el criterio de que la NCFAS
El programa Viviendo en Familia La Protectora de la Inancia –organización chilena sin nes de lucro con
El instrumento ha demostrado una adecuada validez concurrente con
100
101
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
116 años de trayectoria- desarrolló en 2007 un modelo de intervención amiliar
2008 y agosto de 2010. La edad de los niños promedió 9,41 años ( DS=4,48), en un
en temáticas de maltrato inantil, negligencia parental y violencia intraamiliar,
rango entre 0 y 18, con un 11,7% entre 0 y 3 años; 15,5% entre 4 y 6 años; 44,5%
llamado “Viviendo en Familia” (Gómez, Ciuentes y Ross, 2010). Este programa
entre 7 y 12 años; y 28,2% entre 13 y 18 años de edad. El sexo se distribuyó en un
aborda la intervención desde un enoque eco-sistémico y constructivista, y se
44% de sexo emenino y 56% de sexo masculino. Su escolaridad ue en un 21,9%
undamenta en la teoría de la resiliencia amiliar, el apego y la parentalidad bien tratante (Walsh, 2004; Kalil, 2003; Barudy y Dantagnan, 2005). Su objetivo es la
educación preescolar, 62,8% educación básica y en 11% educación media. Un 7,1% de los niños ingresados registró algún trastorno de salud mental DSM-IV en un
prevención secundaria de diversas ormas de maltrato a los niños, niñas y jóvenes,
centro de salud2.
entregando servicios psico-educativos, clínicos y comunitarios durante un período extenso de tiempo (entre 12 a 18 meses), manteniendo una proporción moderada de 11 amilias por operador. El programa atiende a 70-80 niños entre 0 y 18 años de edad y sus amilias, oreciendo siete servicios principales: (1) evaluación amiliar integral y retroalimentación de las ortalezas, debilidades y oportunidades presentes en las amilias y sus miembros, usando la NCFAS versión en español;
El motivo de ingreso de los niños, niñas y adolescentes atendidos en el programa se distribuyó en un 29% de negligencia, 16% de maltrato ísico y/o emocional, 18% de maltrato/negligencia, 17% de testigo de VIF y 19% de otros motivos. Respecto a los cuidadores principales, su promedio de edad ue 38,4
(6) intervención y coordinación con redes ormales e inormales; y (7) capacitación a
(DS=9,72), con un mínimo de 17 y un máximo de 76 años y se observó una distribución por sexo de 93,3% emenino y 6,7% masculino. Su escolaridad ue 36,6% educación básica, 48,7% educación media, 5,6% educación superior y 2,8%
actores signicativos de la comunidad. El programa actualmente se implementa en
analabeto, con 6,3% sin inormación. La situación laboral registrada al ingreso ue
11 centros, en la región metropolitana y en la octava región, con una cobertura de 910 plazas, habiendo atendido entre diciembre de 2007 y junio de 2010 un total de
36,8% labores domésticas, 27% de trabajo dependiente, 9,3% de trabajo esporádico,
1.767 niños y sus amilias.
Las ocupaciones son variadas, siendo mayoritariamente dueñas de casa, asesoras
(2) talleres psicoeducativos; (3) consejerías individuales y amiliares; (4) visitas domiciliarias; (5) psicoterapias breves, incluyendo la erapia de Interacción Guiada;
9,2% cesante, 8,7% de trabajo independiente, 7,2% sin actividad y 0,2% estudiante. del hogar, auxiliares de aseo y comerciantes, seguido por garzonas, vendedoras
MÉTODO El presente estudio tuvo por objetivo evaluar las propiedades psicométricas de la escala NCFAS –versión en español- en población en situación de vulnerabilidad
de tiendas, manipuladoras de alimentos, peluqueras, secretarias, cuidadoras de enermos, entre otros. Respecto a su sa lud mental, un 10,3% de las guras parentales registraron un diagnóstico DSM-IV en su centro de salud.
psicosocial, atendida y egresada de los programas de intervención breve “Viviendo
Por último, se registró una estructura amiliar biparental de 54,4%, una
en Familia” de la Protectora de la Inancia entre enero de 2008 y agosto de 2010.
estructura monoparental de 20,6%, monoparental extensa de 17,1%, extensa de
Especícamente, se buscó evaluar: (a) propiedades psicométricas básicas al ingreso
5,9% y otras de 2,1%. El número de habitantes por hogar promedió 5,42 ( DS=2,21)
y al egreso de los casos; (b) la consistencia interna al ingreso y al egreso; (c) la correlación entre los ítems especícos y su ítem global correspondiente; (d) su
con entre 2 y 16 integrantes. La situación socioeconómica de las amilias ue un 4,5%
sensibilidad para detectar cambios pre-post en la intervención amiliar especializada
de Indigencia, un 38,9% de NSE Bajo, bajo la línea de la pobreza; un 32,6% de NSE Bajo, sobre la línea de la pobreza; y un 20,3% de NSE Medio.
realizada en programas como el “Viviendo en Familia”; y (e) su validez concurrente
Características de los evaluadores
con respecto a la situación al e greso.
Participantes El estudio se basó en datos recolectados a partir de 782 niños, niñas y adolescentes, y sus amilias, ingresadas y egresadas del programa entre enero de
102
En este estudio, se contabilizó un total de 49 evaluadores (entre cuatro y cinco evaluadores por programa) que aplicaron la escala NCFAS como parte 2
El primer estudio llevado a cabo por Valencia y Gómez (2010) consideró solamente casos ingresados a 8 PIB “Viviendo en Familia”. El presente estudio en cambio, incluyó casos ingresados y egresados de 11 PIB “Viviendo en Familia” de la Protectora de la Infancia.
103
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
116 años de trayectoria- desarrolló en 2007 un modelo de intervención amiliar
2008 y agosto de 2010. La edad de los niños promedió 9,41 años ( DS=4,48), en un
en temáticas de maltrato inantil, negligencia parental y violencia intraamiliar,
rango entre 0 y 18, con un 11,7% entre 0 y 3 años; 15,5% entre 4 y 6 años; 44,5%
llamado “Viviendo en Familia” (Gómez, Ciuentes y Ross, 2010). Este programa
entre 7 y 12 años; y 28,2% entre 13 y 18 años de edad. El sexo se distribuyó en un
aborda la intervención desde un enoque eco-sistémico y constructivista, y se
44% de sexo emenino y 56% de sexo masculino. Su escolaridad ue en un 21,9%
undamenta en la teoría de la resiliencia amiliar, el apego y la parentalidad bien tratante (Walsh, 2004; Kalil, 2003; Barudy y Dantagnan, 2005). Su objetivo es la
educación preescolar, 62,8% educación básica y en 11% educación media. Un 7,1% de los niños ingresados registró algún trastorno de salud mental DSM-IV en un
prevención secundaria de diversas ormas de maltrato a los niños, niñas y jóvenes,
centro de salud2.
entregando servicios psico-educativos, clínicos y comunitarios durante un período extenso de tiempo (entre 12 a 18 meses), manteniendo una proporción moderada de 11 amilias por operador. El programa atiende a 70-80 niños entre 0 y 18 años de edad y sus amilias, oreciendo siete servicios principales: (1) evaluación amiliar integral y retroalimentación de las ortalezas, debilidades y oportunidades presentes en las amilias y sus miembros, usando la NCFAS versión en español;
El motivo de ingreso de los niños, niñas y adolescentes atendidos en el programa se distribuyó en un 29% de negligencia, 16% de maltrato ísico y/o emocional, 18% de maltrato/negligencia, 17% de testigo de VIF y 19% de otros motivos. Respecto a los cuidadores principales, su promedio de edad ue 38,4
(6) intervención y coordinación con redes ormales e inormales; y (7) capacitación a
(DS=9,72), con un mínimo de 17 y un máximo de 76 años y se observó una distribución por sexo de 93,3% emenino y 6,7% masculino. Su escolaridad ue 36,6% educación básica, 48,7% educación media, 5,6% educación superior y 2,8%
actores signicativos de la comunidad. El programa actualmente se implementa en
analabeto, con 6,3% sin inormación. La situación laboral registrada al ingreso ue
11 centros, en la región metropolitana y en la octava región, con una cobertura de 910 plazas, habiendo atendido entre diciembre de 2007 y junio de 2010 un total de
36,8% labores domésticas, 27% de trabajo dependiente, 9,3% de trabajo esporádico,
1.767 niños y sus amilias.
Las ocupaciones son variadas, siendo mayoritariamente dueñas de casa, asesoras
(2) talleres psicoeducativos; (3) consejerías individuales y amiliares; (4) visitas domiciliarias; (5) psicoterapias breves, incluyendo la erapia de Interacción Guiada;
9,2% cesante, 8,7% de trabajo independiente, 7,2% sin actividad y 0,2% estudiante. del hogar, auxiliares de aseo y comerciantes, seguido por garzonas, vendedoras
MÉTODO El presente estudio tuvo por objetivo evaluar las propiedades psicométricas de la escala NCFAS –versión en español- en población en situación de vulnerabilidad
de tiendas, manipuladoras de alimentos, peluqueras, secretarias, cuidadoras de enermos, entre otros. Respecto a su sa lud mental, un 10,3% de las guras parentales registraron un diagnóstico DSM-IV en su centro de salud.
psicosocial, atendida y egresada de los programas de intervención breve “Viviendo
Por último, se registró una estructura amiliar biparental de 54,4%, una
en Familia” de la Protectora de la Inancia entre enero de 2008 y agosto de 2010.
estructura monoparental de 20,6%, monoparental extensa de 17,1%, extensa de
Especícamente, se buscó evaluar: (a) propiedades psicométricas básicas al ingreso
5,9% y otras de 2,1%. El número de habitantes por hogar promedió 5,42 ( DS=2,21)
y al egreso de los casos; (b) la consistencia interna al ingreso y al egreso; (c) la correlación entre los ítems especícos y su ítem global correspondiente; (d) su
con entre 2 y 16 integrantes. La situación socioeconómica de las amilias ue un 4,5%
sensibilidad para detectar cambios pre-post en la intervención amiliar especializada
de Indigencia, un 38,9% de NSE Bajo, bajo la línea de la pobreza; un 32,6% de NSE Bajo, sobre la línea de la pobreza; y un 20,3% de NSE Medio.
realizada en programas como el “Viviendo en Familia”; y (e) su validez concurrente
Características de los evaluadores
con respecto a la situación al e greso.
Participantes
En este estudio, se contabilizó un total de 49 evaluadores (entre cuatro y cinco evaluadores por programa) que aplicaron la escala NCFAS como parte
El estudio se basó en datos recolectados a partir de 782 niños, niñas y adolescentes, y sus amilias, ingresadas y egresadas del programa entre enero de
2
El primer estudio llevado a cabo por Valencia y Gómez (2010) consideró solamente casos ingresados a 8 PIB “Viviendo en Familia”. El presente estudio en cambio, incluyó casos ingresados y egresados de 11 PIB “Viviendo en Familia” de la Protectora de la Infancia.
102
103
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
de la metodología normal de intervención con las amilias. Los evaluadores se distribuyeron en un 88% de mujeres y 12% de hombres. Respecto a su proesión, se
Análisis de Datos
observó un 30% de psicólogos, 43% de trabajadores sociales y 27% de educadores
para chequear la orma de distribución de los datos, presentando esta inormación
sociales/amiliares; un 41% de los psicólogos o trabajadores sociales estaba cursando
(media, desviación estándar, mínimo y máximo, asimetría y curtosis) en primer
o contaba con un postítulo/magíster en el período que comprende el estudio. Fueron
lugar. En este sentido, se observó si las puntuaciones cubrían el rango completo de
capacitados usando el material y proceso de entrenamiento estándar propuesto por
posibilidades, distribuyéndose normalmente.
los creadores del instrumento. En promedio, los evaluadores aplicaron18 protocolos (DS=16,6), con un mínimo de 1 y un máximo de 82; el 75% de los evaluadores aplicaron 7 o más protocolos NCFAS.
En una primera etapa, se realizaron análisis descriptivos de la inormación,
Posteriormente, se estudió la consistencia interna de las subescalas mediante el coeciente ala de Cronbach, tanto al ingreso como al egreso, tomando como criterios de reerencia los valores de Streiner y Norman (2003) que señalan
Procedimiento
que por convención, coecientes sobre 0,7 son aceptables, sobre 0,8 son altos y
Este estudio avanza el conocimiento respecto a la versión en español
sobre 0,9 son muy altos, en conjunto con la precaución remarcada por Carretero-
de la escala NCFAS, construyéndose sobre la base de un primer estudio de
Dios y Pérez (2007), quienes señalan como inadecuados valores sobre 0,95, ya que
validez y conabilidad publicado recientemente (Valencia y Gómez, 2010). En dicha publicación, se describió en detalle el proceso de capacitación, ingreso de
representarían, más que una alta conabilidad, un problema de sub-representación del constructo evaluado y de validez deciente. Posteriormente, y considerando la
casos, recopilación de la inormación al ingreso y procedimientos de control de la
distribución normal encontrada en los datos , se realizaron correlaciones de Pearson
rigurosidad en el proceso evaluativo, que realizaron los equipos proesionales de
entre cada ítem global y sus ítems especícos, para determinar si las puntuaciones
los programas “Viviendo en Familia” de la Protectora de la Inancia. Los mismos
globales eectivamente se asociaban a las puntuaciones especícas dentro de cada
procesos se aplicaron al egreso de los casos, completando de esta orma los dos
sub-escala.
puntos de medición de la NCFAS. Es importante señalar que para la puntuación al egreso de los casos, la uente de inormación varía respecto al ingreso (donde se usan muchas más uentes externas, como inormes de las redes derivantes, entrevistas con terceros signicativos, etc.). Así, para el segundo punto de evaluación, los equipos se undamentan mucho más en su proundo conocimiento del caso, adquirido tras meses de vinculación y trabajo con cada amilia. Para este segundo estudio de validez y conabilidad, se utilizó par te de los datos de un estudio más amplio de evaluación de resultados del programa “Viviendo en Familia”, especícamente la base de datos construida con la inormación enviada por cada equipo en chas electrónicas de registro de diversos datos, al ingreso y al egreso, junto al protocolo de la escala NCFAS.
Para estudiar la sensibilidad de la NCFAS a los cambios en la intervención pre-post, se transormaron las puntuaciones -3, -2, -1, 0, 1 y 2 en puntuaciones 1, 2, 3, 4, 5 y 6 respectivamente, evitando los problemas asociados a puntuaciones negativas. Como las puntuaciones se distribuyeron normalmente, se procedió a realizar pruebas de Student comparando las medias al ingreso y al egreso de los casos. ambién se calculó el cam bio en las proporciones de cada puntuación entre el ingreso y el egreso, para las dimensiones globales del instrumento. Se estudió la validez concurrente del instrumento respecto a diversas condiciones al egreso de los casos. Así, para la validez concurrente se procedió a dicotomizar las puntuaciones de la NCFAS entre rango problema (1, 2 y 3) versus rango adecuado/ortaleza (4, 5 y 6). Esta variable dicotómica se cruzó en tablas de
Es importante señalar que se tomaron los resguardos correspondientes,
contingencia con las siguientes condiciones al egreso: el niño ue institucionalizado
mediante un tratamiento ético de la inormación, cuidando el anonimato de las
(en una residencia de protección o amilias de acogida), egreso exitoso, egreso no
amilias, tanto en los registros como en los análisis y comunicación de los resultados
exitoso y buen pronóstico. Para cada uno de estos cruces, se calculó la prueba de
del estudio. Asimismo, se cuenta con un protocolo de consentimiento inormado
chi cuadrado para evaluar su asociación estadística. Es importante claricar que
para el uso de los registros del programa en estudios y publicaciones.
estos grupos no podían juntarse entre sí, ya que no todos los egresos no exitosos se igualan a niños institucionalizados, por cuando el egreso no exitoso tiene que
104
105
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
de la metodología normal de intervención con las amilias. Los evaluadores se distribuyeron en un 88% de mujeres y 12% de hombres. Respecto a su proesión, se
Análisis de Datos
observó un 30% de psicólogos, 43% de trabajadores sociales y 27% de educadores
para chequear la orma de distribución de los datos, presentando esta inormación
sociales/amiliares; un 41% de los psicólogos o trabajadores sociales estaba cursando
(media, desviación estándar, mínimo y máximo, asimetría y curtosis) en primer
o contaba con un postítulo/magíster en el período que comprende el estudio. Fueron
lugar. En este sentido, se observó si las puntuaciones cubrían el rango completo de
capacitados usando el material y proceso de entrenamiento estándar propuesto por
posibilidades, distribuyéndose normalmente.
los creadores del instrumento. En promedio, los evaluadores aplicaron18 protocolos (DS=16,6), con un mínimo de 1 y un máximo de 82; el 75% de los evaluadores aplicaron 7 o más protocolos NCFAS.
En una primera etapa, se realizaron análisis descriptivos de la inormación,
Posteriormente, se estudió la consistencia interna de las subescalas mediante el coeciente ala de Cronbach, tanto al ingreso como al egreso, tomando como criterios de reerencia los valores de Streiner y Norman (2003) que señalan
Procedimiento
que por convención, coecientes sobre 0,7 son aceptables, sobre 0,8 son altos y
Este estudio avanza el conocimiento respecto a la versión en español
sobre 0,9 son muy altos, en conjunto con la precaución remarcada por Carretero-
de la escala NCFAS, construyéndose sobre la base de un primer estudio de
Dios y Pérez (2007), quienes señalan como inadecuados valores sobre 0,95, ya que
validez y conabilidad publicado recientemente (Valencia y Gómez, 2010). En dicha publicación, se describió en detalle el proceso de capacitación, ingreso de
representarían, más que una alta conabilidad, un problema de sub-representación del constructo evaluado y de validez deciente. Posteriormente, y considerando la
casos, recopilación de la inormación al ingreso y procedimientos de control de la
distribución normal encontrada en los datos , se realizaron correlaciones de Pearson
rigurosidad en el proceso evaluativo, que realizaron los equipos proesionales de
entre cada ítem global y sus ítems especícos, para determinar si las puntuaciones
los programas “Viviendo en Familia” de la Protectora de la Inancia. Los mismos
globales eectivamente se asociaban a las puntuaciones especícas dentro de cada
procesos se aplicaron al egreso de los casos, completando de esta orma los dos
sub-escala.
puntos de medición de la NCFAS. Es importante señalar que para la puntuación al egreso de los casos, la uente de inormación varía respecto al ingreso (donde se usan muchas más uentes externas, como inormes de las redes derivantes, entrevistas con terceros signicativos, etc.). Así, para el segundo punto de evaluación, los equipos se undamentan mucho más en su proundo conocimiento del caso, adquirido tras meses de vinculación y trabajo con cada amilia.
Para estudiar la sensibilidad de la NCFAS a los cambios en la intervención pre-post, se transormaron las puntuaciones -3, -2, -1, 0, 1 y 2 en puntuaciones 1, 2, 3, 4, 5 y 6 respectivamente, evitando los problemas asociados a puntuaciones negativas. Como las puntuaciones se distribuyeron normalmente, se procedió a realizar pruebas de Student comparando las medias al ingreso y al egreso de los casos. ambién se calculó el cam bio en las proporciones de cada puntuación entre el
Para este segundo estudio de validez y conabilidad, se utilizó par te de los datos de un estudio más amplio de evaluación de resultados del programa “Viviendo en Familia”, especícamente la base de datos construida con la inormación enviada por cada equipo en chas electrónicas de registro de diversos datos, al ingreso y al egreso, junto al protocolo de la escala NCFAS.
ingreso y el egreso, para las dimensiones globales del instrumento. Se estudió la validez concurrente del instrumento respecto a diversas condiciones al egreso de los casos. Así, para la validez concurrente se procedió a dicotomizar las puntuaciones de la NCFAS entre rango problema (1, 2 y 3) versus rango adecuado/ortaleza (4, 5 y 6). Esta variable dicotómica se cruzó en tablas de
Es importante señalar que se tomaron los resguardos correspondientes,
contingencia con las siguientes condiciones al egreso: el niño ue institucionalizado
mediante un tratamiento ético de la inormación, cuidando el anonimato de las
(en una residencia de protección o amilias de acogida), egreso exitoso, egreso no
amilias, tanto en los registros como en los análisis y comunicación de los resultados
exitoso y buen pronóstico. Para cada uno de estos cruces, se calculó la prueba de
del estudio. Asimismo, se cuenta con un protocolo de consentimiento inormado
chi cuadrado para evaluar su asociación estadística. Es importante claricar que
para el uso de los registros del programa en estudios y publicaciones.
estos grupos no podían juntarse entre sí, ya que no todos los egresos no exitosos se igualan a niños institucionalizados, por cuando el egreso no exitoso tiene que
104
105
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
ver con el grado de cumplimiento de los objetivos: así, un niño podía no cumplir los
La distribución de las puntuaciones resulta adecuada, tanto en s us indicadores de asimetría
objetivos (egreso no exitoso) pero aun así seguir viviendo en su casa.
con valores entre -0,682 y 0,206, como de curtosis con valores entre -0,196 y 0,941.
Consistencia Interna de la NCFAS
RESULTADOS
Como se muestra en la abla 2, la consistencia interna, medida con el ala de Cronbach, resultó de 0,873 al ingreso y 0,908 al egreso para la dimensión Entorno;
Propiedades de la escala NCFAS Como se muestra en la abla 1, las dimensiones globales de la NCFAS promediaron entre 2,84 y 3,12 al ingreso, con desviaciones estándar entre 0,819 y 0,967, y para el egreso entre 3,68 y 3,87, con desviaciones estándar entre 0,824 y 1,022. El rango de puntuaciones varió entre 1 y 6 en todas las dimensiones al ingreso y egreso (salvo para Bienestar del Niño, que registró un máximo de 5 al ingreso), dando cuenta que se ocuparon el rango total de puntuaciones posibles del instrumento. Se observaron visualmente los histogramas para cada dimensión al ingreso y al agreso, los cuales mostraron mayoritariamente ormas de distribución normales.
de 0,802 al ingreso y 0,905 al egreso para la dimensión Competencias Parentales ; de 0,772 al ingreso y 0,767 al egreso para Interacciones Familiares; de 0,759 al ingreso y 0,681 al egreso para Seguridad Familiar ; y de 0,733 al ingreso y 0,836 al egreso para la dimensión Bienestar del Niño. En la abla 2 también se muestra el ala de Cronbach basado en ítems estandarizados.
Tabla 2: Consistencia Interna de las Dimensiones de la NCFAS versión español, al ingreso y al egreso (N=782)
Tabla 1: Características de la distribución de puntuaciones al ingreso y egreso en la NCFAS
Ala de Cronbach
N
Ítem Global
Media
Desv. Asimetría Estándar
Curtosis
Mín.
Máx.
Vá li do
Mi ss in g
Entorno Ingreso
778
4
3,11
,967
,206
-,064
1
6
Entorno Egreso
669
113
3,68
,933
-,494
,257
1
6
Competencias Parentales Ingreso
770
12
2,84
,893
,093
,169
1
6
Dimensión
N° de basado en ítems basado en ítems Egreso Ítems estandarizados estandarizados
Egreso
Entorno
10
0,873
0,908
0,876
0,911
6
Competencias Parentales
7
0,802
0,905
0,815
0,904
1
6
Interacciones Familiares
5
0,772
0,767
0,806
0,846
,131
1
6
Seguridad Familiar
6
0,759
0,681
0,790
0,776
,119
,437
1
6
Bienestar del Niño
8
0,733
0,836
0,772
0,874
,895
-,660
,941
1
6
3,12
,819
-,031
-,116
1
5
3,84
,824
-,682
,511
1
6
Competencias Parentales Egreso
660
122
3,70
1,022
-,562
,528
1
Interacción Familiar Ingreso
771
11
2,96
,922
,169
-,196
Interacción Familiar Cierre
662
120
3,70
,903
-,315
Seguridad Familiar Ingreso
766
16
3,03
,933
Seguridad Familiar Egreso
706
76
3,87
Bienestar Niño Ingreso
767
15
Bienestar Niño Cierre
624
158
106
Ala de Cronbach basado en ítems estandarizados
107
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
ver con el grado de cumplimiento de los objetivos: así, un niño podía no cumplir los
La distribución de las puntuaciones resulta adecuada, tanto en s us indicadores de asimetría
objetivos (egreso no exitoso) pero aun así seguir viviendo en su casa.
con valores entre -0,682 y 0,206, como de curtosis con valores entre -0,196 y 0,941.
Consistencia Interna de la NCFAS
RESULTADOS
Como se muestra en la abla 2, la consistencia interna, medida con el ala de
Propiedades de la escala NCFAS
Cronbach, resultó de 0,873 al ingreso y 0,908 al egreso para la dimensión Entorno;
Como se muestra en la abla 1, las dimensiones globales de la NCFAS promediaron entre 2,84 y 3,12 al ingreso, con desviaciones estándar entre 0,819 y 0,967, y para el egreso entre 3,68 y 3,87, con desviaciones estándar entre 0,824 y 1,022. El rango de puntuaciones varió entre 1 y 6 en todas las dimensiones al ingreso y egreso (salvo para Bienestar del Niño, que registró un máximo de 5 al ingreso), dando cuenta que se ocuparon el rango total de puntuaciones posibles del instrumento. Se observaron visualmente los histogramas para cada dimensión al ingreso y al agreso, los cuales mostraron mayoritariamente ormas de distribución normales.
de 0,802 al ingreso y 0,905 al egreso para la dimensión Competencias Parentales ; de 0,772 al ingreso y 0,767 al egreso para Interacciones Familiares; de 0,759 al ingreso y 0,681 al egreso para Seguridad Familiar ; y de 0,733 al ingreso y 0,836 al egreso para la dimensión Bienestar del Niño. En la abla 2 también se muestra el ala de Cronbach basado en ítems estandarizados.
Tabla 2: Consistencia Interna de las Dimensiones de la NCFAS versión español, al ingreso y al egreso (N=782)
Tabla 1: Características de la distribución de puntuaciones al ingreso y egreso en la NCFAS
Ala de Cronbach
N
Ítem Global
Media
Desv. Asimetría Estándar
Curtosis
Mín.
Ala de Cronbach basado en ítems estandarizados
Máx.
Vá li do
Mi ss in g
Entorno Ingreso
778
4
3,11
,967
,206
-,064
1
6
Entorno Egreso
669
113
3,68
,933
-,494
,257
1
6
Competencias Parentales Ingreso
770
12
2,84
,893
,093
,169
1
6
Dimensión
N° de basado en ítems basado en ítems Egreso Ítems estandarizados estandarizados
Egreso
Entorno
10
0,873
0,908
0,876
0,911
6
Competencias Parentales
7
0,802
0,905
0,815
0,904
1
6
Interacciones Familiares
5
0,772
0,767
0,806
0,846
,131
1
6
Seguridad Familiar
6
0,759
0,681
0,790
0,776
,119
,437
1
6
Bienestar del Niño
8
0,733
0,836
0,772
0,874
,895
-,660
,941
1
6
3,12
,819
-,031
-,116
1
5
3,84
,824
-,682
,511
1
6
Competencias Parentales Egreso
660
122
3,70
1,022
-,562
,528
1
Interacción Familiar Ingreso
771
11
2,96
,922
,169
-,196
Interacción Familiar Cierre
662
120
3,70
,903
-,315
Seguridad Familiar Ingreso
766
16
3,03
,933
Seguridad Familiar Egreso
706
76
3,87
Bienestar Niño Ingreso
767
15
Bienestar Niño Cierre
624
158
106
107
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Correlación entre ítem global y específcos
Negligencia pasan a tener una alta correlación con el ítem global, pero se mantienen
Como se muestra en la abla 3, en la dimensión Entorno todos los ítems especícos mostraron una asociación estadísticamente signicativa con el ítem
las bajas asociaciones con Abuso Sexual y VIF.
global (p<0.01), tanto al ingreso como al egreso. Los ítems con una correlación alta (0.6 a 0.8) al ingreso son Habitabilidad de la vivienda, Ingreso/Empleo, Manejo
estadísticamente signicativa entre todos los ítems especícos y el ítem global (p<0.01) al ingreso y al egreso. Para esta sub-escala, los ítems con una alta correlación
Financiero y Entorno de Aprendizaje; el ítem con una baja correlación (0.2 a 0.4) resultó ser ransporte, mientras que el resto mostró correlaciones moderadas (0.4
al ingreso ueron Salud Mental del Niño y Relación del Niño con los Cuidadores, los
a 0.6). Al egreso de los casos, hubo una mayor cantidad de ítems con correlaciones
Escolar, los ítems con una baja correlación ueron Relación con Pares y Motivación
altas, si bien ransporte sigue siendo un ítem con baja correlación.
Por último, en la dimensión Bienestar del Niño se reitera una asociación
ítems con una correlación moderada ueron Comportamiento del Niño y Desempeño a Permanecer en la Familia, y el ítem Relación con Hermanos mostró una muy
entre todos los ítems especícos de la escala y el ítem global (p<0.01), al ingreso como
baja correlación (0 a 0.2) con el ítem global. Al egreso, se observa una importante mejoría, ya que los ítems con una alta correlación son Salud Mental del Niño,
al egreso. Al ingreso, el ítem Salud Física del Cuidador muestra una baja correlación
Comportamiento del Niño, Desempeño Escolar y Relación con Cuidadores, mientras
con el ítem global, Salud Mental y Drogas/Alcohol en el Cuidador muestra una correlación moderada, mientras que los ítems que correlacionan más uerte, en
que los ítems con una correlación moderada son Relación con Pares y Motivación a
el rango de alta correlación, son Supervisión del Niño, Prácticas Disciplinarias y
de baja correlación con el ítem global.
Oportunidades de Desarrollo. Al egreso de los casos, todos los indicadores mejoran,
Sensibilidad a los cambios pre-post intervención
En la dimensión Competencias Parentales , se observó a su vez una asociación
Salud Física y Drogas/Alcohol en el Cuidador muestran una correlación moderada, Salud Mental del Cuidador y Oportunidades de Desarrollo una correlación alta, y Supervisión del Niño y Prácticas Disciplinarias pasan a tener una correlación muy alta (0.8 a 1.0). Para la dimensión Interacción Familiar , se reiteró el hallazgo de una asociación estadísticamente signicativa entre los ítems especícos y el ítem global (p<0.01), al ingreso y al egreso. Las correlaciones entre Apego con el Niño, Expectativas sobre el Niño y Apoyo Mutuo en la Familia alcanzan el nivel de altas, mientras que la Relación entre los Cuidadores muestra una baja correlación con el ítem global. Al egreso, se mantienen las altas correlaciones de Apego con el Niño y Expectativas sobre el Niño, pero Apoyo Mutuo en la Familia disminuye su asociación con el ítem global hasta una baja correlación, mientras que el ítem Relación entre los Cuidadores pasa a mostrar una alta correlación.En la dimensión Seguridad Familiar , nuevamente se observaron asociados los ítems especícos con el ítem global (p<0.01), al ingreso y al egreso de los casos. Al revisar los ítems reportados en la
abla 3, se puede observar que Abuso Emocional es el ítem que mejor correlaciona (nivel alto) con el ítem global, mientras que Abuso Físico y Negligencia muestran una correlación moderada, y Abuso Sexual y Violencia Intraamiliar muestran una baja correlación. Al egreso de los casos, tanto Abuso Emocional, como Abuso Físico y
108
Permanecer en la Familia, aunque el ítem Relación con Hermanos sigue en el rango
Las cinco dimensiones globales de la NCFAS mostraron una correlación estadísticamente signicativa entre el ingreso y el egreso, lo que habla de mediciones relacionadas entre sí: Entorno en general, ingreso-egreso, r (669) = .670, p = 0,000;
Competencias Parentales en general, ingreso-egreso, r (659) = .527, p = 0,000; Interacción Familiar en general, ingreso-egreso, r (662) = .555, p = 0,000; Seguridad Familiar en general, ingreso-egreso, r (703) = .471, p = 0,000; y Bienestar del Niño en general, ingreso-egreso, r (624) = .464, p = 0,000. Como se muestra en la abla 4, se observó una dierencia pre-post estadísticamente signicativa (p<0.01) en las cinco dimensiones del instrumento, asociadas a la intervención amiliar es pecializada del programa “Viviendo en Familia” de la Protectora de la Inancia. El mayor cambio en los promedios de puntuación se observó en Competencias Parentales , seguido por Seguridad Familiar , Interacción Familiar y Bienestar del Niño, mientras que la menor dierencia se observó en la subescala Entorno, resultando altamente coherente con el modelo de intervención del programa, que enatiza las dimensiones de la dinámica amiliar por sobre aspectos del entorno. Para visualizar los cambios en las proporciones de puntuaciones en rango problemático versus las puntuaciones en rango adecuado/ortaleza, se agruparon dicotómicamente las puntuaciones en cada dimensión.
109
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Correlación entre ítem global y específcos
Negligencia pasan a tener una alta correlación con el ítem global, pero se mantienen
Como se muestra en la abla 3, en la dimensión Entorno todos los ítems
las bajas asociaciones con Abuso Sexual y VIF.
especícos mostraron una asociación estadísticamente signicativa con el ítem global (p<0.01), tanto al ingreso como al egreso. Los ítems con una correlación alta
Por último, en la dimensión Bienestar del Niño se reitera una asociación
(0.6 a 0.8) al ingreso son Habitabilidad de la vivienda, Ingreso/Empleo, Manejo
estadísticamente signicativa entre todos los ítems especícos y el ítem global (p<0.01) al ingreso y al egreso. Para esta sub-escala, los ítems con una alta correlación
Financiero y Entorno de Aprendizaje; el ítem con una baja correlación (0.2 a 0.4) resultó ser ransporte, mientras que el resto mostró correlaciones moderadas (0.4
al ingreso ueron Salud Mental del Niño y Relación del Niño con los Cuidadores, los
a 0.6). Al egreso de los casos, hubo una mayor cantidad de ítems con correlaciones
Escolar, los ítems con una baja correlación ueron Relación con Pares y Motivación
altas, si bien ransporte sigue siendo un ítem con baja correlación.
ítems con una correlación moderada ueron Comportamiento del Niño y Desempeño a Permanecer en la Familia, y el ítem Relación con Hermanos mostró una muy
entre todos los ítems especícos de la escala y el ítem global (p<0.01), al ingreso como
baja correlación (0 a 0.2) con el ítem global. Al egreso, se observa una importante mejoría, ya que los ítems con una alta correlación son Salud Mental del Niño,
al egreso. Al ingreso, el ítem Salud Física del Cuidador muestra una baja correlación
Comportamiento del Niño, Desempeño Escolar y Relación con Cuidadores, mientras
con el ítem global, Salud Mental y Drogas/Alcohol en el Cuidador muestra una correlación moderada, mientras que los ítems que correlacionan más uerte, en
que los ítems con una correlación moderada son Relación con Pares y Motivación a
el rango de alta correlación, son Supervisión del Niño, Prácticas Disciplinarias y
de baja correlación con el ítem global.
Oportunidades de Desarrollo. Al egreso de los casos, todos los indicadores mejoran,
Sensibilidad a los cambios pre-post intervención
En la dimensión Competencias Parentales , se observó a su vez una asociación
Salud Física y Drogas/Alcohol en el Cuidador muestran una correlación moderada, Salud Mental del Cuidador y Oportunidades de Desarrollo una correlación alta, y Supervisión del Niño y Prácticas Disciplinarias pasan a tener una correlación muy alta (0.8 a 1.0). Para la dimensión Interacción Familiar , se reiteró el hallazgo de una asociación estadísticamente signicativa entre los ítems especícos y el ítem global (p<0.01), al ingreso y al egreso. Las correlaciones entre Apego con el Niño,
Permanecer en la Familia, aunque el ítem Relación con Hermanos sigue en el rango
Las cinco dimensiones globales de la NCFAS mostraron una correlación estadísticamente signicativa entre el ingreso y el egreso, lo que habla de mediciones relacionadas entre sí: Entorno en general, ingreso-egreso, r (669) = .670, p = 0,000;
Competencias Parentales en general, ingreso-egreso, r (659) = .527, p = 0,000; Interacción Familiar en general, ingreso-egreso, r (662) = .555, p = 0,000; Seguridad Familiar en general, ingreso-egreso, r (703) = .471, p = 0,000; y Bienestar del Niño en general, ingreso-egreso, r (624) = .464, p = 0,000.
Expectativas sobre el Niño y Apoyo Mutuo en la Familia alcanzan el nivel de altas, mientras que la Relación entre los Cuidadores muestra una baja correlación con el ítem global. Al egreso, se mantienen las altas correlaciones de Apego con el Niño y Expectativas sobre el Niño, pero Apoyo Mutuo en la Familia disminuye su asociación con el ítem global hasta una baja correlación, mientras que el ítem Relación entre los Cuidadores pasa a mostrar una alta correlación.En la dimensión Seguridad Familiar , nuevamente se observaron asociados los ítems especícos con el ítem global (p<0.01), al ingreso y al egreso de los casos. Al revisar los ítems reportados en la
abla 3, se puede observar que Abuso Emocional es el ítem que mejor correlaciona (nivel alto) con el ítem global, mientras que Abuso Físico y Negligencia muestran una correlación moderada, y Abuso Sexual y Violencia Intraamiliar muestran una baja correlación. Al egreso de los casos, tanto Abuso Emocional, como Abuso Físico y
Como se muestra en la abla 4, se observó una dierencia pre-post estadísticamente signicativa (p<0.01) en las cinco dimensiones del instrumento, asociadas a la intervención amiliar es pecializada del programa “Viviendo en Familia” de la Protectora de la Inancia. El mayor cambio en los promedios de puntuación se observó en Competencias Parentales , seguido por Seguridad Familiar , Interacción Familiar y Bienestar del Niño, mientras que la menor dierencia se observó en la subescala Entorno, resultando altamente coherente con el modelo de intervención del programa, que enatiza las dimensiones de la dinámica amiliar por sobre aspectos del entorno. Para visualizar los cambios en las proporciones de puntuaciones en rango problemático versus las puntuaciones en rango adecuado/ortaleza, se agruparon dicotómicamente las puntuaciones en cada dimensión.
108
109
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Tabla 3: Correlaciones entre los ítems específcos y su respectivo ítems global, para cada sub-escala de la NCFAS, al ingreso y al egreso Habitabilidad Vivienda
Entorno en gral.(Ingreso)
Corr. Pearson
,521**
,550**
,605**
,650**
,610**
,556**
Higiene Personal ,554**
,350**
,606**
Entorno en gral. (Egreso)
Sig. (2-tailed) N Corr. Pearson
,000 778 ,529**
,000 778 ,566**
,000 777 ,683**
,000 776 ,687**
,000 776 ,717**
,000 777 ,625**
,000 777 ,616**
,000 776 ,354**
,000 777 ,740**
Sig. (2-tailed)
,000
,000
,000
,000
,000
,000
,000
,000
,000
N
658
657
649
653
649
646
649
646
658
Supervisión del Niño
Prácticas disciplinarias
Oportunidades de Desarrollo
Salud Mental Cuidador
Salud Física Cuidador
Drogas/ Alcohol Cuidador
Corr. Pearson
,649**
,666**
,638**
,587**
,302**
Sig. (2-tailed)
,000
,000
,000
,000
,000
N
770
769
770
770
770
Corr. Pearson
,838**
,837**
,786**
,728**
,458**
Sig. (2-tailed)
,000
,000
,000
,000
,000
,000
N
651
656 Relación entre Cuidadores
648
645
655
Apego con el Niño
657 Expectativas sobre el Niño
Corr. Pearson
,629**
,604**
,373**
Sig. (2-tailed) N
,000 771
,000 771
,000 757
Corr. Pearson
,718**
,766**
,744**
Sig. (2-tailed)
,000
,000
,000
N
653 Abuso Físico
660 Abuso Sexual
659 Abuso Emocional
Corr. Pearson
,591**
,320**
,710**
Sig. (2-tailed)
,000
,000
,000
,000
N
765
766
765
766
Corr. Pearson
,664**
,246**
,749**
Sig. (2-tailed)
,000
,000
,000
,000
,000
N
644
645
642
Salud Mental Niño
Comportam. del Niño
Desempeño escolar
635 Relación con Cuidadores
631 Relación con Hermano
Relación con Pares
Corr. Pearson
,619**
,541**
,504**
,613**
,145**
,239**
Sig. (2-tailed)
,000
,000
,000
,000
,000
,000
N
763
767
766
765
762
761
Corr. Pearson
,732**
,737**
,705**
,741**
,229**
,501**
Sig. (2-tailed)
,000
,000
,000
,000
,000
,000
,000
N 613 ** la Correlación es signifcativa al nivel de 0.01 (2 colas).
618
619
615
606
603
607
Competen. Parentales en gral. (Ingreso)
Competen. Parentales en gral. (Egreso)
Interacción Familiar en general (Ingreso)
Interacción Familiar en general (Egreso)
Seguridad Familiar en general (Ingreso)
Seguridad Familiar en general (Egreso)
Bienestar del Niño en general (Ingreso)
Bienestar del Niño en general (Egreso)
110
Estabilidad vivienda
Seguridad Comunidad
Ingreso/ Empleo
Manejo Financie. Comida y Nutrición
ransporte Entorno Aprend.
,416** ,000 770 ,517**
Apoyo Mutuo ,650** ,000 770 ,262** ,000 644 Negligencia ,584**
,757**
VIF ,349** ,000 755 ,201**
Motivac. Permanecer ,387** ,000 762 ,538**
111
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Tabla 3: Correlaciones entre los ítems específcos y su respectivo ítems global, para cada sub-escala de la NCFAS, al ingreso y al egreso Estabilidad vivienda
Seguridad Comunidad
Habitabilidad Vivienda
Ingreso/ Empleo
Higiene Personal
Manejo Financie. Comida y Nutrición
ransporte Entorno Aprend.
Entorno en gral.(Ingreso)
Corr. Pearson
,521**
,550**
,605**
,650**
,610**
,556**
,554**
,350**
,000 778 ,529**
,000 778 ,566**
,000 777 ,683**
,000 776
,000 776
,000 777
,000 777
,000 776
Entorno en gral. (Egreso)
Sig. (2-tailed) N Corr. Pearson
,687**
,717**
,625**
,616**
,354**
Sig. (2-tailed)
,000
,000
,000
,000
,000
,000
,000
,000
,000
N
658
657
649
653
649
646
649
646
658
Supervisión del Niño
Prácticas disciplinarias
Oportunidades de Desarrollo
Salud Mental Cuidador
Salud Física Cuidador
Drogas/ Alcohol Cuidador
Corr. Pearson
,649**
,666**
,638**
,587**
,302**
Sig. (2-tailed)
,000
,000
,000
,000
,000
N
770
769
770
770
770
Corr. Pearson
,838**
,837**
,786**
,728**
,458**
Sig. (2-tailed)
,000
,000
,000
,000
,000
,000
N
651
656 Relación entre Cuidadores
648
645
655
Apego con el Niño
657 Expectativas sobre el Niño
Corr. Pearson
,629**
,604**
,373**
Sig. (2-tailed) N
,000 771
,000 771
,000 757
Corr. Pearson
,718**
,766**
,744**
Sig. (2-tailed)
,000
,000
,000
N
653 Abuso Físico
660 Abuso Sexual
659 Abuso Emocional
Corr. Pearson
,591**
,320**
,710**
Sig. (2-tailed)
,000
,000
,000
,000
N
765
766
765
766
Corr. Pearson
,664**
,246**
,749**
Sig. (2-tailed)
,000
,000
,000
,000
,000
N
644
645
642
Salud Mental Niño
Comportam. del Niño
Desempeño escolar
635 Relación con Cuidadores
631 Relación con Hermano
Relación con Pares
Corr. Pearson
,619**
,541**
,504**
,613**
,145**
,239**
Sig. (2-tailed)
,000
,000
,000
,000
,000
,000
N
763
767
766
765
762
761
Corr. Pearson
,732**
,737**
,705**
,741**
,229**
,501**
Sig. (2-tailed)
,000
,000
,000
,000
,000
,000
,000
N 613 ** la Correlación es signifcativa al nivel de 0.01 (2 colas).
618
619
615
606
603
607
Competen. Parentales en gral. (Ingreso)
Competen. Parentales en gral. (Egreso)
Interacción Familiar en general (Ingreso)
Interacción Familiar en general (Egreso)
Seguridad Familiar en general (Ingreso)
Seguridad Familiar en general (Egreso)
Bienestar del Niño en general (Ingreso)
Bienestar del Niño en general (Egreso)
,606** ,000 777 ,740**
,416** ,000 770 ,517**
Apoyo Mutuo ,650** ,000 770 ,262** ,000 644 Negligencia
VIF
,584**
,349** ,000 755
,757**
,201**
Motivac. Permanecer ,387** ,000 762 ,538**
110
111
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Tabla 4: Cambio Pre-Post en las dimensiones globales de la NCFAS
El Gráfco 1 muestra estas distribuciones al ingreso y al egreso de los casos atendidos en los once programas de intervención breve “Viviendo en Familia” de la Protectora de la Inancia. Como puede observarse, la NCFAS graca los cambios lograd os
Dierencias Pareadas
en la intervención, con los avances más dramáticos observados en las dimensiones
Media Desv. Media Error Est. Est. Entorno, Ingreso – Egreso
Comp. Parentales,
99% Intervalo de Confanza
t
gl
Sig. (2-tailed)
-,589
,774
,030
Inerior Superior
-,512
-19,686
668
,000
-,926
,938
,037
-1,020
-,831
-25,324
658
,000
-,810
,857
,033
-,896
-,724
-24,295
661
,000
Seguridad Familiar y Competencias Parentales. A continuación, se muestran grácos para cada una de las sub-escalas de la NCFAS, con la proporción de puntuaciones al ingreso y al egreso de los casos en los programas “Viviendo en Familia”. Respecto a la dimensión Entorno (Gráfco 2), la escala muestra un cambio en que la mitad de los casos pasan a ubicarse en la línea de base o uncionamiento adecuado.
Gráfco 2: Cambios Pre-Post en el Entorno
Ingreso –Egreso
Interac. Familiar, Ingreso
50%
–Egreso
Seguridad Fliar., Ingreso
44% -,895
,928
,035
-,985
-,804
-25,571
702
22%
,000
–Egreso
Bienestar Niño, Ingreso –Egreso
9% -,766
,850
,034
-,854
-,678
-22,519
623
,000
Grafco 1: Cambios Pre-Post en las NCFAS, Programa
24%
23%
15% 7%
3% 2% Problema Serio
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza
1% 1% Clara Fortaleza
Viviendo en Familia de la Protectora de la Inancia
Ingreso
Egreso
En la dimensión Competencias Parentales (Gráfco 3) se observa mayor proporción de problemas serios, moderados y leves al ingreso, pero el desplazamiento hacia el rango de ortaleza es similar.
Emtorno- Emtorno- CompPar CompPar InterFliar InterFliar SegFliar SegFliar BienNiño BienNiño -Ing -Egr Ing Egr -Egr -Ing -Erg -Ing -Ing -Egr 80,9 26,0 34,7 32,9 68,8 73,7 32,0 72,5 68,4 24,9 19,1 74,0 67,1 31,2 65,3 26,3 68,0 27,5 31,6 75,1
Problemas
112
Fortalezas
113
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Tabla 4: Cambio Pre-Post en las dimensiones globales de la NCFAS
El Gráfco 1 muestra estas distribuciones al ingreso y al egreso de los casos atendidos en los once programas de intervención breve “Viviendo en Familia” de la Protectora de la Inancia. Como puede observarse, la NCFAS graca los cambios lograd os
Dierencias Pareadas
en la intervención, con los avances más dramáticos observados en las dimensiones
Media Desv. Media Error Est. Est. Entorno, Ingreso – Egreso
Comp. Parentales,
99% Intervalo de Confanza
t
gl
Sig. (2-tailed)
-,589
,774
,030
Inerior Superior
-,512
-19,686
668
,000
-,926
,938
,037
-1,020
-,831
-25,324
658
,000
-,810
,857
,033
-,896
-,724
-24,295
661
,000
Seguridad Familiar y Competencias Parentales. A continuación, se muestran grácos para cada una de las sub-escalas de la NCFAS, con la proporción de puntuaciones al ingreso y al egreso de los casos en los programas “Viviendo en Familia”. Respecto a la dimensión Entorno (Gráfco 2), la escala muestra un cambio en que la mitad de los casos pasan a ubicarse en la línea de base o uncionamiento adecuado.
Gráfco 2: Cambios Pre-Post en el Entorno
Ingreso –Egreso
Interac. Familiar, Ingreso
50%
–Egreso
44%
Seguridad Fliar., Ingreso
-,895
,928
,035
-,985
-,804
-25,571
702
22%
,000
–Egreso
Bienestar Niño, Ingreso –Egreso
24%
9% -,766
,850
,034
-,854
-,678
-22,519
623
,000
15% 7%
3% 2% Problema Serio
Grafco 1: Cambios Pre-Post en las NCFAS, Programa
23%
1% 1%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza
Clara Fortaleza
Viviendo en Familia de la Protectora de la Inancia
Egreso
Ingreso
En la dimensión Competencias Parentales (Gráfco 3) se observa mayor proporción de problemas serios, moderados y leves al ingreso, pero el desplazamiento hacia el rango de ortaleza es similar.
Emtorno- Emtorno- CompPar CompPar InterFliar InterFliar SegFliar SegFliar BienNiño BienNiño -Ing -Egr Ing Egr -Egr -Ing -Erg -Ing -Ing -Egr 80,9 26,0 34,7 32,9 68,8 73,7 32,0 72,5 68,4 24,9 19,1 74,0 67,1 31,2 65,3 26,3 68,0 27,5 31,6 75,1
Problemas
Fortalezas
112
113
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Gráfco 3: Cambios Pre-Post en Competencias Parentales
El indicador de Seguridad Familiar (Gráfco 5), clave para los objetivos del programa “Viviendo en Familia”, muestra el m ayor avance entre todas las dimensiones con un 75,1% de casos en el rango de ortaleza al nalizar la intervención.
53%
44%
Gráfco 5: Cambios Pre-Post en Seguridad Familiar
56%
26%
47% 20%
9%
16%
6% 4% Problema Serio
3%
21%
12% 0% 2%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza
Clara Fortaleza
23% 3%
competencias parentales o el entorno.
1% 2%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza
Clara Fortaleza
Egreso
Ingreso En la dimensión de Interacciones Familiares, el Gráfco 4 muestra que desaparecen los casos con problemas serios al nalizar la intervención, y la proporción de casos con un uncionamiento adecuado es incluso superior a las
18%
6%
5% 2% Problema Serio
Egreso
Ingreso
17%
La sub-escala Bienestar del Niño (Gráfco 6), muestra una menor proporción de problemas moderados y serios al inicio (lo que podría avalar el diseño de prevención secundaria que sustenta este programa), con la tasa más alta entre todas las dimensiones de uncionamiento en línea de base al nalizar la intervención, aunque no se observan casos en clara ortaleza.
Gráfco 4: Cambios Pre-Post en Interacciones Familiares
Gráfco 6: Cambios Pre-Post en Interacciones Familiares
54%
57%
42%
47%
28% 12%
20%
4% 0% Problema Serio
4%
114
Egreso
17%
17%
12%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza Ingreso
28%
19%
22% 0% 2%
2% 0%
Clara Fortaleza
Problema Serio
8%
3%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza Ingreso
0% 0% Clara Fortaleza
Egreso
115
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Gráfco 3: Cambios Pre-Post en Competencias Parentales
El indicador de Seguridad Familiar (Gráfco 5), clave para los objetivos del programa “Viviendo en Familia”, muestra el m ayor avance entre todas las dimensiones con un 75,1% de casos en el rango de ortaleza al nalizar la intervención.
53%
44%
Gráfco 5: Cambios Pre-Post en Seguridad Familiar
56%
26%
47% 20%
9%
16%
6% 4% Problema Serio
3%
21%
12% 0% 2%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza
Clara Fortaleza
23% 3%
competencias parentales o el entorno.
1% 2%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza
Clara Fortaleza
Egreso
Ingreso En la dimensión de Interacciones Familiares, el Gráfco 4 muestra que desaparecen los casos con problemas serios al nalizar la intervención, y la proporción de casos con un uncionamiento adecuado es incluso superior a las
18%
6%
5% 2% Problema Serio
Egreso
Ingreso
17%
La sub-escala Bienestar del Niño (Gráfco 6), muestra una menor proporción de problemas moderados y serios al inicio (lo que podría avalar el diseño de prevención secundaria que sustenta este programa), con la tasa más alta entre todas las dimensiones de uncionamiento en línea de base al nalizar la intervención, aunque no se observan casos en clara ortaleza.
Gráfco 4: Cambios Pre-Post en Interacciones Familiares
Gráfco 6: Cambios Pre-Post en Interacciones Familiares
54%
57%
42%
47%
28% 12%
20%
4% 0% Problema Serio
4%
17%
17%
12%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza Ingreso
28%
19%
22% 0% 2%
2% 0%
Clara Fortaleza
Problema Serio
8%
3%
Leve Problema Problema Línea Moderado Leve Base/ Acuerdo Fortaleza
Egreso
Ingreso
0% 0% Clara Fortaleza
Egreso
114
115
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
ras analizar las dierencias pre-post en las medias de puntuación y su
Gráfco 7: Cambios Pre-Post en Seguridad Familiar
signicancia estadística, la proporción dicotómica de casos pre-post en rango de problemas versus rango de ortalezas y las proporciones de casos pre-post para cada puntuación, se procedió a estudiar la dirección del cambio identicada al egreso con respecto a la puntuación de base asignada al ingreso. Se identicaron 7 cambios posibles: (1) retrocede dos niveles, (2) retrocede un nivel, (3) se mantiene sin cambios, (4) avanza un nivel, (5) avanza dos niveles, (6) avanza tres niveles y (7) avanza cuatro niveles. Este hallazgo es relevante en sí mismo, ya que muestra que la escala se usa eectivamente para gracar diversas pos ibilidades de cambio. Los resultados especícos para cada alternativa se muestran en la abla 5.
Tabla 5: Dirección del cambio pre-post en los ítems globales
70% 60% 50% 40% 30% 20% 10% 0% Entorno Competencias Interacciones Seguridad Bienestar Familiar Parentales Familiares del Niño
de cada sub-escala de la NCFAS
Nivel de Cambio
Entorno (N=669)
Competencias Parentales (N=660)
Interacciones Familiares (N=662)
Seguridad Familiar (N=706)
Bienestar del Niño (N=624)
- 2 niveles
0,1%
0,3%
0,2%
0,3%
0,3%
- 1 nivel
2,1%
2,9%
1,1%
2,1%
2,9%
0 sin cambio
49,9%
30,8%
39,6%
33,1%
37,5%
Empeora
No cambia
Mejora
+1 nivel
36,0%
41,2%
40,0%
42,4%
40,9%
Bastante más abajo, se ubicó el ítem global Entorno con 48% de casos que muestran algún nivel de mejoría; por otra parte, esta dimensión es la que registró el porcentaje más alto de casos que no cambiaron, con un 50%. Si bien se registraron
+2 niveles
10,3%
20,8%
15,7%
16,9%
16,0%
casos que empeoraron con respecto a su situación inicial en las distintas dimensiones,
+3 niveles
1,3%
2,6%
3,0%
3,5%
2,4%
+4 niveles
0,1%
1,6%
0,5%
1,7%
0,0%
Dirección del Cambio
Entorno
Competencias Parentales
Interacciones Familiares
Seguridad Familiar
Bienestar del Niño
Empeora
2%
3%
1%
2%
3%
en tablas de contingencia, calculando mediante la prueba chi-cuadrado, la asociación
su proporción es muy baja (entre 1,3 y 3,2%), equivaliendo a entre 8 y 21 casos.
Validez concurrente Para estimar la validez concurrente de la escala NCFAS, se realizó un cruce
No cambia
50%
31%
40%
33%
38%
entre el ítem global de cada dimensión recodicados en términos dicotómicos
Mejora
48%
66%
59%
65%
59%
(problema versus adecuado/ortaleza), al ingreso y al egreso, con respecto a la condición del niño, niña o adolescente al egreso, para las siguientes cuatro variables:
Luego, se colapsaron los distintos niveles de cambio en tres grupos, que representan tres direcciones posibles: (a) empeora; (b) no cambia; y (c) mejora,
(a) institucionalización del niño, (b) egreso exitoso, (c) egreso no exitoso y (d) buen pronóstico del caso. Los resultados se muestran en la abla 6.
mostrándose en el Gráfco 7. Como se observa, el mayor porcentaje de mejoría se observó en Competencias Parentales con 66%, seguido por Seguridad Familiar con 65%; luego, y en igual proporción, Interacciones Familiares y Bienestar del Niño, cada una con 59% de casos que mejoran.
116
117
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
ras analizar las dierencias pre-post en las medias de puntuación y su
Gráfco 7: Cambios Pre-Post en Seguridad Familiar
signicancia estadística, la proporción dicotómica de casos pre-post en rango de problemas versus rango de ortalezas y las proporciones de casos pre-post para cada puntuación, se procedió a estudiar la dirección del cambio identicada al egreso con respecto a la puntuación de base asignada al ingreso. Se identicaron 7 cambios posibles: (1) retrocede dos niveles, (2) retrocede un nivel, (3) se mantiene sin cambios, (4) avanza un nivel, (5) avanza dos niveles, (6) avanza tres niveles y (7) avanza cuatro niveles. Este hallazgo es relevante en sí mismo, ya que muestra que la escala se usa eectivamente para gracar diversas pos ibilidades de cambio. Los resultados especícos para cada alternativa se muestran en la abla 5.
Tabla 5: Dirección del cambio pre-post en los ítems globales
70% 60% 50% 40% 30% 20% 10% 0% Entorno Competencias Interacciones Seguridad Bienestar Familiar Parentales Familiares del Niño
de cada sub-escala de la NCFAS
Nivel de Cambio
Entorno (N=669)
Competencias Parentales (N=660)
Interacciones Familiares (N=662)
Seguridad Familiar (N=706)
Bienestar del Niño (N=624)
- 2 niveles
0,1%
0,3%
0,2%
0,3%
0,3%
- 1 nivel
2,1%
2,9%
1,1%
2,1%
2,9%
0 sin cambio
49,9%
30,8%
39,6%
33,1%
37,5%
Empeora
No cambia
Mejora
+1 nivel
36,0%
41,2%
40,0%
42,4%
40,9%
Bastante más abajo, se ubicó el ítem global Entorno con 48% de casos que muestran algún nivel de mejoría; por otra parte, esta dimensión es la que registró el porcentaje más alto de casos que no cambiaron, con un 50%. Si bien se registraron
+2 niveles
10,3%
20,8%
15,7%
16,9%
16,0%
casos que empeoraron con respecto a su situación inicial en las distintas dimensiones,
+3 niveles
1,3%
2,6%
3,0%
3,5%
2,4%
+4 niveles
0,1%
1,6%
0,5%
1,7%
0,0%
Dirección del Cambio
Entorno
Competencias Parentales
Interacciones Familiares
Seguridad Familiar
Bienestar del Niño
Empeora
2%
3%
1%
2%
3%
en tablas de contingencia, calculando mediante la prueba chi-cuadrado, la asociación
su proporción es muy baja (entre 1,3 y 3,2%), equivaliendo a entre 8 y 21 casos.
Validez concurrente Para estimar la validez concurrente de la escala NCFAS, se realizó un cruce
No cambia
50%
31%
40%
33%
38%
entre el ítem global de cada dimensión recodicados en términos dicotómicos
Mejora
48%
66%
59%
65%
59%
(problema versus adecuado/ortaleza), al ingreso y al egreso, con respecto a la condición del niño, niña o adolescente al egreso, para las siguientes cuatro variables:
Luego, se colapsaron los distintos niveles de cambio en tres grupos, que representan tres direcciones posibles: (a) empeora; (b) no cambia; y (c) mejora,
(a) institucionalización del niño, (b) egreso exitoso, (c) egreso no exitoso y (d) buen pronóstico del caso. Los resultados se muestran en la abla 6.
mostrándose en el Gráfco 7. Como se observa, el mayor porcentaje de mejoría se observó en Competencias Parentales con 66%, seguido por Seguridad Familiar con 65%; luego, y en igual proporción, Interacciones Familiares y Bienestar del Niño, cada una con 59% de casos que mejoran.
116
117
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Tabla 6: Asociación entre el ítem global de cada dimensión ingreso-egreso en la NCFAS y la situación del caso al egreso
Niño Institucionalizado P
Sig
Chicuad.
Egreso Exitoso p
Entorno p<.001 .000 13,743 NS Ingreso
Sig
Egreso No Exitoso Chicuad.
.311 1,024
P
Sig
Chicuad.
p<.001 .000 21,004
Buen Pronóstico p NS
Sig .098
Entorno p<.001 .000 32,431 p<.001 .000 149,14 p<.001 .000 169,782 p<.001 .000 Egreso Comp. Parentales p < .05 .024 5,106 Ingreso
NS
.545 0,336
NS
.058 3,601
NS
.527
Comp. Parentales p<.001 .000 40,858 p<.001 .000 198,343 p<.001 .000 197,436 p<.001 .000 Egreso Interacción Familiar p < .01 .002 9,735 Ingreso
NS
.103 2,660
p < .01 .003 8,795
NS
.546
Interacción Familiar p<.001 .000 41,565 p<.001 .000 166,439 p<.001 .000 169,356 p<.001 .000 Egreso Seguridad Familiar p < .01 .004 8,178 Ingreso
En el caso de los ítems globales de “Ingreso”, la asociación estadística es menos uerte, con algunos cruces que no alcanzan a ser signicativos: es el caso de
p<.001 .000 32,183 NS
.106 2,614
p<.001 .000
Chicuad. 2,733 159,047 0,401
201,231
195,743
20,623
0,632
Bienestar Niño p<.001 .000 30,972 p<.001 .000 210,964 p<.001 .000 220,15 Egreso
NS
.427
p<.001 .000
al ingreso podrían tener una validez predictiva importante respecto a la necesidad nal de protección que el equipo debe asumir para un niño determinado.
DISCUSIÓN El presente estudio pretendió aportar al conocimiento sobre las propiedades NCFAS, en su versión en español. Con una muestra de tam año considerable (N=782) de amilias en situación de vulnerabilidad psicosocial, atendidas en programas de
Bienestar Niño p < .01 .006 7,673 Ingreso
p < .05 .011 6,418
que debiese proundizarse en uturos estudios, ya que las puntuaciones de la NCFAS
de conabilidad y validez de la Escala de Evaluación Familiar de Carolina del Norte ,
142,253
.150 2,075
Es interesante que todos los ítems globales se asociaron con la condición de institucionalización del niño en sistemas de protección al nalizar la intervención, lo
0,365
Seguridad Familiar p<.001 .000 37,650 p<.001 .000 101,303 p<.001 .000 191,809 p<.001 .000 Egreso NS
Entorno con egreso exitoso y con buen pronóstico, de Competencias Parentales con egreso exitoso, egreso no exitoso y buen pronóstico, de Interacción Familiar con egreso exitoso y buen pronóstico, de Seguridad Familiar con egreso no exitoso, y por último, de Bienestar del Niño con egreso exitoso y buen pronóstico. Es decir, las puntuaciones al ingreso sólo muestran a sociación estadísticamente signicativa con 10 de 20 relaciones analizadas, mientras que las puntuaciones al egreso se asocian en orma robusta con 20 de 20 relaciones estudiadas.
226,430
Nota 1: los grados de libertad para todos los cálculos ue 1 Nota 2: NS = no es estadísticamente signifcativo
intervención breve (PIB) de la red de colaboradores de SENAME en Chile, el estudio siguió procedimientos de capacitación, registro de inormación y resguardo de los procesos de evaluación comparables a los ocupados en Estados Unidos con la versión en inglés de la escala. Este estudio se suma a uno publicado previamente que exploró la distribución de las puntuaciones, la consistencia interna y la validez interna de la NCFAS, con protocolos aplicados al ingreso de los casos (N=528) al programa “Viviendo en Familia” de la Protectora de la Inancia (Valencia y Gómez, 2010). La proundiza ción en el estudio
Como puede observarse, el instrumento muestra una muy buena asociación ( p < 0.001) de todos los ítems globales de “Egreso” con todos los criterios
de la distribución de puntuaciones y la consistencia interna al ingreso (coecientes de ala de Cronbach entre .733 y .873) y al egreso de los casos (coecientes entre .681 y
considerados, reejando que las puntuaciones asignadas al egreso del caso están uertemente vinculadas a la situación del niño, niña o adolescente al nalizar la
.908), mostró que la escala se distribuye normalmente, ocupando el rango completo de
intervención.
de aceptable hasta muy alta. Si se revisan los coecientes encontrados, todos obtienen
puntuaciones tanto al ingreso como al egreso y que su abilidad se ubica entre el rango valores adecuados, salvo el ítem global Seguridad Familiar al egreso, que obtiene .681 (subiendo a .776 cuando el ala de Cronbach se basa en ítems estandarizados).
118
119
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Tabla 6: Asociación entre el ítem global de cada dimensión ingreso-egreso en la NCFAS y la situación del caso al egreso
Niño Institucionalizado P
Sig
Chicuad.
Egreso Exitoso p
Entorno p<.001 .000 13,743 NS Ingreso
Sig
Egreso No Exitoso Chicuad.
.311 1,024
P
Sig
Chicuad.
p<.001 .000 21,004
Buen Pronóstico p NS
Sig .098
Entorno p<.001 .000 32,431 p<.001 .000 149,14 p<.001 .000 169,782 p<.001 .000 Egreso Comp. Parentales p < .05 .024 5,106 Ingreso
NS
.545 0,336
NS
.058 3,601
NS
.527
Comp. Parentales p<.001 .000 40,858 p<.001 .000 198,343 p<.001 .000 197,436 p<.001 .000 Egreso Interacción Familiar p < .01 .002 9,735 Ingreso
NS
.103 2,660
p < .01 .003 8,795
NS
.546
Interacción Familiar p<.001 .000 41,565 p<.001 .000 166,439 p<.001 .000 169,356 p<.001 .000 Egreso Seguridad Familiar p < .01 .004 8,178 Ingreso
En el caso de los ítems globales de “Ingreso”, la asociación estadística es menos uerte, con algunos cruces que no alcanzan a ser signicativos: es el caso de
p<.001 .000 32,183 NS
.106 2,614
p<.001 .000
Chicuad. 2,733 159,047 0,401
201,231
195,743
20,623
0,632
Bienestar Niño p<.001 .000 30,972 p<.001 .000 210,964 p<.001 .000 220,15 Egreso
NS
.427
p<.001 .000
al ingreso podrían tener una validez predictiva importante respecto a la necesidad nal de protección que el equipo debe asumir para un niño determinado.
DISCUSIÓN El presente estudio pretendió aportar al conocimiento sobre las propiedades NCFAS, en su versión en español. Con una muestra de tam año considerable (N=782) de amilias en situación de vulnerabilidad psicosocial, atendidas en programas de
Bienestar Niño p < .01 .006 7,673 Ingreso
p < .05 .011 6,418
que debiese proundizarse en uturos estudios, ya que las puntuaciones de la NCFAS
de conabilidad y validez de la Escala de Evaluación Familiar de Carolina del Norte ,
142,253
.150 2,075
Es interesante que todos los ítems globales se asociaron con la condición de institucionalización del niño en sistemas de protección al nalizar la intervención, lo
0,365
Seguridad Familiar p<.001 .000 37,650 p<.001 .000 101,303 p<.001 .000 191,809 p<.001 .000 Egreso NS
Entorno con egreso exitoso y con buen pronóstico, de Competencias Parentales con egreso exitoso, egreso no exitoso y buen pronóstico, de Interacción Familiar con egreso exitoso y buen pronóstico, de Seguridad Familiar con egreso no exitoso, y por último, de Bienestar del Niño con egreso exitoso y buen pronóstico. Es decir, las puntuaciones al ingreso sólo muestran a sociación estadísticamente signicativa con 10 de 20 relaciones analizadas, mientras que las puntuaciones al egreso se asocian en orma robusta con 20 de 20 relaciones estudiadas.
226,430
Nota 1: los grados de libertad para todos los cálculos ue 1 Nota 2: NS = no es estadísticamente signifcativo
intervención breve (PIB) de la red de colaboradores de SENAME en Chile, el estudio siguió procedimientos de capacitación, registro de inormación y resguardo de los procesos de evaluación comparables a los ocupados en Estados Unidos con la versión en inglés de la escala. Este estudio se suma a uno publicado previamente que exploró la distribución de las puntuaciones, la consistencia interna y la validez interna de la NCFAS, con protocolos aplicados al ingreso de los casos (N=528) al programa “Viviendo en Familia” de la Protectora de la Inancia (Valencia y Gómez, 2010). La proundiza ción en el estudio
Como puede observarse, el instrumento muestra una muy buena asociación ( p < 0.001) de todos los ítems globales de “Egreso” con todos los criterios
de la distribución de puntuaciones y la consistencia interna al ingreso (coecientes de ala de Cronbach entre .733 y .873) y al egreso de los casos (coecientes entre .681 y
considerados, reejando que las puntuaciones asignadas al egreso del caso están uertemente vinculadas a la situación del niño, niña o adolescente al nalizar la
.908), mostró que la escala se distribuye normalmente, ocupando el rango completo de
intervención.
de aceptable hasta muy alta. Si se revisan los coecientes encontrados, todos obtienen
puntuaciones tanto al ingreso como al egreso y que su abilidad se ubica entre el rango valores adecuados, salvo el ítem global Seguridad Familiar al egreso, que obtiene .681 (subiendo a .776 cuando el ala de Cronbach se basa en ítems estandarizados).
118
119
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
El hallazgo de ciertos problemas con ítems especícos en la sub-
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
escala Seguridad Familiar ya ue reportado en un estudio previo, tras realizar un
ítem global; nuevamente, se obtienen resultados coherentes con el análisis actorial reportado por Valencia y Gómez (2010); los ítems con mejores niveles de correlación
análisis actorial exploratorio (Valencia y Gómez, 2010), y los menores niveles de
son Supervisión del Niño, Prácticas Disciplinarias y Oportunidades de Desarrollo,
conabilidad al egreso encontrados en el presente estudio replican lo reportado
siendo precisamente éstos los que el mencionado análisis actorial sugería retener
por Lee y Lindsey (2010) en su estudio con amilias atendidas en servicios de salud mental juvenil, quienes señalan haber obtenido un coeciente de ala de Cronbach
en el actor Competencias Parentales , asignando la Salud Física y Mental y el Abuso de Alcohol/drogas a otras sub-escalas. Parece ser que eectivamente los mejores
de .66 para esta dimensión, siendo la única que se ubicó bajo el criterio de .70. Las razones para ello pueden encontrarse tanto en una construcción teórica poco precisa
indicadores a considerar al evaluar competencias parentales son aquellos asociados con “habilidades para criar a los hijos” y no con “condiciones uncionales del
de los indicadores propuestos en las deniciones operativas de la escala, en una
cuidador/a”.
menor especialización de los evaluadores en temas de maltrato inantil o en una presencia signicativamente baja de maltrato, negligencia, etc. al egresar las amilias del programa. El análisis de la correlación entre cada ítem especíco y su respectivo ítem global, para cada sub-escala, mostró ser estadísticamente signicativo con un p < .001, en dirección positiva para todos los casos (es decir, una mayor puntuación en el ítem especíco se asocia a una mayor puntuación en el ítem global y viceversa) y con valores de correlaciones r de Pearson en el rango moderado a alto en s u mayoría (ver abla 3), lo que muestra que los ítems globales son un adecuado estimativo de la red de ítems especícos que componen cada sub-escala. Esto es importante, ya que al presentar resultados usando esta escala generalmente se recurre a los ítems globales (entorno en general, competencias parentales en general, interacción amiliar en general, seguridad amiliar en general y bienestar del niño en general) bajo el supuesto de que son buenos representantes de los ítems especícos agrupados bajo su concepto. Ahora bien, al analizar las dierencias especícas (ver abla 3), es interesante que tanto al ingreso como al egreso, el ítem ransporte obtiene una baja correlación con el ítem global Entorno en general. El análisis actorial realizado por Valencia y Gómez (2010) sugiere reubicar este ítem en un nuevo actor denominado tentativamente Bienestar del Cuidador , por lo que podría ser que este ítem no sea un indicador uerte al evaluar el contexto de desarrollo del niño en su amilia y comunidad, siendo indicadores mucho más sólidos aquellos que apuntan a los ingresos y al manejo económico, a la calidad de la vivienda y a la provisión de
En la sub-escala Interacciones Familiares, la abla 3 mostró que los indicadores más estables entre el ingreso y egreso, y que obtienen una alta correlación con el ítem global, ueron Apego con el Niño y Expectativas sobre el Niño, lo que podría enatizar más bien un nivel diádico (gura parental/niño) de la relación. En la sub-escala Seguridad Familiar ocurre algo teóricamente esperable, por cuanto el oco del programa “Viviendo en Familia” está en la prevención secundaria del maltrato ísico, maltrato emocional y negligencia parental, tal y como ilustran las proporciones de motivos de ingreso reportadas en la caracterización de los participantes del estudio. No es de extrañar entonces que las correlaciones altas se obtengan en estos tres ítems, con Abuso Emocional siendo el más estable en ambos puntos de medición, seguido por Negligencia y Abuso Físico. En cambio, Abuso Sexual y VIF obtienen correlaciones bajas al ingreso y al egreso, probablemente debido a su baja representación en los casos. La última sub-escala estudiada, Bienestar del Niño, mejora notablemente su comportamiento al egreso de los casos, ya que al ingreso 3 de los 7 ítems especícos obtienen correlaciones bajas o muy bajas, mientras que al egreso solo un ítem continúa siendo bajo: Relación con Hermanos. Probablemente, este ítem se vea inuido por la cantidad considerable de situaciones de “No Aplica” (hijo único), debilitando su asociación con el ítem global. Cabe destacar que en esta sub-escala, los ítems con mayor correlación y más estables ueron Salud Mental del Niño y Relación con los Cuidadores.
NCFAS y la evaluación de resultados Uno de los objetivos principales de la escala NCFAS es servir de instrumento
insumos para el aprendizaje en su entorno cotidiano.
para evaluar resultados de una intervención amiliar o de un programa psicosocial
La dimensión Competencias Parentales , por otra parte, mostró resultados muy interesantes, por cuanto todos los indicadores mejoraron su asociación con el
integral de apoyo a la amilia (véase por ejemplo Fernández, 2007). Por ello, es
120
relevante estudiar si la escala logra reejar cambios pre-post en intervenciones de este tipo. Los análisis realizados en este estudio (ver ablas 4, 5 y 6) corroboran que el
121
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
El hallazgo de ciertos problemas con ítems especícos en la sub-
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
escala Seguridad Familiar ya ue reportado en un estudio previo, tras realizar un
ítem global; nuevamente, se obtienen resultados coherentes con el análisis actorial reportado por Valencia y Gómez (2010); los ítems con mejores niveles de correlación
análisis actorial exploratorio (Valencia y Gómez, 2010), y los menores niveles de
son Supervisión del Niño, Prácticas Disciplinarias y Oportunidades de Desarrollo,
conabilidad al egreso encontrados en el presente estudio replican lo reportado
siendo precisamente éstos los que el mencionado análisis actorial sugería retener
por Lee y Lindsey (2010) en su estudio con amilias atendidas en servicios de salud mental juvenil, quienes señalan haber obtenido un coeciente de ala de Cronbach
en el actor Competencias Parentales , asignando la Salud Física y Mental y el Abuso
de .66 para esta dimensión, siendo la única que se ubicó bajo el criterio de .70. Las razones para ello pueden encontrarse tanto en una construcción teórica poco precisa
indicadores a considerar al evaluar competencias parentales son aquellos asociados con “habilidades para criar a los hijos” y no con “condiciones uncionales del
de los indicadores propuestos en las deniciones operativas de la escala, en una
cuidador/a”.
menor especialización de los evaluadores en temas de maltrato inantil o en una presencia signicativamente baja de maltrato, negligencia, etc. al egresar las amilias del programa.
de Alcohol/drogas a otras sub-escalas. Parece ser que eectivamente los mejores
En la sub-escala Interacciones Familiares, la abla 3 mostró que los indicadores más estables entre el ingreso y egreso, y que obtienen una alta correlación con el ítem global, ueron Apego con el Niño y Expectativas sobre el Niño, lo que
El análisis de la correlación entre cada ítem especíco y su respectivo ítem global, para cada sub-escala, mostró ser estadísticamente signicativo con un p < .001, en dirección positiva para todos los casos (es decir, una mayor puntuación en el ítem especíco se asocia a una mayor puntuación en el ítem global y viceversa) y con valores de correlaciones r de Pearson en el rango moderado a alto en s u mayoría (ver abla 3), lo que muestra que los ítems globales son un adecuado estimativo de la red de ítems especícos que componen cada sub-escala. Esto es importante, ya que al presentar resultados usando esta escala generalmente se recurre a los ítems globales (entorno en general, competencias parentales en general, interacción amiliar en general, seguridad amiliar en general y bienestar del niño en general) bajo el supuesto de que son buenos representantes de los ítems especícos agrupados bajo
podría enatizar más bien un nivel diádico (gura parental/niño) de la relación. En la sub-escala Seguridad Familiar ocurre algo teóricamente esperable, por cuanto el oco del programa “Viviendo en Familia” está en la prevención secundaria del maltrato ísico, maltrato emocional y negligencia parental, tal y como ilustran las proporciones de motivos de ingreso reportadas en la caracterización de los participantes del estudio. No es de extrañar entonces que las correlaciones altas se obtengan en estos tres ítems, con Abuso Emocional siendo el más estable en ambos puntos de medición, seguido por Negligencia y Abuso Físico. En cambio, Abuso Sexual y VIF obtienen correlaciones bajas al ingreso y al egreso, probablemente debido a su baja representación en los casos. La última sub-escala estudiada, Bienestar del Niño, mejora notablemente su
su concepto. Ahora bien, al analizar las dierencias especícas (ver abla 3), es interesante que tanto al ingreso como al egreso, el ítem ransporte obtiene una baja correlación con el ítem global Entorno en general. El análisis actorial realizado por Valencia y Gómez (2010) sugiere reubicar este ítem en un nuevo actor denominado tentativamente Bienestar del Cuidador , por lo que podría ser que este ítem no sea un indicador uerte al evaluar el contexto de desarrollo del niño en su amilia y comunidad, siendo indicadores mucho más sólidos aquellos que apuntan a los ingresos y al manejo económico, a la calidad de la vivienda y a la provisión de
comportamiento al egreso de los casos, ya que al ingreso 3 de los 7 ítems especícos obtienen correlaciones bajas o muy bajas, mientras que al egreso solo un ítem continúa siendo bajo: Relación con Hermanos. Probablemente, este ítem se vea inuido por la cantidad considerable de situaciones de “No Aplica” (hijo único), debilitando su asociación con el ítem global. Cabe destacar que en esta sub-escala, los ítems con mayor correlación y más estables ueron Salud Mental del Niño y Relación con los Cuidadores.
NCFAS y la evaluación de resultados Uno de los objetivos principales de la escala NCFAS es servir de instrumento
insumos para el aprendizaje en su entorno cotidiano.
para evaluar resultados de una intervención amiliar o de un programa psicosocial
La dimensión Competencias Parentales , por otra parte, mostró resultados muy interesantes, por cuanto todos los indicadores mejoraron su asociación con el
integral de apoyo a la amilia (véase por ejemplo Fernández, 2007). Por ello, es relevante estudiar si la escala logra reejar cambios pre-post en intervenciones de este tipo. Los análisis realizados en este estudio (ver ablas 4, 5 y 6) corroboran que el
120
121
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
instrumento es sensible a cambios pre-post, sirviendo para los nes señalados y los outputs que genera son útiles en términos prácticos para mostrar estas dierencias
también en términos de ortalezas (puntuaciones 0, +1 y +2). La NCFAS cumple con ambos requisitos, por cuanto ue diseñada precisamente con esta intención: acilitar
(ver Gráfcos 1 al 7). Estos resultados van en línea con aquellos reportados por Kirk
una evaluación amiliar eco-sistémica, y recordar/permitir que el evaluador no sólo
y colaboradores (2005) al respecto y vienen a conrmar que la escala NCFAS, en su
se concentrara en las carencias y la disunción amiliar, sino también en sus áreas de
versión en inglés o en español, es sensible a diversos criterios para evaluar cambios pre-post en la intervención.
recursos y potencialidades.
Por último, los ítems globales de cada subescala se asocian en términos
cuidadosamente los recursos materiales y humanos que requiere la evaluación amiliar.
estadísticamente signicativos ( p < .001) a la condición de los casos al egreso (niño institucionalizado, egreso exitoso, egreso no exitoso y buen pronóstico del caso), lo
Mientras que las medidas de auto-reporte son más baratas y áciles de aplicar, las medidas observacionales demandan una mayor inversión en al menos dos aspectos:
que apoya la validez concurrente de la escala NCFAS con criterios de logro al nalizar
(a) los recursos necesarios para levantar la inormación que el evaluador requiere al
la intervención y abre la puerta al estudio de la validez predictiva de la escala, por
aplicar el instrumento (ej., entrevistas, visitas domiciliarias, grabaciones de segmentos
ejemplo, con seguimiento de los casos a 6, 12 y/o 24 meses plazo.
de interacción, etc.) y (b) la capacitación, que garantiza el dominio por parte de los
El desaío de evaluar amilias
Por último, el tercer criterio apunta a la importancia de analizar
evaluadores de los conceptos y destrezas necesarias para codicar adecuadamente
En su discusión sobre los desaíos de la evaluación de dimensiones
el instrumento. Si esto no se realiza bien, la conabilidad del instrumento puede resultar seriamente perjudicada (Cumsille, 1996). A este respecto, los procedimientos
amiliares, Cumsille (1996) señala que resulta necesario considerar tres criterios
seguidos en la implementación del programa “Viviendo en Familia” de la Protectora
interrelacionados al diseñar un sistema de evaluación: (a) el objetivo de la evaluación,
de la Inancia permitieron resguardar en parte este aspecto, por cuando el diseño
(b) el modelo teórico y (c) los recursos con que se cuenta para su implementación.
metodológico estableció una serie de pasos para el levantamiento y ponderación de la
Respecto al primer criterio, las medidas de auto-reporte son una alternativa válida si se consideran como “aproximaciones” a las dimensiones amiliares, desde la
inormación necesaria para evaluar a las amilias, asegurando los recursos necesarios
perspectiva o percepción individual; este nivel puede enriquecerse si se cuenta con los reportes cruzados de varios miembros de la amilia. Por su parte, las medidas
por los creadores de la escala en su manual y se reorzó los contenidos en diversos momentos posteriores. De esta orma, la consistencia interna del instrumento no se
observacionales, ya sea por codicación microanalítica de secuencias de interacción
vio perjudicada, manteniéndose en el rango de aceptable a muy alta reportada en los
o por clasicación de niveles de uncionamiento en base de un esquema conceptual
estudios iniciales sobre la escala. Esto sin embargo, no exime de la responsabilidad
(como es el caso de la NCFAS), serían una mejor alternativa cuando lo que se busca es
por actualizar recursivamente los conocimientos, criterios y competencias en los
aportar a la claricación de los mecanismos y procesos de uncionamiento amiliar.
proesionales que evalúan; muy al contrario, los hallazgos de este estudio debiesen
El segundo criterio nos recuerda que la elección del modelo teórico debe guiar y, en última instancia, determinar la elección del instrumento a usar; por
para ello. Asimismo, las instancias de capacitación siguieron los estándares estipulados
orientar qué temáticas pueden requerir mayor proundización o claridad.
ejemplo, en el caso del programa “Viviendo en Familia” su modelo de intervención
La evaluación integral y comprehensiva de amilias en situación de vulnerabilidad psicosocial es un requisito para poder diseñar intervenciones
es eco-sistémico y basado en la resiliencia amiliar, por lo que se requería un
psicosociales y clínicas que sean competentes y pertinentes a cada situación par ticular.
instrumento que evaluara diversos niveles del uncionamiento amiliar, como el
Uno de los mayores desaíos que enrenta el proesional en esta tarea, es poder
individual (ej., ítems Comportamiento del Niño o Salud Mental del Cuidador), diádico
organizar la gran cantidad y diversidad de inormación que recoge en los primeros
(ej., ítems Relación entre los Cuidadores, Relación del Niño con el Cuidador, Apego), microsistémico (ej., ítems Apoyo Mutuo en la Familia, Violencia Intraamiliar)
contactos con el caso; asimismo, para los diseñadores de programas de intervención
y ecosistémico (ej., ítem Ingreso/empleo, Seguridad en la Comunidad); y que
costo-eectividad) alcanzados. En consideración a los hallazgos mayoritariamente positivos encontrados en este estudio y en el estudio de Valencia y Gómez (2010),
permitiese hacerlo no sólo en términos de carencias (puntuaciones -3, -2 y -1) sino
122
amiliar surge la demanda por evaluar rigurosamente los resultados (eectividad y
123
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
instrumento es sensible a cambios pre-post, sirviendo para los nes señalados y los outputs que genera son útiles en términos prácticos para mostrar estas dierencias
también en términos de ortalezas (puntuaciones 0, +1 y +2). La NCFAS cumple con ambos requisitos, por cuanto ue diseñada precisamente con esta intención: acilitar
(ver Gráfcos 1 al 7). Estos resultados van en línea con aquellos reportados por Kirk
una evaluación amiliar eco-sistémica, y recordar/permitir que el evaluador no sólo
y colaboradores (2005) al respecto y vienen a conrmar que la escala NCFAS, en su
se concentrara en las carencias y la disunción amiliar, sino también en sus áreas de
versión en inglés o en español, es sensible a diversos criterios para evaluar cambios pre-post en la intervención.
recursos y potencialidades.
Por último, los ítems globales de cada subescala se asocian en términos
cuidadosamente los recursos materiales y humanos que requiere la evaluación amiliar.
estadísticamente signicativos ( p < .001) a la condición de los casos al egreso (niño institucionalizado, egreso exitoso, egreso no exitoso y buen pronóstico del caso), lo
Mientras que las medidas de auto-reporte son más baratas y áciles de aplicar, las medidas observacionales demandan una mayor inversión en al menos dos aspectos:
que apoya la validez concurrente de la escala NCFAS con criterios de logro al nalizar
(a) los recursos necesarios para levantar la inormación que el evaluador requiere al
la intervención y abre la puerta al estudio de la validez predictiva de la escala, por
aplicar el instrumento (ej., entrevistas, visitas domiciliarias, grabaciones de segmentos
ejemplo, con seguimiento de los casos a 6, 12 y/o 24 meses plazo.
de interacción, etc.) y (b) la capacitación, que garantiza el dominio por parte de los
Por último, el tercer criterio apunta a la importancia de analizar
evaluadores de los conceptos y destrezas necesarias para codicar adecuadamente
El desaío de evaluar amilias En su discusión sobre los desaíos de la evaluación de dimensiones
el instrumento. Si esto no se realiza bien, la conabilidad del instrumento puede resultar seriamente perjudicada (Cumsille, 1996). A este respecto, los procedimientos
amiliares, Cumsille (1996) señala que resulta necesario considerar tres criterios
seguidos en la implementación del programa “Viviendo en Familia” de la Protectora
interrelacionados al diseñar un sistema de evaluación: (a) el objetivo de la evaluación,
de la Inancia permitieron resguardar en parte este aspecto, por cuando el diseño
(b) el modelo teórico y (c) los recursos con que se cuenta para su implementación.
metodológico estableció una serie de pasos para el levantamiento y ponderación de la
Respecto al primer criterio, las medidas de auto-reporte son una alternativa válida si se consideran como “aproximaciones” a las dimensiones amiliares, desde la
inormación necesaria para evaluar a las amilias, asegurando los recursos necesarios
perspectiva o percepción individual; este nivel puede enriquecerse si se cuenta con los reportes cruzados de varios miembros de la amilia. Por su parte, las medidas
por los creadores de la escala en su manual y se reorzó los contenidos en diversos momentos posteriores. De esta orma, la consistencia interna del instrumento no se
observacionales, ya sea por codicación microanalítica de secuencias de interacción
vio perjudicada, manteniéndose en el rango de aceptable a muy alta reportada en los
o por clasicación de niveles de uncionamiento en base de un esquema conceptual
estudios iniciales sobre la escala. Esto sin embargo, no exime de la responsabilidad
(como es el caso de la NCFAS), serían una mejor alternativa cuando lo que se busca es
por actualizar recursivamente los conocimientos, criterios y competencias en los
aportar a la claricación de los mecanismos y procesos de uncionamiento amiliar.
proesionales que evalúan; muy al contrario, los hallazgos de este estudio debiesen
El segundo criterio nos recuerda que la elección del modelo teórico debe guiar y, en última instancia, determinar la elección del instrumento a usar; por
para ello. Asimismo, las instancias de capacitación siguieron los estándares estipulados
orientar qué temáticas pueden requerir mayor proundización o claridad.
ejemplo, en el caso del programa “Viviendo en Familia” su modelo de intervención
La evaluación integral y comprehensiva de amilias en situación de vulnerabilidad psicosocial es un requisito para poder diseñar intervenciones
es eco-sistémico y basado en la resiliencia amiliar, por lo que se requería un
psicosociales y clínicas que sean competentes y pertinentes a cada situación par ticular.
instrumento que evaluara diversos niveles del uncionamiento amiliar, como el
Uno de los mayores desaíos que enrenta el proesional en esta tarea, es poder
individual (ej., ítems Comportamiento del Niño o Salud Mental del Cuidador), diádico
organizar la gran cantidad y diversidad de inormación que recoge en los primeros
(ej., ítems Relación entre los Cuidadores, Relación del Niño con el Cuidador, Apego), microsistémico (ej., ítems Apoyo Mutuo en la Familia, Violencia Intraamiliar)
contactos con el caso; asimismo, para los diseñadores de programas de intervención
y ecosistémico (ej., ítem Ingreso/empleo, Seguridad en la Comunidad); y que
costo-eectividad) alcanzados. En consideración a los hallazgos mayoritariamente positivos encontrados en este estudio y en el estudio de Valencia y Gómez (2010),
permitiese hacerlo no sólo en términos de carencias (puntuaciones -3, -2 y -1) sino
amiliar surge la demanda por evaluar rigurosamente los resultados (eectividad y
122
123
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
se concluye que la escala NCFAS en su versión en español es un aporte signicativo
Coll, Kenneth y Stewart, Roger. Ada County Family Violence Court Grant Project: Com prehensive evaluation report. Phoenix, AZ: Rocky Mountain QualityImprovement Center, 2006.
para ambos desaíos, tanto en la intervención caso a caso como en la evaluación de programas o el estudio sobre amilias y procesos de uncionamiento amiliar, si bien se requiere de mayor investigación para conrmar esta arm ación. Futuros estudios debiesen abordar otros aspectos de la conabilidad y validez de la escala, como la conabilidad test-retest, la conabilidad interjueces, la validez de criterio (especialmente la validez predictiva) y la validez convergente con otros instrumentos. Asimismo, estos estudios debiesen replicarse con las otras versiones de la escala NCFAS, también disponibles en español, especícamente la
Cumsille, Patricio. “Problemas y desaíos en la evaluación psicológica de dimensiones amiliares”. Psykhé. 5 (1996): 57-68. De la Rosa, Iván, et al. “Strengthening amilies with rst-born children: Exploratory story o the outcomes o a home visiting intervention”. Research on Social Work
Practice. 15 (2005): 323-338.
NCFAS-R para casos de niños institucionalizados en sistemas de protección donde
De la Rosa, Iván; Perry, Joanne y Johnson, Victoria. “Benets o increased home-
se evalúa su posible reunicación amiliar, y la NCFAS-G, una orma más completa
visitation services: Exploring a case management model”. Family & Community Health. 32 (2009): 58-75.
de la NCFAS, que añade dimensiones más comunitarias y de redes sociales, organiza ciertos ítems especícos de otra orma y complementa con nuevos ítems sub-escalas como Interacción Familiar , entre otras. En este camino hacia el desarrollo de nuevas ormas, métodos y herramientas para evaluar amilias, la participación progresivamente mayor de organizaciones y programas sociales, centros de estudio y universidades será undamental, así como el nanciamiento necesario para sustentar estas propuestas.
Fernandez, Elizabeth. “Supporting children and responding to their amilies: Capturing the evidence on amily support”. Children and YouthServicesReview. 29(2007): 1368-1394. Gómez, Esteban y Kotliarenco, María Angélica. “Resiliencia Familiar: un enoque de trabajo con amilias multiproblemáticas”. Manuscrito no publicado. (2010).
La evidencia acumulada respalda el uso de la escala NCFAS para los nes señalados,
Gómez, Esteban; Ciuentes, Bernardita y Ross, María Inés. “Previniendo el maltrato
pero sólo su implementación y la actualización de estos conocimientos por parte de diversos actores, en variados contextos y con distintas poblaciones, permitirá
inantil: descripción psicosocial de usuarios de programas de intervención
establecer con claridad sus reales alcances, ortalezas y limitaciones y proyectar
Gómez, Esteban; Muñoz, María Magdalena y Haz, Ana María. “Familias Multiproblemáticas y en Riesgo Social: Características e Intervención”.
nuevos campos para su aplicación.
REFERENCIAS Barudy, Jorge y Dantagnan, Marjorie. Los Buenos ratos a la Inancia: Parentalidad,
apego y resiliencia.Barcelona: Gedisa, 2005. Calkins, Susan et al. “Biological, behavioral and relational levels o resilience in the context o risk or early childhood behavior problems”. Development and Psychopathology.19 (2007): 675-700. Carretero-Dios, Hugo y Pérez, Cristino. “Standards or the development and review o instrumental studies: Considerations about test selection in psychological
breve en Chile”. UniversitasPsychologica. 9 - 3 (2010). En prensa.
Psykhé.16 - 2 (2007): 43-54. Johnson, Michelle, et al. Family assessment in child welare services: Instrument comparisons. Berkeley, CA: University o Caliornia, Center or Social Services Research, 2010. Kalil, Ariel. Family Resilience and Good Child Outcomes: A Review o the Literature. New Zealand: Centre or Social Research and Evaluation, Ministry o Social Development, 2003. Kirk, Raymond y Grith, Diane. An examination o intensive amily preservation services. Buhl, ID: Te Anne Casey Foundation, 2007.
research”. International Journal o Clinical and Health Psychology.7(2007): 863-882.
124
125
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
se concluye que la escala NCFAS en su versión en español es un aporte signicativo
Coll, Kenneth y Stewart, Roger. Ada County Family Violence Court Grant Project: Com prehensive evaluation report. Phoenix, AZ: Rocky Mountain QualityImprove-
para ambos desaíos, tanto en la intervención caso a caso como en la evaluación de
ment Center, 2006.
programas o el estudio sobre amilias y procesos de uncionamiento amiliar, si bien se requiere de mayor investigación para conrmar esta arm ación.
Cumsille, Patricio. “Problemas y desaíos en la evaluación psicológica de dimensiones amiliares”. Psykhé. 5 (1996): 57-68.
Futuros estudios debiesen abordar otros aspectos de la conabilidad y validez de la escala, como la conabilidad test-retest, la conabilidad interjueces, la validez de criterio (especialmente la validez predictiva) y la validez convergente
De la Rosa, Iván, et al. “Strengthening amilies with rst-born children: Exploratory story o the outcomes o a home visiting intervention”. Research on Social Work
con otros instrumentos. Asimismo, estos estudios debiesen replicarse con las otras
Practice. 15 (2005): 323-338.
versiones de la escala NCFAS, también disponibles en español, especícamente la NCFAS-R para casos de niños institucionalizados en sistemas de protección donde
De la Rosa, Iván; Perry, Joanne y Johnson, Victoria. “Benets o increased home-
se evalúa su posible reunicación amiliar, y la NCFAS-G, una orma más completa
visitation services: Exploring a case management model”. Family & Community Health. 32 (2009): 58-75.
de la NCFAS, que añade dimensiones más comunitarias y de redes sociales, organiza ciertos ítems especícos de otra orma y complementa con nuevos ítems sub-escalas como Interacción Familiar , entre otras.
Fernandez, Elizabeth. “Supporting children and responding to their amilies: Capturing the evidence on amily support”. Children and YouthServicesReview. 29(2007): 1368-1394.
En este camino hacia el desarrollo de nuevas ormas, métodos y herramientas para evaluar amilias, la participación progresivamente mayor de organizaciones y programas sociales, centros de estudio y universidades será
Gómez, Esteban y Kotliarenco, María Angélica. “Resiliencia Familiar: un enoque de trabajo con amilias multiproblemáticas”. Manuscrito no publicado. (2010).
undamental, así como el nanciamiento necesario para sustentar estas propuestas. La evidencia acumulada respalda el uso de la escala NCFAS para los nes señalados,
Gómez, Esteban; Ciuentes, Bernardita y Ross, María Inés. “Previniendo el maltrato
pero sólo su implementación y la actualización de estos conocimientos por parte de diversos actores, en variados contextos y con distintas poblaciones, permitirá
inantil: descripción psicosocial de usuarios de programas de intervención
establecer con claridad sus reales alcances, ortalezas y limitaciones y proyectar
Gómez, Esteban; Muñoz, María Magdalena y Haz, Ana María. “Familias Multiproblemáticas y en Riesgo Social: Características e Intervención”.
nuevos campos para su aplicación.
breve en Chile”. UniversitasPsychologica. 9 - 3 (2010). En prensa.
Psykhé.16 - 2 (2007): 43-54.
REFERENCIAS Barudy, Jorge y Dantagnan, Marjorie. Los Buenos ratos a la Inancia: Parentalidad,
Johnson, Michelle, et al. Family assessment in child welare services: Instrument comparisons. Berkeley, CA: University o Caliornia, Center or Social Services
apego y resiliencia.Barcelona: Gedisa, 2005. Calkins, Susan et al. “Biological, behavioral and relational levels o resilience in the context o risk or early childhood behavior problems”. Development and Psychopathology.19 (2007): 675-700. Carretero-Dios, Hugo y Pérez, Cristino. “Standards or the development and review o instrumental studies: Considerations about test selection in psychological
Research, 2010. Kalil, Ariel. Family Resilience and Good Child Outcomes: A Review o the Literature. New Zealand: Centre or Social Research and Evaluation, Ministry o Social Development, 2003. Kirk, Raymond y Grith, Diane. An examination o intensive amily preservation services. Buhl, ID: Te Anne Casey Foundation, 2007.
research”. International Journal o Clinical and Health Psychology.7(2007): 863-882.
124
125
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Kirk, Raymond; Kim, Mimi y Grith, Diane. “Advances in the Reliability and Validity o the North Carolina Family Assessment Scale”.Journal o Human Behavior in
the Social Environment. 11 – 3/4 (2005): 157-176. Lee, Bethany y Lindsey, Michael. “North Carolina Family Assessment Scale: Measurement Properties or Youth Mental Health Services”. Researchon Social
WorkPractice. 20 – 2 (2010): 202-211. Pino, Elizabeth. “Conabilidad Inter-evaluadores en la Escala de Evaluación del Funcionamiento Familiar de Carolina del Norte (NCFAS) en una muestra piloto chilena de maltrato inantil leve y/o moderado”. Inorme de Avance de la tesis para optar al grado de magíster en psicología, Universidad de la Frontera, Chile. Manuscrito no publicado. Reed, Kellie. Te reliability and validity o the North Carolina Family Assessment Scale . Chapel Hill, NC: Te University o North Carolina at Chapel Hill, 1998. Reed-Ashcrat, Kellie; Kirk, Raymond y Fraser, Mark.“Te Reliability and Validity o the North Carolina Family Assessment Scale”.Research on Social Work Practice. 11 - 4 (2001): 503-520.
FAMILIA Y DIVERSIDAD Aportes a la confabilidad y validez de la escala NCFAS
Kirk, Raymond; Kim, Mimi y Grith, Diane. “Advances in the Reliability and Validity o the North Carolina Family Assessment Scale”.Journal o Human Behavior in
the Social Environment. 11 – 3/4 (2005): 157-176. Lee, Bethany y Lindsey, Michael. “North Carolina Family Assessment Scale: Measurement Properties or Youth Mental Health Services”. Researchon Social
WorkPractice. 20 – 2 (2010): 202-211. Pino, Elizabeth. “Conabilidad Inter-evaluadores en la Escala de Evaluación del Funcionamiento Familiar de Carolina del Norte (NCFAS) en una muestra piloto chilena de maltrato inantil leve y/o moderado”. Inorme de Avance de la tesis para optar al grado de magíster en psicología, Universidad de la Frontera, Chile. Manuscrito no publicado. Reed, Kellie. Te reliability and validity o the North Carolina Family Assessment Scale . Chapel Hill, NC: Te University o North Carolina at Chapel Hill, 1998. Reed-Ashcrat, Kellie; Kirk, Raymond y Fraser, Mark.“Te Reliability and Validity o the North Carolina Family Assessment Scale”.Research on Social Work Practice. 11 - 4 (2001): 503-520. Richardson, Brad. “Comparative analysis o two community-based eforts designed to impact disproportionality”. Child Welare Journal. 87 (2008): 297-317. Streiner, Davida y Norman, Georey. Health measurement scales: A practical guide to
their development and use (2ªed.). New York: Oxord University Press, 2003. urner, Lisa, et al. “Helping Families Initiative: Intervening with High-Risk Stude nts through a Community, School, and District Attorney Partnership”. Child and Adolescent Social WorkJournal, 26: 209-223 (2009). Valencia, Edgar y Gómez, Esteban. “Una Escala de Evaluación Familiar Eco-Sistémica para Programas Sociales: Conabilidad y Validez de la NCFAS en Población de Alto Riesgo Psicosocial”. Psykhé.19 - 1 (2010): 89-103. Walker, Ray, et al. “High risk actors or rehospitalization within six months”.
Psychiatric Quarterly. 67 (1996): 235-243. Walker, Susan, et al. “Child development: risk actors or adverse outcomes in developing countries”. Lancet. 369 (2007):145-157. Walsh, Fromma. Resiliencia Familiar: Estrategias para su ortalecimiento . Buenos Aires: Amorrortu, 2004.
126
