Pontificia Universidad Catlica de Valparaso

Centro de Estudios y Asistencia Legislativa

Chile

Auditora Externa para la Evaluacin de la Calidad de los Procesos de

Mediacin Familiar

Informe Final definitivo

Septiembre 2011

2TA BL A DE CO NT EN ID OS .

TABLA DE CONTENIDOS..........................................................................................................2

1. INTRODUCCIN .................................................................................................................3

2. MODELO ECAME................................................................................................................5

2.1. DISEO DEL MODELO ECAME ............................................................................................52.2. CARACTERIZACIN DE LOS INSTRUMENTOS DEL MODELO ECAME ............................................112.3. PROCESOS DE VALIDACIN DE LOS INSTRUMENTOS DEL MODELO ECAME .................................15

3. APLICACIN DE LA METODOLOGA ECAME ....................................................................31

4. INFORMACIN DEL TRABAJO DE CAMPO DE LA AUDITORIA..........................................36

5. ANALISIS DE LOS RESULTADOS DE LA AUDITORIA ...........................................................44

5.1. ANLISIS DE RESULTADOS DE LA GUA DE SUPERVISIN. ..........................................................445.2. ANLISIS DE LOS RESULTADOS DEL REGISTRO INCIDENTAL........................................................955.3. ANLISIS DE RESULTADOS DE LA ENCUESTA DE PERCEPCIN DE USUARIOS. ...............................100

6. PROPUESTAS DE MEJORAMIENTO DE INSTRUMENTOS ECAME....................................112

7. CONCLUSIONES Y PROPUESTAS DE MEJORAMIENTO DE LA CALIDAD DE LOS PROCESOSDE MEDIACION. ..................................................................................................................115

ANEXOS...............................................................................................................................120

ANEXO 1. PARAMETRIZACION DEFINTIVA DE LA METODOLOGA ECAME........................120

ANEXO 2. CALCULO DE FIABILIDAD GUIA DE SUPERVISIN..............................................125

ANEXO 3. FIABILIDAD DE LA ENCUESTA DE USUARIOS COMPLETA..................................131

ANEXO 4. FIABILIDAD DE LA ENCUESTA DE USUARIOS SIN ACUERDO .............................132

ANEXO 5. CALENDARIO DE APLICACIN DEL ECAME A LA MUESTRA ..............................133

ANEXO 6. CARACTERIZACION DE PROCESOS AUDITADOS POR CENTROS ........................135

ANEXO7. TRANSCRIPCION GRUPO FOCAL.........................................................................143

ANEXO 8. VERSION FINAL DE LOS INSTRUMENTOS ECAME ..............................................158

31. IN TR OD UC CI N

El presente informe tiene por objeto presentar los resultados de la Auditora Externa parala Evaluacin de la Calidad de los Procesos de Mediacin Familiar, siendo uno de susproductos principales, el diseo y validacin de una metodologa de supervisin, que elequipo consultor ha denominado ECAME (Evaluacin de la Calidad de la Mediacin), enbase a la cual se propone medir la calidad de los procesos de mediacin en los centroslicitados.

El informe contiene, en forma resumida, el detalle de las etapas del proceso metodolgicopor el cual se construyen y validan los instrumentos que componen la metodologaECAME, adems de la informacin relativa a las modificaciones que los mismos vanexperimentando a partir de dichos procesos de depuracin hasta su propuesta final. Losobjetivos de aportar esta informacin en el presente informe, que en algunos casos ya hasido entregada en informes previos, es permitir a la Unidad de Mediacin, en su calidad demandante de la Auditora, por una parte, considerar el mrito de la cientificidad delproceso metodolgico en retrospectiva, y por otra, permitir la cabal comprensin de lametodologa desde su conceptualizacin original para su mejor aplicacin en el futuro.

Considerando el objetivo final del contrato de Auditora, cual es la transferencia deconocimientos a la mandante de la metodologa de supervisin para su posterioraplicacin, el informe explica en forma sistemtica el mtodo ECAME, caracterizando susinstrumentos y haciendo referencia a su mbito de aplicabilidad respecto de su funcinmetodolgica como respecto de las unidades de observacin que son susceptibles de servaloradas mediante el mismo. Se asume tambin la necesidad de consignar lascondiciones y requerimientos de aplicacin de la metodologa como sus limitaciones.Finalmente, se explica la forma de calcular la puntuacin de los instrumentos para laobtencin de los estndares e indicadores de calidad segn la conceptualizacin quepropone el propio modelo.

En cuanto a la Auditora propiamente tal, el presente informe considera unacaracterizacin de los procesos auditados mostrando esta informacin por centro, condetalle de las materias, el numeral de la sesin observada, y la situacin respecto altrmino del proceso luego de la sesin. Se desarrolla tambin la informacin referida altrabajo de campo, consignando la codificacin de los centros auditados, la muestralograda, el calendario de aplicacin de la misma, las dificultades que se presentaron, elnivel de rechazo a las observaciones y a la encuesta de percepcin por parte de losusuarios, los supervisores con el detalle de los centros en los cuales les correspondiobservar y la cantidad de procesos observados por cada profesional. Tambin se consignainformacin de campo del focus group, ya que si bien no integra la batera demetodologas que componen el ECAME; forma parte de la propuesta metodolgica de laAuditora como recurso para triangular la informacin estadstica obtenida.

4En cuanto a los resultados, el informe consigna los resultados cuantitativos de frecuenciapor tem o pregunta, obtenidos en la aplicacin de la gua de supervisin y de la encuestade percepcin de usuarios, en general y por centro, y los resultados cualitativos delregistro incidental y del focus group. Adems se consignan los resultados cuantitativosreferidos a los puntajes obtenidos en la aplicacin del instrumento de supervisin. Todaesta informacin luego es analizada en forma particular y con una mirada integradorapara obtener conclusiones tcnicas consistentes que permitan fundar las propuestas demejoramiento de la calidad de los procesos de mediacin familiar.

Parte de la informacin estadstica, considerando su extensin, es consignada en detalleen una separata de este informe, en la cual tambin se puede encontrar otros resultadosde los procesos de validacin de los instrumentos que componen la metodologa ECAME.

52. MO DE LO EC AM E

El producto principal de la Auditoria, de acuerdo a su objetivo general, consiste enproporcionar a la Unidad de Mediacin una metodologa de supervisin que contemple laconstruccin y validacin de un instrumento, que a su vez permita evaluar la calidad de losprocesos de mediacin familiar de los centros contratados el Ministerio de Justicia, desdela primera sesin individual o conjunta hasta la firma del acuerdo por las partes.

El quipo consultor ha logrado como producto de la Auditora encomendada, un modelo deevaluacin de la calidad de la mediacin familiar denominado ECAME (Evaluacin de laCalidad de la Mediacin), en cuyo diseo se consideraron una batera de instrumentosque presentan la ductilidad suficiente para ser aplicados en toda la extensin del continuode un proceso de mediacin, independientemente de la etapa del proceso de mediacinen que se aplique, siendo a la vez susceptible de ser aplicado a un proceso en su totalidad.

El ECAME es una metodologa de supervisin compleja que permite evaluar la mediacinfamiliar considerando componentes de proceso, en sus aspectos ticos y tcnicos, comotambin componentes de producto.

2.1. Diseo del Modelo ECAME

En cuanto a la construccin del instrumento principal que requiere la Auditora, comoantecedente, se debe tomar en consideracin que la gran mayora de los estudios de lacalidad de la mediacin que se realizan en contextos especializados utilizan en el procesode evaluacin encuestas de percepcin de usuarios, siendo muy escasa o prcticamentenula la informacin que existe de estudios de evaluacin tcnica de la calidad de lamediacin, los cuales requieren supervisin mediante observacin de funcionesmetodolgicas en sala. El estudio implic, entonces, la creacin de aportes a un mbitomuy poco explorado en la investigacin especializada, lo cual exigi un esfuerzo desistematizacin y validacin recurrente de sus productos.

Por otro lado, cabe tener presente que la Unidad de Mediacin del MINJU ha orientado sufuncin de insercin social de la mediacin en Chile sin realizar opcin por un modelo demediacin determinado, siendo posible concluir, de algunas fuentes primarias revisadas,que acepta y promueve la diversidad de prcticas en este sentido. Este contextoinstitucional determina la orientacin del estudio, y del diseo del instrumento desupervisin, en cuanto se debieron identificar componentes de la calidad del proceso demediacin familiar que fueran posibles ser medidos con estndares supramodelo. En estesentido, el equipo de diseo del instrumento aplic una metodologa de anlisis y

6seleccin de informacin que permiti identificar los consensos dogmticos conceptualesy empricos desde los diferentes enfoques que proponen los modelos.

El equipo profesional consultor asumi este desafo pasando por un procesometodolgico que comprende las etapas que en forma resumida se explican acontinuacin.

Etapas Metodolgicas de la Construccin del Instrumento de Supervisin

Para la construccin del instrumento el equipo tcnico desarroll las siguientes etapas:

Etapa 1: Construccin del Marco Referencial

Esta primera etapa se visualiz necesaria como un insumo para la validez de laparametrizacin dando sustento terico a la construccin de definiciones operacionales yrecursos metodolgicos.

El marco referencial consider dos ejes de bsqueda, uno destinado a obtenerinformacin para un mapa conceptual de la mediacin familiar, y otro para aproximarse aun levantamiento del estado del arte de la evaluacin de la mediacin.

En el primer eje de bsqueda se consider la revisin bibliogrfica sobre antecedentesconceptuales de la mediacin, modelos de mediacin, cdigos ticos de mediacinfamiliar, procedimientos de mediacin y concepto de calidad de la mediacin familiar.

En el segundo eje de bsqueda se consider, adems de la revisin bibliogrfica yasealada sobre antecedentes empricos de estudios sobre la calidad de la mediacin ycalidad de servicios en general, la realizacin de un programa de entrevistas a expertosnacionales e internacionales. Se entrevistaron tres expertos nacionales coordinadores deservicios pblicos de mediacin con pauta semi-estructurada, a saber: del Consejo deDefensa del Estado, de la Direccin del Trabajo y de la Superintendencia de Salud. Encuanto a los expertos internacionales se envo una encuesta por correo electrnico acuatro coordinadores de servicios pblicos de mediacin de larga trayectoria en laespecialidad, recibindose dos respuestas que permitieron integrar enfoques de sistemascomparados de medicin de la calidad de la mediacin de experiencias de Barcelona yArgentina. La lista de expertos que fueron contactados es la siguiente: Ral Calvo Soler(Director del Programa de Implementacin de la Mediacin Obligatoria en Buenos Aires,Argentina), Esther Gathier (Instituto de Mediacin de Holanda), Monserrat MartnezCamps (Coordinadora del Equipo de Mediacin Penal en la Jurisdiccin de Catalua) y AnaVall Rius (Ex - directora del Centro de Mediacin de Derecho Privado de Catalua).

La bsqueda se concentr en la informacin accesible, ya que el volumen de lainformacin que se recopilara estaba condicionado por el tiempo disponible para su

7anlisis y matrizacin por el equipo de diseo del instrumento. Se realiz una revisinbibliogrfica de fuentes primarias y secundarias.

El anlisis de la informacin existente consider, en los ejes mencionados, las siguientesfuentes:

a) Fuentes primarias: Se consultaron los siguientes textos legales y documentosemanados de la Unidad de Mediacin del Ministerio de Justicia, que seencontraban disponibles en su sitio web.

- Ley 19.968 y sus modificaciones de la Ley 20.286.- Decreto 763 del Ministerio de Justicia.- Decreto 904 del Ministerio de Justicia- Documento de la Unidad de Mediacin Criterios de Actuacin por parte de

los Centros de Mediacin Contratados por el Ministerio de Justicia enMateria de Violencia Intrafamiliar.

- Documento de la Unidad de Mediacin Informe Intervencin de losNios/as y adolescentes en el Proceso de Mediacin

- Documento de la Unidad de Mediacin Presentacin de Prueba deConocimiento de Mediadores, material de estudio.

- Documento Resumen Auditora Ernest & Young, Diagnstico al Sistema deMediacin Licitado de Mediacin Familiar.

- Sntesis Estudio de la Calidad del Servicio de Mediacin Licitado por elMinisterio de Justicia, Facultad de Ciencias Econmicas y Administrativas,Universidad de Concepcin.

b) Fuentes Secundarias: Se consultaron textos de autores relevantes en laespecialidad y se realiz un barrido bibliogrfico de artculos por Internet. Lostextos consultados son los siguientes: BARUCH, Robert A. y FOLGER, Joseph P., La Promesa de Mediacin, Barcelona,

Grnica, 1996. DIEZ, Francisco y TAPIA, Gachi., Herramientas para trabajar en mediacin, Buenos

Aires, Paids, 1999. MAYER, Bernard S., Ms all de la neutralidad - Cmo Superar La Crisis De La

Resolucin De Conflictos, Barcelona, Gedisa, 2008. VARGAS P., Macarena., CASAS B., Lidia., AZCAR B., Mara Jos., Mediacin familia

y genero Informe elaborado para el Servicio Nacional de la Mujer y la Fundacindel Familia, Santiago, CIJ / UDP, 2008. SUARES, Marins., Mediando en Sistemas Familiares, Buenos Aires, Paids, 2002. HERNNDEZ S., Roberto., FERNNDEZ C., Carlos., BAPTISTA L., Pilar., Metodologa

de la Investigacin, 3 ed., Mxico D.F., McGraw Hill, 2003. FOLBERG, Jay., TAYLOR, Alison., Mediacin Resolucin de conflictos sin litigio,

Mxico D.F., Limusa, 1997. ARCHAGA, Patricia., BRANDONI, Florencia., FINKELSTEIN, Andrea., Acerca de la

Clnica de Mediacin Relato de Casos., Buenos Aires., Librera Histrica, 2004.

8 CONSTANTINO, Cathy A. y SICKLES M., Christina., Diseo De Sistemas ParaEnfrentar Conflictos, Barcelona, Grnica, 1997. FRIED SCHNITMAN, Dora., Nuevos Paradigmas en la resolucin de Conflictos.,

Buenos Aires, Grnica, 2000. MNOOKIN, Robert H., PEPPET, Scott R., y TULUMELO, Andrew., Resolver Conflictos

y Alcanzar Acuerdos, Barcelona, Gedisa, 2003. HAYNES, John., HAYNES, Gretchen., La Mediacin en el Divorcio, Barcelona,

Grnica, 1997. GROVER DUFFY, Karen., GROSCH, James W., OLCZAK, Paul V., La Mediacin y Sus

Contextos de Aplicacin, Barcelona, Paids, 1996. CUANDO HABLAR DA RESULTADO Perfiles de Mediadores por Deborah M. Kolb y

asociados., Buenos Aires, Paids, 1996 CALCATERRA, Ruben. Mediacin Estratgica, Barcelona, Gedisa, 2002 ORTEMBERG, Osvaldo D., Mediacin En Empresas Familiares., Barcelona, Gedisa,

2006. SIX, Jean-Francois., Dinmica de la Mediacin, Barcelona, Paids, 1997.

En cuanto al barrido bibliogrfico por Internet se consideraron como claves para losmotores de bsqueda los siguientes: calidad mediacin, evaluacin mediacin,calidad servicio, cdigos ticos mediacin, deontologa mediacin, cuyos resultadosarrojaron diversos artculos y estudios que fueron seleccionados.

Con el objeto de facilitar el anlisis de la informacin para la construccin de unadefinicin operativa de calidad de los procesos de mediacin, se recurri a la elaboracinde diversas matrices analticas. Este procedimiento permiti integrar informacinrelevante e identificar consensos entre autores, constituyndose en un referente para laconcrecin de los procesos de parametrizacin.

Etapa 2: Anlisis de Matrices

En diversas reuniones el equipo de diseo metodolgico revis las matrices elaboradas,realizando un anlisis de contrastacin conceptual y revisin crtica de elementosconsensuados y su pertinencia con un enfoque supramodelo.

Este proceso permiti la construccin colectiva de un concepto operativo de mediacinfamiliar de calidad, que el equipo defini como sigue: Un Proceso de resolucin deconflictos regulado por principios dogmticos y legales en el cual, un(a) mediador(a)imparcial, genera comunicacin efectiva y constructiva entre las partes y promueve laparticipacin igualitaria, autnoma y responsable en la bsqueda de soluciones aconflictos familiares, facilitando la generacin de acuerdos construidos desde las partesinteresadas con reciproca satisfaccin subjetiva

9La elaboracin de esta conceptualizacin, considera la nocin de proceso y producto comoelementos integrantes de la metodologa ECAME.

Etapa 3: Parametrizacin Colectiva

A partir del concepto operacional elaborado se procedi al levantamiento decomponentes o variables, dimensiones e indicadores, con sustento terico y emprico,susceptibles de ser observadas en la realidad y que se vinculen a estndares que debiesenpercibirse en un proceso de mediacin en cualquiera de los momentos en que seencuentre, es decir, categoras transversales.

Cabe hacer presente que la parametrizacin inicial del modelo ECAME fue aceptandomodificaciones a partir de los resultados de los procesos de validacin de los instrumentosque la componen, como tambin a partir de las necesidades de levantamiento deinformacin planteadas por la Unidad de Mediacin. Especficamente, la parametrizacinacogi la reformulacin conceptual del componente de producto, amplindolo desde lacualidad del acuerdo a los beneficios asociados a la participacin en el proceso demediacin familiar en general y la reformulacin, eliminacin o integracin de algunostems.

En la etapa posterior a la aplicacin del ECAME a la muestra, han surgido nuevasadecuaciones que emanan de este nuevo proceso de validacin emprica, como de losresultados del anlisis factorial, cambios que se consideran en las propuestas demejoramiento de los instrumentos que se contienen en este informe, las cuales seconsideran en la parametrizacin definitiva del modelo que se adjunta en anexo. (VerAnexo N 1)

Los componentes o variables que considera el modelo ECAME con sus sucesivasmodificaciones a partir de los procesos de depuracin son los siguientes:

Componentes de Proceso:

Prcticas asociadas a la legitimidad de los procesos de mediacin familiar:Caractersticas que determinan la validez de los procesos de mediacin familiarsegn principios legales y dogmticos.

Prcticas asociadas al proceso comunicacional: Caractersticas que permiten elentendimiento y la interaccin positiva entre las partes en un proceso demediacin familiar

Prcticas asociadas al proceso participativo: Caractersticas que permiten laparticipacin activa e igualitaria de las partes en el proceso de mediacin familiar.

Prcticas asociadas al proceso resolutivo: Caractersticas que definen unprocedimiento colaborativo de resolucin de conflictos familiares.

10

Componente de Producto:

Percepcin de beneficios asociados a la participacin en el proceso de mediacinfamiliar: Participacin percibida como libre, igualitaria y satisfactoria y acuerdo co-construido y de mutua satisfaccin.

A partir de los insumos del levantamiento de las variables y la identificacin de sub-dimensiones e indicadores se procedi a operacionalizar dichas variables mediante lageneracin de un grupo de reactivos o proposiciones para la elaboracin de losinstrumentos que integran el ECAME.

A continuacin se identifican las variables de proceso y sus respectivas dimensiones,posterior a los procesos de depuracin definitiva.

Variables DimensionesPrcticas asociadas a la Legitimidad de losProcesos de Mediacin Familiar

TransparenciaIgualdad / Equilibrio de PoderVoluntariedadConfidencialidadImparcialidad/NeutralidadInters Superior del NioLegalidad

Prcticas asociadas al ProcesoComunicacional

Comunicacin efectivaComunicacin constructiva

Prcticas asociadas al Proceso Participativo Igualdad en la ParticipacinProtagonismo/ Responsabilizacin

Prcticas asociadas al Proceso Resolutivo Conduccin del ProcedimientoColaboracin en la Resolucin

Percepcin de beneficios asociados a laparticipacin en el proceso de mediacinfamiliar

Participacin percibida como libre,igualitaria y satisfactoria.Acuerdo co-construido y satisfactorio.

11

Etapa 4: Construccin de los Instrumentos que componen el ECAME .

La asesora metodolgica propuso al equipo el diseo la formulacin de tres instrumentosque fueron recurrentemente revisados y depurados en la redaccin de sus tems,mediante procesos de reflexin y anlisis de consistencia con la matriz deparametrizacin, sufriendo diversas correcciones tanto en el transcurso del proceso deconstruccin como a partir de los resultados de los procesos de validacin emprica y decontenido.

Asimismo fue objeto de anlisis y discusin la escala de valoracin asignada a cadainstrumento en cada uno de sus componentes, cuestin de alta complejidad en relacin ala gua de observacin diseada para la observacin en sala, considerando que lafrecuencia y la intensidad de la prctica observada en un proceso de mediacin respondena un contexto interaccional que determina la intervencin profesional.

2.2. Caracterizacin de los Instrumentos del Modelo ECAME

El equipo consultor dise una metodologa de evaluacin de la calidad de los procesos dela mediacin familiar (ECAME) la cual incorpora diferentes recursos para la valoracin delos componentes de proceso y de producto.

El ECAME, constituye un recurso complejo de obtencin de informacin compuesto portres metodologas que responden a un sistema coherente de evaluacin de la calidad delos procesos de mediacin familiar. Respecto del componente proceso, se consideran dosmetodologas, una gua de observacin de la prctica de mediacin contextualizada ensala, que comprende un check list y tres escalas de apreciacin numrica y un registro deobservacin incidental. Respecto del componente producto, se considera una encuesta depercepcin de usuarios.

La metodologa ECAME se expresa en el siguiente cuadro.

Componentes deProceso

Concepto Recursos Metodolgico

Legitimidad Caractersticas que determinan lavalidez de los procesos de mediacinfamiliar segn principios legales ydogmticos.

Observacin mediantecheck listObservacin incidental.

ProcesoComunicacional

Caractersticas que permiten elentendimiento y la interaccin positivaentre las partes en el proceso demediacin familiar.

Observacin medianteescala de apreciacinnumrica.Observacin incidental

Proceso Participativo Caractersticas que permiten laparticipacin activa, e igualitaria de laspartes en el proceso de mediacinfamiliar

Observacin medianteescala de apreciacinnumricaObservacin incidental

12

Proceso Resolutivo Caractersticas que definen unprocedimiento colaborativo deresolucin de conflictos familiares.

Observacin medianteescala de apreciacinnumricaObservacin incidental

Componente deProducto

Concepto Recurso Metodolgico

Beneficios del Procesode Mediacin

Participacin percibida como libre eigualitaria y satisfactoria y acuerdoco-construido y de mutua satisfaccin.

Encuesta de percepcinde usuario.

Gua de Observacin

La gua de observacin en sala considera como focos de supervisin la vigencia losprincipios de la mediacin familiar y las garantas procedimentales a travs de laobservacin de las prcticas asociadas a la legitimidad entendidas como el estndarmnimo exigible vinculado a la rectitud del proceso, y el nivel tcnico del proceso,mediante la observacin de la presencia de las practicas asociadas a las funcionesmetodolgicas del mediador en el proceso comunicacional, participativo y de resolucinen la mediacin familiar, entendidas como el estndar mnimo exigible vinculado a lacalidad tcnica del proceso.

El instrumento se dise bajo la ptica de integrar una metodologa para la supervisin ymejoramiento de los procesos de mediacin familiar, especficamente, una gua para laobservacin, registro y estudio de los principales componentes de los procesos demediacin familiar, cuyo fin ltimo es el perfeccionamiento contino de la calidad dedichos procesos.

El equipo consultor ha estimado apropiado que el instrumento posibilite la observacinsistemtica o estructurada de un conjunto prcticas observables del (a) mediador(a) yadems, una observacin incidental de stas a medida que acontecen.

La observacin sistemtica corresponde a un estudio metdico, planeado y controlado delas prcticas que se manifiestan, con el propsito de inferir la calidad de los procesos demediacin familiar. En este tipo de observacin, la participacin del(a) mediador(a), esregistrada sistemticamente siguiendo un plan previamente determinado. La observacinde las partes acontece slo cuando constituye un antecedente para el desempeo del(a)mediador(a). La observacin incidental, ha permitido ratificar y afinar las proposicionesdel instrumento para detectar ncleos problemticos y fortalezas de los procesos demediacin familiar observados en un contexto situado.

La gua de observacin, en su versin preliminar, estuvo conformado un total de 76proposiciones (prcticas a observar): 31 corresponden al primer componente (prcticasasociadas a la legitimidad), 19 al segundo componente (prcticas asociadas al procesocomunicacional), 13 al tercer componente (prcticas asociadas al proceso participativo) y13 al cuarto componente (prcticas asociadas al proceso resolutivo). Como resultado final

13

del proceso de validacin y depuracin la gua de observacin qued conformada por 53temes, que corresponden 19 al Componente I: Legitimidad, 13 al Componente II: ProcesoComunicacional, 11 al Componente III: Proceso Participativo y 10 al Componente IV:Proceso Resolutivo.

Como se ha sealado, el estudio previo del equipo de diseo metodolgico, ha permitidoprecisar para cada componente de la mediacin familiar de calidad, una metodologadiversa de evaluacin segn su naturaleza, que se mencionan a continuacin:

Observacin Mediante Check List

La metodologa de observacin mediante Check List , permite observar y registrar lapresencia o ausencia de prcticas asociadas a la vigencia de los principios dogmticos ylegales asociados a la validez de los procesos de mediacin familiar que son observablesen sala. En este sentido, se debe considerar que existen otras prcticas del mediadorasociadas al respeto de los principios de la mediacin familiar, que pudiendo tener mayorincidencia en la manifestacin de su vigencia, no son observables debido a que ellas sedesarrollan fuera del contexto del proceso de mediacin, como por ejemplo el respeto delprincipio de confidencialidad respecto de terceros.

Se estim pertinente este tipo de metodologa respecto del componente legitimidad yaque en este caso las prcticas asociadas no admiten gradacin en escala siendo suvaloracin dicotmica.

Observacin Mediante Escala de Apreciacin Numrica

Inicialmente, el equipo tcnico consider dos alternativas de escala para la valoracin delas prcticas asociadas a los procesos de mediacin, la escala grfica y la escala numrica.Sin embargo, considerando que el instrumento diseado ya contiene un componente decomplejidad asociado a la observacin simultnea y transversal de los procesos, se estimadecuado optar por la escala numrica con el objeto no adicionar mayor complejidad enel proceso de valoracin y registro.

La Escala de Apreciacin Numrica es una de las ms sencilla de construir e interpretar.Con todo, la particular naturaleza de las prcticas de mediacin, implic realizar unproceso de adecuacin de los valores y descriptores para darles sentido en el contexto aobservar. En este caso, la escala consta fundamentalmente de dos partes: un listado decaractersticas de las prcticas de mediacin a observar (proceso comunicacional,participativo y de resolucin de conflictos), y una serie de valores de escala que permitenestablecer la frecuencia en que se manifiesta dicha prctica en el contexto de lamediacin. La escala est diseada para que el supervisor seleccione el nivel que mejorrepresenta la presencia de la prctica observada en relacin al contexto, empleandocinco claves, segn las referencias que se describen para su diferenciacin. Las claves y sudescripcin segn la propuesta final de la gua son las siguientes:

14

Muy Frecuente (MF): La prctica se presenta muy cercana a un 100%, en todas lasoportunidades que lo requiere el proceso de mediacin.Frecuente (F): La prctica se presenta cercana a un 70% de las oportunidades que lorequiere el proceso de mediacin.Ocasional (O): La prctica se presenta aproximadamente en un 50% de las oportunidadesque lo requiere el proceso de mediacin.Muy Ocasional (MO): La prctica se presenta aproximadamente en un 30% o menos de lasoportunidades que lo requiere el proceso de mediacinAusencia (A): La prctica no se presenta segn lo requiere el proceso de mediacin. Estavaloracin corresponde numricamente a cero y representa la ausencia total de laprctica.

Atendido que existen proposiciones que estn referidas a prcticas que responden a uncontexto situacional, de etapa de la mediacin o de acciones o interacciones de las partes,lo cual es eventual, fue necesario considerar en los instrumentos de la gua deobservacin, una categora para registrar el hecho que la prctica no es observable por nocorresponder al contexto situacional o de etapa de la mediacin, que fue nominada NA,es decir, No Aplica. Posteriormente, como resultado de la validacin emprica lacategora No Aplica se restringi al contexto situacional de la interaccin en lamediacin, ya que se complement con cinco filtros referidos a las etapas del proceso demediacin, dndose una nueva estructura a la gua de supervisin. Los filtros a su vezfueron revisados a partir de los resultados de la muestra definitiva, identificndoseproblemas de interpretacin en alguno de ellos, lo cual determin la necesidad de afinarsu redaccin.1

Los filtros que se consideran en la nueva estructura de la propuesta final de la gua deobservacin son los siguientes:

Completar solo cuando la unidad de observacin comprenda la primera sesin. Completar solo cuando la unidad de observacin comprenda sesin conjunta. Completar cualquiera sea la unidad de observacin del proceso Completar solo cuando la unidad de observacin comprenda la ltima sesin. Completar solo en caso que acontezca la situacin prevista en el contexto de la

prctica descrita. En caso contrario marque el casillero No Aplica (NA).

1 Ver el acpite 5.1.1 en relacin a la prdida de datos producida en el Componente IV: Proceso Resolutivode la gua de supervisin.

15

Observacin Incidental

La metodologa ECAME incorpora, adems, la observacin incidental de los cuatrocomponentes asociados a los procesos tcnicos. Se trata de una descripcin de un hecho,especfico y significativo de las prcticas observadas, en un tiempo determinado. Estaopcin metodolgica fue considerada por el equipo de diseo, no solo como un aportecualitativo al proceso de evaluacin, sino tambin como un recurso para perfeccionar elinstrumento en sus primeras etapas de aplicacin.

Encuesta de Percepcin de UsuariosLa encuesta de percepcin de usuarios asociada al componente de producto, entendidoen su versin preliminar como la cualidad del acuerdo, estuvo conformada por un totalseis preguntas: tres correspondan a la dimensin acuerdo co- construido y tres a ladimensin mutua satisfaccin con el acuerdo. Posteriormente, como resultado final delproceso de validacin y depuracin, la encuesta de percepcin de usuarios se modificaeliminando un tem y reconceptualizando el componente producto para ser ampliado a losbeneficios de la participacin en el proceso de mediacin familiar quedando conformadapor seis preguntas para todo los casos y cinco para los casos con acuerdo. La encuestafue diseada para ser entregada por el supervisor a las partes a la salida del proceso demediacin observado y llenada por las propias partes garantizndoles la privacidad en elproceso de respuestas.

2.3. Procesos de Validacin de los Instrumentos del Modelo ECAME

El proceso de validacin de los instrumentos del modelo ECAME contempla tres criteriosde validez:

Validacin de contenido: Pretende obtener una estimacin del grado en que elinstrumento refleja o representa un dominio especfico de lo que mide, validacinque se realiza por juicio de expertos.

Validacin emprica: Est relacionada con la necesidad de recabar datos de unamuestra previa a la prueba, aplicacin piloto, o pretest, en la que se prueba elinstrumento de recoleccin de datos antes de su aplicacin definitiva. Permitedetectar dificultades, realizar anlisis estadsticos y desarrollar una escalapurificada.

Validacin de constructo: Consiste en el anlisis estadstico de la confiabilidad delinstrumento mediante el coeficiente de Alfa de Cronbach, ya que se consideraapropiado para instrumentos con temes dicotmicos y no dicotmicos y requiereuna sola aplicacin. Considera asimismo, el anlisis factorial exploratorio quepermite estudiar en que medida las proposiciones del instrumento evidencian

16

relaciones significativas que comporten factores que mantengan correspondenciacon los componentes de la propuesta.

2.3.1 Del Juicio de Expertos

Un primer momento de validacin de los instrumento correspondi a la evaluacin deexpertos. Para lo anterior, se consider a profesionales que contaban con a lo menosocho aos de trayectoria profesional en la especialidad desde la prctica, la docencia o lainvestigacin, con a lo menos doscientas horas de formacin en mediacin y cinco aos deprctica profesional, o quinientas horas pedaggicas de docencia de pre-grado, postgradoo en cursos, y/o talleres de formacin de mediadores. En este contexto se cont con unaparticipacin de diez expertos en una sesin de trabajo.

Los expertos que participaron en la metodologa son los siguientes:

La concrecin de esta actividad implic la elaboracin previa de un formato delinstrumento ECAME que frente a cada tem, contempl tres criterios que los expertosdeban evaluar, correspondencia, pertinencia y relevancia, y un registro de lasobservaciones que estimaran convenientes respecto de la claridad, comprensin, y /oredaccin de cada tem.

Los criterios de valoracin fueron los siguientes:

Correspondencia conceptual de cada proposicin respecto de la variable: elexperto deba estimar si el contenido del tem representa o no a la variabledescrita.

Pertinencia de cada uno de las proposiciones: el experto deba estimar si el temera adecuado o no para evaluar la calidad de los procesos de mediacin familiar.

Nombre del Experto ProfesinAna Mara Valenzuela Rojas Asistente SocialPaula Correa Camus (se retira) AbogadaLeonor Alliende Luco Asistente SocialMara Olga del Solar Silva Asistente SocialAndrs Donoso Castillo PsiquiatraRoxana Garay Parra Asistente SocialClaudia Tarud Aravena AbogadaVictoria Rogazy Candia Asistente SocialMara de la Paz Donoso Daz PsiclogaMacarena Vargas Pavez AbogadaDebora Levit Beerbrayer Psicloga

17

Relevancia de cada una de las proposiciones: el experto deba valorar con unaescala del 1 al 5, la importancia que le asigna para evaluar la calidad de losprocesos de mediacin familiar

La sesin de valoracin por expertos de la propuesta ECAME se desarroll en la ciudad deSantiago, el da catorce de marzo, con la participacin inicial de once expertos, noobstante uno de ellos se retir con antelacin, por lo cual para la validacin se considerala presencia de diez en total.

Se inici con una presentacin del marco contextual y de referencia base del proceso deconstruccin de los instrumentos, a cargo de la profesional Marcela Fernndez, Jefa deProyecto y coordinadora del estudio. A continuacin, se hizo entrega de un formato acada experto, para su lectura individual y retroalimentacin escrita. Lo anterior tom untiempo estimado de una hora. Posteriormente, se dio espacio para una retroalimentacingrupal, de la cual se extraen como relevantes las siguientes conclusiones:

El grupo de expertos consultados acogi favorablemente la iniciativa del estudio,su inspiracin y objetivos, valor la propuesta del instrumento y se disciplin parareaccionar colaborativamente frente a la matriz que se les present, considerandoal trmino de la evaluacin individual que se trataba de un instrumento ntegro ymuy completo en su desarrollo.

Los expertos demostraron preocupacin por la utilizacin que se le dara alinstrumento en la prctica, manifestando que exista poca claridad respecto delcontexto metodolgico de aplicacin, en cuanto a su significacin, comosupervisin entendido como un proceso de apoyo y retroalimentacin al mediadoro como fiscalizacin entendido como un mecanismo de control y sancin.

Se plantea la preocupacin, respecto a que la aplicacin no considera la mirada delmediador que est siendo observado, inquietud que se acoge como relevante porel equipo a cargo del estudio.

Se instala la inquietud respecto a la encuesta de usuarios, y la posibilidad deampliar los tems referidos al eje producto, y ampliar su aplicacin a mediacionessin acuerdo, pues se establece que el resultado de una mediacin tiene que vercon aprendizajes que superan el resultado del acuerdo.

Modificacin de Instrumentos Posterior a Validacin de Contenido

El anlisis de resultados cuantitativos contempl un porcentaje mnimo del setenta porciento de acuerdo entre los jueces expertos, respecto de la correspondencia conceptual,ndice que expresa en trminos de tanto por ciento, las veces que los jueces coinciden ensus valoraciones sobre cada proposicin de los instrumentos. Una vez cumplida estacondicin se procede a revisar el porcentaje de acuerdo entre expertos respecto de los

18

dos criterios restantes y, adems, se consideran las observaciones y sugerenciasregistradas por ellos, para perfeccionar los instrumentos en su fase inicial de construccin.

La gua de observacin en su versin preliminar, luego del anlisis de validez de contenido,que se tradujo en la reformulacin, integracin y/o eliminacin de tems, experimentauna disminucin de un 29%, de ellos, quedando con cincuenta y cuatro tems. De estamanera se obtuvo la primera versin depurada de la propuesta para supervisores. Se haneliminado un total de 22 proposiciones; 12 del primer componente(6,15,16,18,21,23,24,25,26,27,28 y 29); seis del segundo componente ( 2,5,6,12,17),dosdel tercer componente ( 4 y 11) y dos del cuarto componente (9 y 10). De esta manera seobtuvo la primera versin depurada de la propuesta para supervisores, conformada pordiez y nueve proposiciones correspondientes al primer componente (prcticas asociadasa la legitimidad), trece al segundo componente (prcticas asociadas al procesocomunicacional), once al tercer componente (prcticas asociadas al proceso participativo)y once al cuarto componente (prcticas asociadas al proceso resolutivo). Con respecto ala encuesta de percepcin de usuario, el anlisis de la valoracin de expertos permitemantener cinco de los seis tems originales, todos los cuales logran un acuerdo igual osuperior al 70%, exceptuando el tem N 5, (60% de acuerdo), por tanto se decideeliminarlo.

A continuacin se consigna un resumen de las proposiciones eliminadas y reformuladas apartir de los resultados del juicio de expertos, sin perjuicio de la informacin detallada delproceso de depuracin de cada tem que se registra en las matrices de anlisis del juiciode expertos que fueron entregadas en informes anteriores.

Cuadro Resumen de Cambios a partir del Resultados del Juicio de Expertos

Componente Proposicineliminada

Proposicin semantiene sinmodificacin

Proposicinse mantienereformulada

Legitimidad 6,15,16,18,21,23,24,25,26,27,28,29,

1,2,3,4,7,8,9,10,11,12,13,14,17,19,20,22,31.

5,30

ProcesoComunicacional

2,5,6,8,12,17 1,4,9,13,14,15,16,18,19

3,7,10,11,

ProcesoParticipativo

4,11 3, 5,7,8,9,10,13, 1,2,6,12

Proceso Resolutivo 9,10 2,4,6,11,13 1,3,5,7,8,12

Producto 5 1,2,3,4, -

19

Por su parte la encuesta de percepcin de usuarios, con posterioridad al anlisis de lacorrespondencia conceptual, la pertinencia y relevancia de cada tem sometida a juicio deexpertos, experimenta cambios, especficamente se elimina el tem 5 por que no alcanzael porcentaje mnimo de acuerdo establecido entre los jueces.

2.3.2 Del Pretest

Un segundo momento de validacin del instrumento correspondi a la validacinemprica, la cual permiti detectar dificultades y desarrollar una escala purificada. Esteproceso consider centros pertenecientes a la Macro Zona Central, especficamente en laRegin Metropolitana y la Regin de Valparaso.

Se procedi a analizar los resultados del pretest empleando estadstica descriptiva eincorporando las observaciones de los supervisores respecto de las dificultades decomprensin y aplicacin de la metodologa ECAME, en general. Si bien el tamao de lamuestra fue reducido, este proceso permiti contar con retroalimentacin acerca de alclaridad de las instrucciones, adecuacin de los temes, estructura y disposicinequilibrada de sus partes y mecnica de respuesta (Sierra, 1994).

En relacin a la gua de observacin en sala, este anlisis posterior al pretest permitiidentificar proposiciones con un alto porcentaje de respuestas en la opcin no aplica,unidades de observacin, cuya evaluacin depende de que acontezca la situacin previstaen el contexto de la prctica descrita. Esta situacin ocurre en las proposiciones doce(76.92%), trece (80.77%), dieciocho (42.31% ) y diecinueve (51.85%) del primercomponente (Prcticas asociadas a la legitimidad de los procesos de mediacin familiar);en las proposiciones siete (30.77%), doce (23.08%) y trece (42.31%) del segundocomponente (Prcticas Asociadas al proceso comunicacional) y en las proposiciones seis(46.15%) y siete (23.08%) del cuarto componente (Prcticas asociadas al procesoresolutivo).

Estos resultados permitieron diferenciar entre prcticas que son posibles de observar enla generalidad de los procesos de mediacin de aquellas menos habituales, quecorresponden a situaciones especficas. En este sentido, las observaciones formuladas alpretest permitieron evaluar la conveniencia de eliminar la categora no aplica ,modificando la organizacin del instrumento, como se ha sealado, de modo que lasunidades de observacin comentadas pudieran ser valoradas en caso que acontezca lasituacin prevista de la prctica descrita.

Es importante sealar que, los registros incidentales de los supervisores en el pretest, ensu mayora, aludieron a descripciones de las prcticas de mediacin observadas.

Finalmente, cabe sealar que la implementacin del pretest aport informacin de tipooperativa en cuanto a la aplicacin de la metodologa ECAME, referida a la vinculacin del

20

supervisor con el centro, la modalidad para requerir la autorizacin para la observacin, yel diseo de los sistemas de registros necesarios. Todos estos elementos se incorporaronen el protocolo de aplicacin de la metodologa ECAME utilizado en la muestra definitiva.

Modificacin a Instrumentos Posterior a la Validacin Emprica.

El juicio crtico derivado de la aplicacin del pretest permiti: (a) afinar la estructura delinstrumento y de cada componente y (b) reducir en una proposicin la versin depuradapreviamente mediante juicio de expertos (N 8; Componente IV: Proceso Resolutivo)obtenindose as una gua de observacin para supervisores con cincuenta y tres tems.

Adems es necesario precisar que el pretest proporcion informacin til para acoger lanecesidad de que el instrumento tuviera una estructura en la gua de observacin quepermitiera orientar de modo ms amigable al supervisor, respecto de las prcticas aobservar en un contexto situado. De este modo, se identificaron cinco tipos de situacionesconstitutivas como filtros de la nueva estructura de la gua de supervisin, que ya se hansealado en la caracterizacin de los instrumentos que componen el ECAME.

Por otra parte, en esta etapa del proceso metodolgico se asumieron modificacionespendientes surgidas desde la reflexin del juicio de expertos, relacionadas con la revisinde la encuesta del usuario. En este sentido, el equipo responsable del diseo del ECAMEdecide acoger las sugerencias vinculadas con la conceptualizacin operativa delcomponente producto considerando la ampliacin de aplicabilidad de la encuesta depercepcin de usuarios para todo caso de mediacin, esto es, con y sin acuerdo.

Es as como se procede al estudio y anlisis de antecedentes, para la revisin de laparametrizacin del componente producto, lo que deriva en su reformulacin definitiva,situacin que conlleva una reformulacin conceptual y operativa de las dimensiones eindicadores, elementos constitutivos de la nueva versin de la encuesta de percepcin ausuarios.

La nueva parametrizacin del componente producto, deriva en su reformulacindefinitiva, enriqueciendo su configuracin incorporando cinco tems correspondientes a ladimensin Percepcin de los beneficios asociados a la participacin en el proceso demediacin familiar, aplicable a todo caso, adems de seis tems relativos a lapercepcin de los beneficios de la cualidad del acuerdo. La versin depurada de laencuesta a usuario se aplica por primera vez a la muestra definitiva.

A continuacin se consigna un resumen de las proposiciones incorporadas y reformuladasa partir del proceso de validacin del pretest en la encuesta de usuarios, nicoinstrumento que fue modificado en forma sustancial en los tems a partir de estavalidacin.

21

Cuadro Resumen de Cambios a partir del Resultados del Pretest

Componente de Producto Versin modificada

Variables Dimensiones

Beneficios asociados a la participacin en elproceso de mediacin y a la cualidad delacuerdo.

Participacin(1,2,3,4,5,6 )

Cualidad del acuerdo: ( 7,8,9,10 11,)

2.3.3. Del Anlisis Estadstico.

Efectuada la tabulacin de los datos de la muestra definitiva, se procedi a realizar lavalidacin de constructo de los instrumentos, proceso necesario si se considera que setrataba de su primera aplicacin a una muestra amplia de observaciones, y no se contabacon ningn otro tipo de medicin en este contexto.

a) Anlisis Estadstico de la Gua de Observacin.

Para el anlisis de fiabilidad y validez factorial exploratorio se consider una muestra sinprdida de datos de 125 procesos de mediacin de sesin conjunta, procesos completos(desde la 1 sesin) y terminados. En este contexto, la propuesta de supervisin, objetode este anlisis estadstico, incluye las siguientes variables, dimensiones y proposiciones.

Variables DimensionesPrcticas del(a) mediador(a)asociadas a la Legitimidad

Transparencia: (tem 1,2,3,4,5,6,7,8,9,10,15)Igualdad / Equilibrio de Poder (tem 11,16,17)Voluntariedad ( item 12, 13)Confidencialidad ( item 14)Legalidad ( item 18 y 19 )

Prcticas del(a) mediador(as)asociadas al ProcesoComunicacional

Comunicacin efectiva: Destrezas comunicacionalesdel(a) mediador (a) (tem 1,2,3,4,5,6,). Destrezascomunicacionales para intervenir el proceso decomunicacin entre las partes ( tem 7,8,9)Comunicacin constructiva entre las partes( 10)

Prcticas del(a) mediador(a)asociadas al Proceso Participativo

Igualdad en la Participacin (1,2,3,4,5,6)Protagonismo/ Responsabilizacin (7,8,9,10,11)

Prcticas del(a) mediador(a)asociadas al Proceso Resolutivo

Conduccin del Procedimiento (1,2,3,4,5,9,10)Colaboracin en la Resolucin( 6,7,8)

22

Clculo del Coeficiente Alfa de Cronbach

De las modalidades que existen para el clculo de la fiabilidad , se escogi el Coeficientede fiabilidad Alfa de Cronbach, el cual requiere de una sola administracin y entrega uncoeficiente que puede variar desde el cero (nula confiabilidad) hasta el uno (mximaconfiabilidad). Hernndez, Fernndez & Baptista, 1994, sealan que los resultados puedenubicarse desde una confiabilidad Muy baja, Baja, Regular, Aceptable y Elevada, que esaquella en donde puede decirse que no hay error.Una vez realizado este anlisis se tiene que de manera general la batera de instrumentosalcanza un rango de confiabilidad elevada de 0,955; puesto que por lo general no deberaser inferior a .80 para que el instrumento de medicin pudiera considerarse fiable (CeaD`Acona, 2001: 156). Adems, en los cuatro componentes de la propuesta ECAME losresultados tambin son Aceptables, sugiriendo mantener todos los temes. (Ver Anexo N2)

A continuacin se muestra en un cuadro el Coeficiente Alfa de Cronbach de loscomponentes asociados a proceso de la gua de supervisin del ECAME.

Componente Alfa de Cronbach N elementosLegitimidad 0.753 13Proceso comunicacional 0.914 10Proceso participativo 0.854 11Proceso resolutivo 0.934 08Total 0.955 42

Anlisis Factorial Exploratorio

El paso siguiente consisti en la revisin de la matriz de correlaciones con el fin deresguardar aquellas condiciones que hacan recomendable el anlisis factorial. El anlisisfactorial resulta de gran utilidad en la elucidacin de las distintas dimensiones quecomprende un concepto. Esta tcnica analtica multivariante se ocupa del anlisis de lasinteracciones entre un gran nmero de variables, cuyo objetivo es explicar dichasvariables en trminos de sus dimensiones latentes comunes, denominadas factores.Hemos procedido a realizar anlisis factoriales para cada componente y para su conjunto,cuyo detalle se presenta a continuacin. (Ver separata)

Primer componenteEn este aspecto el ndice de adecuacin de la muestra (KMO) fue de 0,745, estimndoseapropiado (Martn ,1999). Para comprobar al existencia de correlaciones entre lasvariables se emplea la Prueba de Esfericidad de Barlett, este revel un Chi cuadrado

23

aproximado de 454,512, 78 grados de libertad ,significativo a 0.000, lo que permiteconcluir , que significativamente, a cualquier nivel existira correlacin entre las variables.Dado que se cumple con los requisitos necesarios, se procede a realizar anlisis factorialcon el fin de identificar los factores presentes en el componente Legitimidad de lapropuesta. Se emplea el mtodo de extraccin de Mxima verosimilitud, y rotacin,normalizacin Oblimin con Kaiser. Se obtiene una solucin factorial de 4 componentesque explican un 40,084% de la varianza. Cada factor queda definido por las variables quemuestren una mayor correlacin respecto a l que hacia los otros factores. Se utiliz comocriterio de saturacin significativa en los factores, un peso igual o mayor a 0.30 (CeaD`Ancona , 2001). La matriz de estructura sugiere un Anlisis factorial de segundo orden,el que arroja la existencia de un solo factor con una alta covarianza de las puntuacionesfactoriales (0.742) que explica el 37,864 % de la varianza del componente Legitimidad.

Segundo Componente.En este aspecto el ndice de adecuacin de la muestra (KMO) fue de 0,909 estimndosemuy bueno (Martn ,1999). La Prueba de esfericidad de Barlett, revel un Chi cuadradoaproximado de 1356,217, 45 grados de libertad, significativo a 0.000. El AF (mtodo deextraccin : Mxima verosimilitud , y rotacin : Normalizacin Oblimin con Kaiser), arrojados factores que explican un 61,613 % de la varianza del componente, el AF de 2 ordenmantiene esta estructura preliminar aunque debe considerarse con cautela ya que existeuna estrecha relacin estadstica (0.574) y conceptual entre los elementos de ambosfactores .

Tercer componente.Se obtiene un ndice apropiado de adecuacin de la muestra (KMO= 0,871), la Prueba deesfericidad de Barlett, revel un Chi cuadrado aproximado de 938, 014, 55 grados delibertad, significativo a 0.000, por tanto, existira correlacin entre las variables. El anlisisfactorial (mtodo de extraccin: Mxima verosimilitud, y rotacin: Normalizacin Oblimincon Kaiser), arroja tres factores que explican un 56,252% de la varianza El anlisis factorialde segundo orden arroja una configuracin de un factor que explica el 61,651%.de lavarianza del componente.

Cuarto Componente.Se obtiene un ndice muy bueno de adecuacin de la muestra (KMO= 0,901). La Pruebade Barlett, revel un Chi cuadrado de 999, 829, 28 grados de libertad, significativo a0.000. El anlisis factorial (mtodo de extraccin: Mxima verosimilitud, y rotacin:Normalizacin Oblimin con Kaiser), arroja un factor que explica un 64,344% de lavarianza.

24

Anlisis Factorial para el Conjunto de Componentes de la Gua de Observacin

Si bien no se cuenta con una muestra mnima de casos exigidos por proposicin (n: 4), conel fin de identificar los factores presentes en la propuesta de supervisin de la calidad dela mediacin, cumplindose las condiciones de adecuacin y correlacin entre lasvariables, se ha procedido a realizar un anlisis factorial exploratorio con los cuatrocomponentes de proceso como conjunto. Mediante Anlisis de Componentes Principales,se han obtenido 9 factores. Dado que se requiere que el nmero de factores sea inferioral nmero de variables originarias, se solicit la extraccin de 4 componentes, stosexplican el 53,873% de la varianza total. Se ha utilizado como criterio de saturacinsignificativa en los factores, un peso igual o mayor a 0.30, detectndose que el tem 3 noalcanza este criterio, lo que sugiere que sea revisado y sometido a prueba en sucesivasaplicaciones.

Tabla 1: Varianza total explicada

Componente

Autovalores inicialesSumas de las saturaciones alcuadrado de la extraccin

Total% de lavarianza

%acumulado Total

% de lavarianza

%acumulado

1 16,502 39,291 39,291 16,502 39,291 39,2912 2,444 5,818 45,110 2,444 5,818 45,1103 2,007 4,778 49,887 2,007 4,778 49,8874 1,674 3,986 53,873 1,674 3,986 53,873

Mtodo de extraccin: Anlisis de componente principales.

Factores de la Gua de Observacin

Factor 1: Este factor explica un 39,291% de la varianza de la calidad de la mediacinfamiliar, est constituido por 35 proposiciones, seis (6) de stas corresponden a prcticasde transparencia, y una (1) al resguardo de la igualdad, todas conceptualmente vinculadasal primer componente. Se incluyen diez (10) prcticas asociadas a los procesos decomunicacin eficaz , conceptualmente relacionadas con los procesos de comunicacineficaz (Componente 2), diez (10) prcticas asociadas a los procesos departicipacin(Componente 3) y ocho(8) a prcticas asociadas a la resolucin deconflicto(Componente 4).

Esta estructura factorial, integra los cuatro componentes de proceso de la propuestaECAME constituyendo evidencia de intercorrelacin entre dichos conjuntos de variables,lo que se considera globalmente coherente con el modelo inicial. Este componenteincluye prcticas vinculadas a los derechos del usuario (informacin clara y oportuna

25

sobre la naturaleza y objetivos, rol del mediador(a), valor jurdico, asesoramiento jurdicoy comprensin de la informacin previa) las que contribuyen a la clarificacin deexpectativas respecto de los procesos de mediacin. De este modo ampla la propuestade proceso, al incluir estas prcticas, adems de aquellas asociadas a los procesos decomunicacin efectiva, y que permiten la participacin activa e igualitaria de las partes enel proceso de resolucin de conflictos familiares.

Factor 2:Este factor explica en un 5,818% de la varianza de la calidad de la mediacin familiar, estconstituido por 4 tems, tres de los cuales corresponden a prcticas de transparencia(Componente 1) y uno a prcticas asociadas a los procesos de participacin (Componente3).Este factor corresponde conceptualmente a prcticas vinculadas a los principios legalesy dogmticos que contribuyen a otorgar validez a los procesos de mediacin, a saber:explica con claridad los principios de imparcialidad , explicita la prohibicin de mediarcasos de violencia intrafamiliar ,explica con claridad el principio de inters superior delnio(a), persuade o aconseja a las partes respecto de una posible solucin al conflicto .

Factor 3 :Este Componente explica en un 4,778% de la varianza de la calidad de la mediacinfamiliar, est constituido por un (1) tem, (Se imponen soluciones al conflicto) quecorresponde a la prctica del principio de neutralidad asociado conceptualmente a lalegitimidad de los procesos de mediacin familiar (Componente 1).

Factor 4:Este Componente explica en un 3,986% la varianza de la calidad de la mediacin familiar.Est constituido por un (1) tem, (se realizan formulaciones verbales que persuaden encontra del acceso a jurisdiccin) que corresponde a la prctica del principio devoluntariedad, asociada conceptualmente, a la legitimidad de los procesos de mediacinfamiliar (Componente 1).

b) Anlisis Estadstico de la Encuesta de Percepcin de Usuarios

Para realizar el anlisis de fiabilidad y validez factorial exploratorio se ha aplicado laversin depurada de la encuesta de percepcin a una muestra de 327 usuariosparticipantes en procesos de mediacin familiar con acuerdo y 196 sin acuerdo.

En este contexto, la encuesta a usuario, objeto de este anlisis estadstico, incluye lassiguientes variables, dimensiones y proposiciones.

26

Variable Dimensiones ProposicionesBeneficios asociados a laparticipacin en el procesode mediacin y a al cualidaddel acuerdo.

ParticipacinCualidad delacuerdo

item:1,2,3,4,5,6tem: 7,8,9,10 11

Clculo de Coeficiente de Cronbach Encuesta para Casos con Acuerdo

Se ha obtenido un Coeficiente de consistencia Alfa de Cronbach elevado igual a .787; porlo tanto la encuesta puede considerarse fiable. Se observa que si se elimina el tem 4 elndice de consistencia interna se incrementa a .790 (Ver Anexo N 3).

Anlisis Factorial Exploratorio

El anlisis Factorial exploratorio se desarrolla para los 11 tems de la encuesta y resultaapropiado ya que el ndice de adecuacin de la muestra (KMO) es igual a 796,estimndose muy bueno (Martn ,1999). La Prueba de esfericidad de Barlett, arroja un Chicuadrado aproximado de 1323,566, 55 grados de libertad, significativo a 0.000, por tantoexistira correlacin entre las variables. El mtodo de mxima verosimilitud, arroja cuatrocomponentes que explican el 52.393% de la varianza total. El tem 4 obtiene bajacomunalidad (0.070). La matriz de estructura sugiere la necesidad de un AF de 2 orden,procedimiento que arroja un factor comn que explica el 53,234% de la varianza. Sedetectan correlaciones inter-elemento inferiores a la media (0.322) para el tem 4 (de0.055 a 0.29).Esta escala presenta una media de 27,98 puntos y una desviacin estndarigual a 4,951 (Ver Separata).

Tabla 2: Varianza total explicada

Factor

Autovalores inicialesSumas de las saturaciones alcuadrado de la extraccin

Total% de lavarianza

%acumulado Total

% de lavarianza

%acumulado

1 2,596 64,898 64,898 2,129 53,234 53,2342 ,660 16,488 81,3863 ,445 11,117 92,5034 ,300 7,497 100,000

Mtodo de extraccin: Mxima verosimilitud.

27

Clculo de Coeficiente de Cronbach Encuesta para Casos sin Acuerdo

Se ha obtenido un Coeficiente de consistencia interna Alfa de Cronbach igual a 0.727,considerado aceptable. El tem 4 es el que presenta ms baja correlacin inter-elementos(0.225) y su eliminacin incrementa la fiabilidad (0.747).( Ver Anexo N 4 )

Anlisis Factorial Exploratorio

El anlisis factorial se desarrolla para los 6 tems de la dimensin participacin, dado queel ndice de adecuacin de la muestra fue muy bueno (KMO= 0,809) y la Prueba deesfericidad de Barlett, revel un Chi cuadrado aproximado de 321,862, 15 grados delibertad, significativo a 0.000. El mtodo de mxima verosimilitud ha arrojado uncomponente, ste explica el 40,122% de la varianza total. El tem 4 (considera usted quesu participacin en el proceso de mediacin fue voluntaria?), es el que presenta ms bajacomunalidad (0.078) y bajas correlaciones con los otros elementos (entre 0.121 y 0.318),sugiriendo su revisin y/o eliminacin para futuros estudios . En esta escala se obtieneuna puntuacin media igual a 17.81 y una desviacin estndar de 3.702 puntos. (VerSeparata)

Tabla 3. Varianza total explicada

Factor

Autovalores inicialesSumas de las saturaciones alcuadrado de la extraccin

Total% de lavarianza

%acumulado Total

% de lavarianza

%acumulado

1 2,946 49,095 49,095 2,407 40,122 40,1222 ,983 16,381 65,4763 ,718 11,966 77,4424 ,518 8,628 86,0705 ,442 7,360 93,4296 ,394 6,571 100,000

Mtodo de extraccin: Mxima verosimilitud.

Sntesis de Resultados de los Anlisis Estadsticos

La propuesta de Evaluacin de la Calidad de la Mediacin Familiar (ECAME), sujeta acontraste no ha sido cuestionada por los expertos y al parecer ha sido comprendida porlos supervisores participantes, al menos considerando sus observaciones y aportes. Engeneral, todos los grupos han valorado positivamente todos los componentes de laECAME, confirmndose as el planteamiento terico de qu tan importantes son lasprcticas asociadas a la legitimidad, a la comunicacin eficaz, la participacin y laresolucin de conflictos para la calidad de la mediacin familiar.

28

En este contexto, el anlisis de las caractersticas psicomtricas de los instrumentos de lapropuesta desarrollada para la supervisin y usuario, revelan un ndice elevado deconsistencia interna, como resultado de su aplicacin a una muestra de procesos demediacin familiar conjuntos y completos, a lo largo de todo el pas, requerimiento queevidencia una estabilidad apropiada, caracterstica que se observa tambin para cadauno de sus componentes constitutivos.

El anlisis lgico de la estructura factorial de cada uno de los componentes de proceso(aplicado al caso A) y para el componente de producto (casos con y sin acuerdo) revelanen general, una adecuada correspondencia con el marco conceptual y la parametrizacinque sustenta a la construccin de estos instrumentos. En efecto, para supervisin, el AF desegundo orden para el componente Legitimidad evidencia una alta covariacin entre laspuntuaciones factoriales que configuran a los componentes de proceso, situacin quetambin se observa en cada uno de los componentes de proceso, (Comunicacional,Participativo y Resolutivo).

As, al aplicar esta tcnica multivariante a los componentes como conjunto, laconfiguracin del primer factor integra a una alta proporcin de tems de los trescomponentes de proceso, y a algunos tems del primer componente, otorgandoconsistencia al planteamiento terico respecto de la importancia de los conocimientos yhabilidades relacionados con el ejercicio de la mediacin (nivel tcnico) y a la relevanciade la prctica asociada a la legitimacin de los derechos de los usuarios (nivel tico-legal), componentes que como conjunto, tienen un peso importante en explicar la calidadde los procesos de mediacin familiar.

Por tanto, es posible sealar que el AF. ha sido efectivo para elucidar las distintasdimensiones que comprenden los procesos de mediacin familiar, ya que el anlisis de lasinteracciones entre las variables han permitido explicarlas en trminos de sus dimensioneslatentes comunes , en este caso, los 4 factores Paralelamente, el anlisis factorial de laencuesta a usuario, aplicada a casos con y sin acuerdo, ha arrojado una estructura de unfactor nico, ratificando en gran medida la estructura del modelo ECAME en cuatrocomponentes de proceso estrechamente relacionados y un componente de Producto.

De los resultados expuestos, se pueden desprender las variables claves de un sistemade evaluacin de la calidad de la mediacin que el ECAME permite identificar al observarlos procesos de mediacin familiar ; competencias del(a) mediador(a) que garanticen unaprctica de los derechos del usuario y de los principios tico-legales fundamentales, unaintervencin comunicacional constructiva entre las partes, participacin libre activa eigualitaria, la colaboracin responsable en la resolucin de conflictos y construccin deacuerdos satisfactorios para las partes .

29

Es importante reconocer que, la solucin factorial es exploratoria y debe ser consideradacon precaucin habida cuenta las restricciones de muestreo, y por tanto tendr que sersometida a anlisis confirmatorios posteriores. Al respecto la propuesta de supervisin haquedado constituida por 41 prcticas de mediacin familiar, eliminndose slo unaproposicin (correspondiente al tem 3 del componente legitimidad) y la encuesta deusuario para caso sin acuerdo sugiere la revisin del comportamiento del tem cuatro ensucesivas aplicaciones ya que su contenido, vinculado al beneficio de una participacinvoluntaria, resulta conceptualmente relevante. Adems, es necesario tener enconsideracin que en el desarrollo de cualquier instrumento pueden coincidir distintostipos de errores, como es el caso de no respuesta (Lavrakas, 1987, 1993; Bosh y Torrente,1993). Se han detectado supervisores que no han valorado un conjunto de aseveracionesdel componente proceso resolutivo. En este sentido es posible que no todos los datos quese han obtenido constituyan medidas adecuadas de los conceptos que se analizan,pudiendo deberse a sesgos introducidos por el(a) supervisor(a) en el desarrollo de laaplicacin del instrumento. Al respecto Bourque y Clarck 1994, advierten que uno de losmayores errores que se cometen al extraer datos de informes es no advertir que se buscinformacin y no se encontr (Bourque y Clarck 1994). Estas situaciones, no totalmentecontroladas mediante la inclusin de proposiciones situacionales, revelan la necesidad deoptimizar el instructivo para la aplicacin del ECAME, de modo que asegure un mnimo deinadecuaciones en su desarrollo.

Si bien existen mtodos cuantitativos para analizar los reactivos, las tcnicas cualitativaspueden ser de gran valor (Cohen, R., Swerdlik, M.,2000). En este contexto consideramospertinente desarrollar una metodologa con nfasis en el anlisis de reas potenciales deexploracin por medio del anlisis cualitativo, aplicado al contexto de la administracin dela propuesta de supervisin, considerando opiniones de expertos, los registrosincidentales de supervisores de campo y reflexin crtica del equipo.

En esta lnea de anlisis, consideramos apropiado acotar que los expertos han sealadoque la batera de instrumentos parece medir lo que pretende y adems se ha obtenidoregistros para todas las proposiciones, lo que constituye evidencia de que los procesosrepresentados en el instrumento de supervisin constituyen prcticas que acontecen .An cuando las proposiciones son factibles de observar en cualquier proceso completode mediacin, se ha trabajado una propuesta diferenciada por grupos de situaciones: CasoA: sesin conjunta, proceso terminado, desde la 1 sesin; Caso B: sesin conjunta,proceso terminado desde la 2 sesin; Caso C: sesin conjunta proceso no terminadodesde la 1 sesin; Caso D: sesin conjunta caso no terminado , desde la 2 sesin. Estasvariaciones de la propuesta genrica no han sido sometidas validacin factorial, dado queel muestreo de observaciones dista mucho del mnimo exigido para este tipo de anlisisestadstico.

Podemos sealar que la propuesta de Evaluacin de la Calidad es exhaustiva enrepresentar al conjunto de prcticas de mediacin familiar involucradas en los

30

componentes de legitimidad y de procesos, y adems de la percepcin del usuariorespecto de los beneficios asociados a la participacin y/o acuerdo. Esto ha sidocorroborado por el juicio de expertos, los anlisis factoriales realizados y los registrosincidentales. Respecto de stos ltimos, es menester agregar aqu que las observacionesratifican que las prcticas acontecen y constituyen evidencia de las fortalezas ydebilidades detectadas, confirmando las categoras de observacin establecidas a priori,el levantamiento de dicha informacin permite identificar ncleos problemticosrelacionados con el domino legal y tcnico de los mediadores, procesos de mediacincentrados en los procedimientos, y cuyos dinamismos no corresponderanconceptualmente a una mediacin de calidad. Sin embargo, en general no agregan nuevascategoras que amplen la representatividad de las unidades de observacin actuales sinoque han permitido identificar requerimientos asociados al contexto de mediacin: tiempode mediacin (muy breve) apoyo de la unidad al usuario (redes sociales de apoyo), queaunque no constituyen el foco de este estudio, consideramos relevante sealar por susimplicaciones en la calidad.

Los instrumentos incorporan un lenguaje apropiado para los supervisores, profesionalescon experiencia acadmica y prctica en mediacin familiar, tal como estaba previsto en elproceso de exploracin se ha procedido finalmente a considerar los aportes realizados enel espacio abierto de la escala preliminar -observaciones y depurada registroincidental- mediante tcnica de anlisis de contenido categorial temtico . No se haobtenido evidencia de dificultad por parte de los supervisores de campo para comprenderlas proposiciones y las instrucciones. La propuesta de supervisin ha experimentadoreduccin de proposiciones, desde la primera versin. Actualmente abarca 41 prcticascorrespondientes a cuatro grandes procesos a observar. Esta propuesta general, esflexible a los tipos de mediacin, en el sentido de que permite observar procesoscompletos y parciales, con y sin acuerdo. Adems, la encuesta de percepcin de usuarioha sido contestada por una amplia muestra de usuarios, sin evidencias de dificultad porsu parte, ni de reflexiones crticas u opiniones de supervisores que orienten una mayorprofundizacin sobre el tema en estudio.

Sin lugar a dudas que uno de los aspectos sensibles de este proceso ha estado relacionadocon el control de la administracin de los instrumentos. Si bien se desarroll un procesode capacitacin de supervisores de campo, con informacin contextual, conceptual ymetodolgica, se ha detectado un porcentaje no menor (aproximado al 20%) deproposiciones sin valoracin. Se considera necesario optimizar este proceso incorporandoun sistema de apoyo durante la administracin de la metodologa, estrategia que ademspermitira monitorear el avance en el proceso y resolver dificultades en tiemposapropiados. Adems, si bien los supervisores de campo fueron orientados a no interveniren el proceso, no se gener un sistema de supervisin de su trabajo de campo.

Con respecto al ambiente de aplicacin de la propuesta, los registros incidentales hanpermitido identificar interferencias asociadas a prcticas que no aseguran los principios

31

de confidencialidad (celular prendido durante la sesin) y transparencia ( espera en salapor un tiempo superior a media hora sin que el mediador de excusas), lo que podraconfigurar un escenario inadecuado para el desarrollo de la encuesta de usuarios por susimplicaciones ticas y motivacionales.

3. AP LI CA CI N DE LA ME TO DO LO G A EC AM E

Una de las inquietudes planteadas por el equipo de expertos que particip en la validacinde contenidos de los instrumentos de la metodologa ECAME, fue la utilizacin que se ledara en la prctica, en cuanto a su significacin metodolgica como herramienta defiscalizacin o bien como mtodo de supervisin entendido en un contexto deaprendizaje. En este acpite el equipo consultor expone la aplicabilidad que tiene lametodologa ECAME, con sus requerimientos, condiciones de aplicacin y limitaciones.

3.1. Funcin Metodolgica del ECAME

Si bien la Unidad de Mediacin defini el requerimiento de los instrumentos con unobjetivo de supervisin en general, la metodologa ECAME es susceptible de ser aplicadacon diversas funciones metodolgicas, para lo cual se debe considerar tambin diversascondiciones y requisitos de aplicacin. Asimismo, considerando que la metodologaECAME se compone de diversos instrumentos, es posible identificar cierta autonoma enla utilizacin de los mismos, siendo posible utilizar la gua de observacin en sala como uninstrumento autnomo de la encuesta de percepcin de usuarios.

Cualquiera sea su funcin metodolgica, ECAME requiere ser aplicada por supervisoresmediadores profesionales que cuenten con formacin superior al mnimo exigido por laLey de Tribunales de Familia para su incorporacin al Registro, y en el ideal mediadoresque desarrollen labores docentes en mediacin, y cuenten con experiencia prctica enmediacin familiar de un mnimo tres aos. Estos requerimientos se justifican en el hechoque la descripcin de las prcticas a ser observadas suponen para su comprensin unaformacin conceptual avanzada, y la identificacin y valoracin de las mismas suponecontar con un referente emprico previo del mismo nivel. Adems, considerando lacomplejidad de la mecnica de aplicacin de los instrumentos, resulta imprescindiblepara su correcta aplicacin que los supervisores sean capacitados en la metodologaECAME mediante un curso que comprenda los aspectos operativos, la homologacinconceptual y un breve entrenamiento prctico.

La metodologa ECAME en su concepcin de modelo integral de evaluacin de la calidadde la mediacin, puede ser entendida como un recurso para la investigacin de la calidadde la mediacin y el estudio exploratorio de los factores asociados a ella. En este casoECAME requiere ser aplicado a una muestra representativa de procesos de mediacin, de

32

mediadores o de centros de mediacin, que considerando una hiptesis de base asociadaal estudio, permita el anlisis inferencial de sus resultados por expertos, con el objetivo derecomendar la adopcin de medidas correctivas de cualquiera de los factores del sistemaque inciden en la calidad de la mediacin.

La metodologa ECAME puede ser aplicada como un recurso del sistema de fiscalizacin delos Centros de Mediacin, mediante supervisiones tcnicas peridicas a los mediadores,caso en el cual el equipo consultor considera que la evaluacin de dichos mediadoresdebe considerar una observacin sistemtica con un criterio de proporcionalidad del flujode atencin de casos, debiendo promediarse sus resultados para la evaluacin final segnel nmero de casos observados. En caso que la Unidad de Mediacin considere lafiscalizacin reactiva mediante aplicacin de los instrumentos de la metodologa ECAMEcomo un antecedente fundante de sancin, en aplicacin de la normativa que regula lamediacin familiar, el equipo consultor considera necesario que la autoridad previamentedisee un instructivo en el cual se sealen con claridad las prcticas asociadas al ejerciciode las facultades sancionatorias.

Por otro lado, cualquiera sea su funcin metodolgica, el equipo consultor considera quela metodologa ECAME puede tambin ser considerada como un recurso permanente demonitoreo y mejora de los procesos de mediacin familiar, entendida como un sistema desupervisin que permite la retroalimentacin a los mediadores respecto de su prcticacon el objetivo de mejorarla. En este punto se acoge la inquietud planteada por el equipode expertos que particip en la validacin de contenidos de los instrumentos de lametodologa ECAME en cuanto se estim necesario que la aplicacin considerara lamirada del mediador que est siendo observado y evaluado. En caso que se considere laaplicacin de la metodologa con esta finalidad, el equipo consultor considera que puedenseguirse dos metodologas para incluir al mediador como sujeto de retroalimentacin,segn sea el caso:

En caso que ECAME se aplique considerando como sujeto de evaluacin a loscentros de mediacin, la retroalimentacin de los resultados debera realizarse alequipo de mediadores del Centro y sus directivos, informando los resultadosgenerales obtenidos y las fortalezas y debilidades que se observan porcomponentes del modelo.

En caso que ECAME se aplique como instrumento de fiscalizacin reactiva de losprocesos de mediacin, la retroalimentacin debera realizarse al mediadorobservado, informando los resultados especficos de su evaluacin y las fortalezasy debilidades observadas en sus competencias profesionales segn sus puntajes.

33

3.2. Aplicacin de la Gua de Supervisin

Como se ha sealado, los instrumentos que integran la metodologa ECAME han sidodiseados con la ductilidad suficiente para ser aplicados considerando diversas unidadesde observacin, pudiendo ser aplicado considerando como unidad de observacin unasesin de mediacin o un proceso completo de mediacin desde su inicio hasta sutrmino.

3.2.1. Aplicabilidad por Unidades de Observacin

Las unidades de observacin que son susceptibles de ser valoradas con la gua deobservacin, pueden consistir en sesiones conjuntas, sesiones individuales, o ambascuando acontecen en forma consecutiva dentro de un mismo proceso observado,independientemente que se trate de primeras sesiones, sesiones de continuacin osesiones finales. Sin embargo, la aplicacin de la gua de observacin a la muestradefinitiva, arroj limitaciones cuando la aplicacin se realiza a la unidad de observacinconsistente exclusivamente en una sesin individual autnoma, ya que los componentesque consideran prcticas interaccionales no son susceptibles de ser observadas.Especficamente, en la versin de la gua aplicada a la muestra, son los temes 7 al 13 delComponente II: Proceso Comunicacional, los tems 1 al 6 del Componente III: ProcesoParticipativo, y todo el Componente IV: Proceso Resolutivo, siendo posible reformular losrestantes temes referidos a las partes como aplicable a la parte. De acuerdo a loexpuesto, las prcticas posibles de ser observadas en este caso se restringenconsiderablemente, siendo una alternativa manejar una cartilla diferenciada para estoscasos. En el acpite del este informe referido a la propuesta de mejoramiento de losinstrumentos del ECAME se detalla las aplicabilidad de la gua de supervisin segn lasunidades de observacin en su versin final.

Se debe tener presente que se excluyen como unidad de observacin para la aplicacin dela metodologa, las entrevistas con nios, debido a su especificidad tcnica, y las sesionesconjuntas o individuales que slo tengan por objeto la lectura y/o firma del acuerdo, yaque en este caso son muy pocas las prcticas del mediador que se desarrollan para suobservacin.

Finalmente, la aplicacin de la metodologa ECAME a la muestra definitiva aport unanueva limitacin de aplicabilidad, referida a los procesos de mediacin en los cuales laspartes no presentan conflicto entre ellas, y utilizan el espacio de mediacin paraformalizar un acuerdo ya alcanzado, puesto que en este caso no resultan observablesprcticas de mediacin propiamente tal.

34

Valores de los tems de la Gua de Supervisin.

La gua de supervisin, por regla general, considera temes que describen prcticas decalidad, por tanto la mayor puntuacin se asocia a la presencia de la prctica o a la mayorfrecuencia de la prctica segn lo requiere el contexto de mediacin. La excepcin estdada por temes que describen malas prcticas o prcticas que atentan contra la calidad,que se denominan temes invertidos, siendo en estos casos la menor puntuacin la que seasocia a la calidad.

La gua de supervisin por tanto permite observar por regla general la presencia oausencia de prcticas de calidad y la presencia o ausencia de ciertas prcticas que atentancontra la calidad. En estricto rigor, el sistema de puntuacin de la gua debiera considerartres tipos de puntacin, una con valor positivo para medir la presencia o intensidad de lapresencia de las prcticas de calidad, una con valor cero para medir la ausencia de lasprcticas de calidad o que atentan contra la calidad, y una con valor negativo para medirla presencia o intensidad de la presencia de las prcticas que atentan contra la calidad. Sinembargo, considerando la complejidad del instrumento y los desafos que se imponenpara el manejo estadstico de sus resultados en la aplicacin, el equipo consultor decidiestablecer en esta primera aplicacin solo valores positivos o iguales a cero para lapuntuacin de todas las prcticas. Con todo, resulta aconsejable que la Unidad deMediacin, asumiera la modalidad de valoracin negativa para la puntuacin de lasprcticas que atentan contra la calidad en la aplicacin futura de la gua de supervisin ensu versin final segn se propone en este informe en el caso del clculo para obtener elndice de calidad.

El Componente I: Legitimidad, que se evala mediante check list, por ser dicotmico,considera un puntaje de 1 en caso que marque la clave SI, que corresponde a lapresencia de la prctica, y 0 en caso que marque la clave NO, que corresponde a laausencia de la prctica, debiendo invertirse los valores segn la clave en los temsnegativos.

Los componentes II, III, IV, que se evalan por escala de apreciacin numrica, consideranun puntaje de 4 en caso que la clave marque (MF), 3 en caso que la clave marque (F), 2 encaso que la clave marque (O), 1 en caso que la clave marque (MO), y 0 en caso que la clavemarque (NP), debiendo invertirse los valores segn la clave en los tems negativos.

35

3.2.2. Evaluacin de la Calidad en Aplicacin de la Gua de Supervisin.

La gua de supervisin permite evaluar la calidad de un proceso de mediacin, entendidocomo el comportamiento de logro general frente a las prcticas de calidad descritas paracada componente, segn el puntaje obtenido en relacin al mximo posible. Este tipo demedicin describe el desempeo de cada componente y permite identificar brechas delogro para determinar requerimientos de mejora de las prcticas asociadas a cadacomponente de la calidad de la mediacin.

El nivel de logro de cada componente asociado a la metodologa gua de observacin, semide segn un ndice de logro porcentual que se obtiene dividiendo la sumatoria de laspuntuaciones obtenidas por el total de las puntuaciones mximas esperadas posiblesmultiplicado por cien, de acuerdo a la siguiente frmula.

X ObLCom __________ 100

X M

LCom = Logro por componenteOb = Puntaje Total ObtenidoM = Puntaje Total Mximo Posible

El ndice de calidad de la mediacin familiar se obtiene de la sumatoria los porcentajes delogro de cada componente y luego dividiendo por cuatro, segn la siguiente frmula.

Icmf = LComp1 LComp2 LComp3LComp4_________________________________

4

La medicin de la calidad permite valorar los procesos de mediacin familiar segn unestndar de mxima calidad posible considerando las situaciones de aplicacin en base auna escala de calidad.

El equipo consultor consider los resultados de la muestra en percentiles del ndice decalidad obtenido en el grupo ms representativo de la muestra, como la mediana ypromedio observado que es superior al 60%, estableciendo en base a estos criterios losvalores escalares para fijar los niveles de calidad. Estos son los siguientes:

36

Escala ndice de CalidadCalidad Muy Baja 0 % a 20%Calidad Baja 21% a 40%Calidad Media 41% a 60%Calidad Alta 61% a 80%Calidad Muy Alta 81% a 100%

4. IN FO RM AC I N DE L TR AB AJ O DE C AM PO DE LA AU DI TO RI A

La aplicacin de la metodologa ECAME a la muestra definitiva comprenda unperodo programado de cinco semanas aproximadamente, desde el da Martes 19 deAbril hasta el da Viernes 20 de Mayo del presente ao. La aplicacin se inici el da 20Abril en la ciudad de Santiago.

El trabajo de campo para la aplicacin de la muestra haba considerado como recursologstico el acceso de los supervisores va Internet a las agendas de mediacin en SIMEF enlnea que deben manejar los centros licitados, recurso ofrecido por la Unidad deMediacin a los consultores en una de las primeras reuniones de coordinacin del estudio.Sin embargo, la Unidad de Mediacin inform la semana del 18 de Abril haber constatadoque no todos los centros seleccionados en la muestra utilizaban SIMEF, razn por la cualhubo que requerir informacin de agendas directamente a los Centros, recibindose lainformacin necesaria para programar la visitas de auditora entre el 25 y el 27 de Abrilpor parte de la Unidad de Mediacin. Este hecho determin que el inicio de la aplicacinde la metodologa a la muestra tuviera una dificultad prctica producindose pocasobservaciones en la primera semana, ya que no se contaba con la informacin necesariapara programar las visitas de forma eficiente.

Una segunda dificultad que present la aplicacin de la muestra fue el alto nivel decasos frustrados por inasistencia de las partes que se presentan en los centros, hecho quealter la programacin de observaciones de los supervisores. Durante el proceso deaplicacin las supervisoras reportaron en varias oportunidades que en las visitasprogramadas no se efectuaron ninguna de las mediaciones que figuraban citadas enagenda, siendo una visita perdida desde el avance de la muestra. Tambin hubodificultades con los horarios y das de atencin de los Centros ya que stos no coincidancon la realidad del funcionamiento de los mismos. En algunos casos hubo que reemplazaro complementar los centros seleccionados en la muestra por otros de igual tamao ycategora, ya que los originales, durante gran parte del perodo de aplicacin no recibieronderivacin de casos, como ocurri con el Centro de Molina.

37

Las dificultades anteriormente descritas determinaron que la aplicacin del ECAME ala muestra se extendiera por un perodo de ocho semanas, concluyendo el da 10 deJunio, sin lograr el 100% de la muestra. En el anexo de este informe se da cuenta de laaplicacin de la metodologa ECAME, en las distintas zonas del pas considerando losCentros y fechas de aplicacin en un cuadro calendario. Con todo, las fechas de aplicacinde la metodologa que se consignan en el referido cuadro no reflejan las visitasefectivamente realizadas por los supervisores, ya que hubo visitas en las cuales no se logrobservar ningn proceso de mediacin. (Ver Anexo N 5)

En el sealado perodo se alcanz un total de 305 observaciones en sala, lo que equivaleal 96,21% de la muestra de 317 casos y se registraron un total de 5 casos de negativas deusuarios a la observacin, lo cual representa un 1,6% de rechazo a la auditora por partede los usuarios. En cuanto a la encuesta de percepcin de usuarios se logr un total de550 encuestas, y se registraron un total de 29 casos de negativas de usuarios a responderla encuesta, lo cual representa un 5,2% de rechazo a la encuesta por parte de losusuarios.

Las observaciones de los procesos de mediacin se realizaron en 26 centros, 24originalmente seleccionados, y 2 de reemplazo que tenan las mismas caractersticas quelos originales reemplazados.

38

En siguiente cuadro se muestran los centros en los cuales se aplic la muestra, cuyoscdigos se consignan por zona y ciudad.

Caracterizacin de los Procesos Observados

De los trescientos cinco procesos de mediacin observados 247 terminaron en la sesinobservada, lo que representa un 81%, y 58 continuaron despus de la sesin observada, loque representa un 19%. De los 247 procesos de mediacin que terminaron, 176 lohicieron con acuerdo, lo que representa el 71% y 71 casos sin acuerdo, lo que representael 29 %.

MacroZona

TamaoCentro Cdigo

Ciudad oComuna

Contratado

Norte

Pequeo

NP1 Arica Jessica Ivonne Olmos CarrascoNP2 Antofagasta CEFAM - Espinoza & Caballero Ca Ltda., hoy Caballero Baigorria Ca Ltda

Mediano

NM1 La SerenaMara Alejandra lvarez lvarez y Pamela Andrea Zarricueta Ortega Ltda oConsensus Ltda.

NM2 CoquimboMediacin y Asesorias Alejandro Canedo Astudillo Empresa Individual deResponsabilidad Ltda o Mediaciones San Andrs E.I.R.L.

Grande NG1Iquique Corporacin Privada para el desarrollo de la Universidad Arturo Prat -

CordunapNG2 Antofagasta Centro de Mediacin y Asesora Integral Ltda.

Centro

Pequeo

CP1 La Ligua Ana Mara Parentini Das LpesCP2 Puente Alto Miguel ngel Domnguez Warrington

CPR2 Puente AltoCentro de Mediacin de Registro Privado de Mediadores S.A.(ReemplazoCP2)

CP3 Rengo Hugo Cesar Meza Domnguez

Mediano

CM1 Quilpu Hernndez, Prez, Pizarro Ltda. o Mediaciones Familiares Ltda.CM2 Santiago Sociedad Consultora y Gestin Manquehue LtdaCM3 Rancagua Pamela Fernndez Daz Centro de Mediacin Familiar E.I.R.L.

GrandeCG1 Valparaso

Centro de Mediacin y Capacitacin Espinosa y Osorio Ltda o MediacinHumanista Ltda.

CG2 Recoleta Piddo Ossandon Montiglio y Compaa S.A.

CG3SantiagoCentro Mediacin Integral SPA

Sur

Pequeo

SP1 MolinaCentro de Mediacin, Capacitacin y Asesora Integral Origenes ConsultoresLtda

SPR1 Molina Osvaldo Domnguez Covarrubias ( Reemplazo SP1)SP2 Licantn Osvaldo Domnguez CovarrubiasSP3 Temuco Sociedad Comercial Enfoques para el Desarrollo Ltda.SP4 Pitrufquen Universidad Catolica de TemucoSP5 Puerto Varas Gabriela Carolina Carrillo Barrera

Mediano

SM1 Puerto Montt Yasna Eugenia Yanina Vejar HerrerosSM2 Chilln Sociedad de Asesoras Profesionales y Resolucin de Conflictos Ltda

SM3 TalcaCentro de Mediacin de Conflictos Familiares Barrueto y Rocamora Ltda. oCentro de Mediacin Participa Ltda.