InicioMetodología revisada

De la evidencia
a una decisión explicable.

Un proceso diseñado para que cada conclusión pueda relacionarse con pruebas, criterios y una persona responsable.

Propuesta de refuerzo metodológico. Los pesos y umbrales publicados se mantienen. Las nuevas reglas operativas y evidencias de esta versión están pendientes de validación por FUNTESO; no se aplican retroactivamente a las entidades del directorio.

Seis etapas para evaluar con trazabilidad.

01

Definir el alcance

Identificar la solución, su versión, finalidad, población destinataria, territorio y periodo. Acordar qué se evaluará y qué queda fuera.

02

Reunir las evidencias

Recibir documentación y contrastar fuentes. Registrar fecha, método, muestra, procedencia y limitaciones; proteger la información confidencial.

03

Puntuar con una rúbrica

Asignar pruebas a cada criterio, justificar cada nota y aplicar los pesos publicados. Documentar dudas y solicitar subsanación cuando falten pruebas.

04

Revisar y resolver

Una persona responsable emite una decisión motivada con segunda revisión. Declarar conflictos de interés y separar la decisión técnica de la captación comercial.

05

Publicar el resultado

Si procede la concesión, emitir un registro con alcance, versión del método, fechas, estado y síntesis de evidencias. No divulgar datos protegidos.

06

Revisar y mejorar

Proponer revisión a los 12 meses y ante incidencias relevantes. Registrar cambios y habilitar un recurso ante una persona distinta de quien decidió inicialmente.

Reglas de decisión · Propuesta operativa

Cómo se construye el resultado.

La puntuación técnica, sobre 100

30% impacto + 20% evidencia + 15% accesibilidad + 10% adopción + 10% ética + 10% usabilidad + 5% continuidad.

Cada nota se expresa sobre 100. Los pesos suman 100%.
75/100

Mínimo global publicado

60/100

Mínimo en accesibilidad

60/100

Mínimo en ética y privacidad

50/100

Mínimo en evidencia

Los cuatro umbrales anteriores son los publicados. La revisión propone además un mínimo de 60 en impacto y condiciones excluyentes ante deficiencias graves acreditadas.

N/D: no demostrado

Cuando falten pruebas suficientes, el criterio se registraría como N/D y aportaría cero. No se redistribuye su peso ni se añade otra penalización. La ausencia de prueba no significa por sí sola incumplimiento demostrado.

ISENS: contexto social separado

ISENS recoge la lectura de sensibilidad y relevancia social: a qué necesidad responde la solución, a quién beneficia y qué barreras ayuda a reducir. Se propone documentar esa lectura de forma cualitativa, con evidencias y límites. No tiene una puntuación numérica definida en esta revisión: la visibilidad, notoriedad y efecto red no añaden puntos a la nota técnica ni compensan mínimos incumplidos.

Riesgos críticos

Las deficiencias graves acreditadas en seguridad, privacidad o accesibilidad aplicable impedirían la concesión hasta su resolución, aunque la puntuación media superase el umbral.

Responsabilidad e independencia

Decisión humana documentada, gestión de conflictos y segunda revisión separada de la captación comercial. La IA puede ordenar evidencias, pero no sustituye la responsabilidad de la resolución.

Rúbrica propuesta

La nota debe tener una explicación.

Estos niveles orientan el diseño de indicadores por criterio y sector. Deben calibrarse con expedientes piloto antes de aplicarlos. Los valores intermedios se obtendrían mediante los indicadores definidos en el desarrollo propuesto y exigirían una justificación documentada.

0

Sin soporte

No hay pruebas suficientes para valorar el criterio.

25

Parcial

Documentación incompleta o indicios todavía limitados.

50

Implantado

Uso demostrado con resultados o comprobaciones limitados.

75

Medido

Resultados o controles trazables en el alcance definido.

100

Contrastado

Consistencia, seguimiento y contraste independiente.

Ejemplo ilustrativo de cálculo

Con notas de 80, 80, 70, 75, 80, 75 y 70, respectivamente, la media ponderada es 77 puntos. Cumpliría los umbrales numéricos publicados. La concesión requeriría además resolver las comprobaciones y condiciones aplicables: una media favorable no sustituye la decisión técnica.

Cómo se puntúa · Desarrollo propuesto

Primero cada criterio.
Después, su peso en el total.

01

Justificar la nota de cada criterio

La rúbrica propone niveles de 0, 25, 50, 75 y 100. Para hacer reproducible una nota intermedia, se propone definir cinco indicadores de igual peso en cada criterio y calcular su media.

Ejemplo de impacto: (100 + 75 + 75 + 75 + 75) ÷ 5 = 80. Los indicadores y sus pruebas deben aprobarse y calibrarse por sector antes de aplicar esta regla.

02

Aplicar el peso publicado

La nota de cada criterio se multiplica por su peso. Impacto pesa un 30%: una nota de 80 aporta 80 × 0,30 = 24 puntos al resultado global.

Se suman las siete aportaciones y se comprueban los mínimos y las condiciones críticas. ISENS se describe por separado y no entra en esta suma.

Ejemplo ilustrativo; no corresponde a una entidad evaluada
CriterioNota /100PesoAportación
Impacto social8030%24
Evidencia8020%16
Accesibilidad7015%10,5
Adopción7510%7,5
Ética y privacidad8010%8
Usabilidad7510%7,5
Continuidad705%3,5
Resultado técnico77 /100

Nota y umbral son cosas distintas. 75 es el mínimo global publicado; 60 y 50 son mínimos de criterios críticos. No son los pesos ni los niveles de la rúbrica.

Seguimiento y servicio anual · Propuesta

La confianza necesita continuidad.

Qué debe recibir la entidad

  • Informe de evaluación motivado.
  • Prioridades de mejora y límites del alcance.
  • Registro verificable y distintivo si se concede.
  • Revisión anual y atención de incidencias.

Qué debe quedar por escrito

  • Alcance, entregables, precio y plazos.
  • Vigencia y condiciones de renovación.
  • Uso del distintivo, suspensión y retirada.
  • Reclamaciones, responsables y recurso.

La cuota remunera servicios de evaluación y seguimiento; no garantiza una concesión ni una renovación. Patrocinio, comunicación y participación en el Observatorio deben mantenerse separados de la decisión técnica.

Antes de su aplicación: aprobar el reglamento versionado, calibrar las rúbricas, designar responsables y definir plazos de subsanación y recurso. Las certificaciones existentes conservan las condiciones bajo las que se otorgaron.

Consultar alcance y condiciones