Cómo medir la eficacia de la comunicación científica

Los indicadores de rendimiento (KPIs) al servicio de la medición de impacto de un proyecto

Manuel Gértrudix Barrio 

por Manuel Gértrudix Barrio | Sep 12, 2019

Las convocatorias de proyectos de investigación requieren que estos definan el impacto que tendrán sus planes de comunicación y divulgación. Medir la eficacia supone establecer, desde el diseño inicial, los indicadores que permitirán conocer en qué medida se cumplen los objetivos previstos. Los KPI (Key Prformance Indicator) permiten medir los resultados, identificar los elementos clave en su rendimiento, y tomar decisiones informadas sobre el desarrollo de las acciones de comunicación.

Definir indicadores para orientar el logro de los objetivos

Las convocatorias de proyectos ponen cada vez más empeño en que se describan de forma precisa los resultados y el impacto de la comunicación del proyecto para marcar la importancia que, desde su mismo diseño, tiene comprender este desde una dimensión 360º, considerando todos los públicos que forman parte del modelo de la cuádruple hélice de la innovación (Carayannis & Campbell, 2019).

Conocer la eficacia que tienen las acciones de comunicación científica, requiere, por tanto, definir una estrategia a través de la cuál se establezcan los mecanismos necesarios para saber en qué medida los objetivos planteados se logran, de forma que se pueda evaluar el desempeño real de las acciones llevadas a cabo, y corregirlas en su caso.

Uno de los instrumentos más habituales para hacerlo son los denominados KPI (Key Performance Indicator) que permiten evaluar el logro de los objetivos definidos en el proyecto. Los indicadores de rendimiento facilitan, mediante el uso de métricas cuantitativas (Bauer, 2004), evaluar cómo influyen las diferentes actividades en los resultados que se han obtenido, y de qué manera estas han incrementado o deteriorando los objetivos que se perseguían (IBM, 2017). La definición de estos indicadores sirve, además, para que, desde el inicio, todos los investigadores y colaboradores que participan en el proyecto conozcan y compartan la estrategia perseguida, lo que ayudará a que se sumen a ella y contribuyan al logro de los mismos objetivos colectivos.

Cómo definir nuestros indicadores

Establecer indicadores, y definir en ellos un valor esperado, nos acerca a conocer el ROI (Return of Investment), el retorno de la inversión del proyecto, y poder comunicarlo socialmente. Más allá del valor puramente cuantitativo que podamos asociar al ROI, lo cierto es que este puede incluir cualquier beneficio al proyecto, lo que incluye también datos subjetivos relacionados con el proyecto (Phillips, 1997). En el caso de los proyectos de investigación, y de forma concreta en sus planes de difusión y divulgación, el ROI debe estar asociado a todos aquellos otros elementos que generan valor y aportan beneficios medibles al proyecto, como el nivel de conocimiento de la acción, la participación de los agentes involucrados, la aplicabilidad del conocimiento obtenido, el nivel de interés generado, etc.

Actualmente existen diferentes modelos para la elaboración de indicadores de rendimiento, como el establecido por Parmenter (2015) que se desarrolla a través de siete niveles. Pero probablemente sea la metodología del Instituto ROI (2018) la que resulta más útil para la medición del retorno de inversión de un plan de comunicación de un proyecto competitivo de investigación. Esta establece cuatro grandes categorías: Reacción, aprendizaje, aplicación e impacto, y que se desarrollan en una secuencia de cuatro bloques:

 

  1. Evaluación del plan. Se desarrollan los objetivos que queremos alcanzar y, sobre estos, se establece el plan de evaluación y la forma de obtener y analizar los datos para hacerlo.
  2. Obtención de datos. Se definen los instrumentos de recogida de datos y se colectan estos en función de dichos instrumentos.
  3. Análisis de los datos. Se analizan los datos en el contexto del plan de comunicación del proyecto, se convierten los datos en métricas objetivables, y se calcula el ROI.
  4. Informar. Los resultados se trasladan a un informe que recoge tanto los beneficios obtenidos como los elementos de mejora para futuras fases del proyecto o la realización de nuevos.
Loading...

Loading...

Pasos para medir el ROI del plan de comunicación de un proyecto. Fuente: Elaboración propia a partir de datos del Instituto ROI.

Cómo seleccionar los indicadores

Es habitual encontrarse con diferentes fórmulas para referirse a los indicadores de rendimiento, como KPI, PI, lead indicator, lag indicator, metric, index, key figure(Barr, 2008), por lo que esta misma diversidad hace que el número de opciones que nos pueden servir de referencia para medir una misma actuación sea muy diversa. En función de los elementos de medición, Badawy et al (2016), categorizan estos en: KRIs (Key result indicators, que señala lo que se ha conseguido), RIs (Result indicators, que indica lo que se ha hecho), Pis (Performance indicators, revela lo que se debe hacer), y KPIs (que establece lo que debe hacerse para incrementar el rendimiento).

Aterrizar este modelo en el seguimiento del impacto de un plan de comunicación es fundamental para que realmente nos resulten de utilidad. En función de dónde nos interese poner el acento, y qué nos interese medir, podemos utilizar (Vaisman & Zimányi, 2014):

  • Indicadores de carácter temporal, como los Leading KPIs, Coincident KPIs o Lagging KPIs
  • Indicadores cuantitativos o cualitativos, como los Quantitative KPIs o Qualitative KPIs)
  • Procesuales, tanto de entrada como de salida, tales como los Input KPIs u Output KPIs
  • Operacionales o estratégicos, como los Operational KPIs o Strategic KPIs
  • De calidad, contexto, etc., como los Quality KPIs o Context KPIs).

La combinación de indicadores que utilicemos deberá ser lo más exhaustiva posible y resultar adecuada para que el seguimiento del proyecto y de sus acciones de comunicación, divulgación y difusión, de forma que permitan tomar decisiones informadas y corregir su orientación donde sea necesario.

¿Qué son los KPI’s? Fuente: Vitamin Business Intelligence.
Referencias

Te puede interesar

Ciencia y sociedad en la Unión Europea II

Ciencia y sociedad en la Unión Europea II

Desde 1977 los Eurobarómetros especiales sobre ciencia y tecnología, realizados por las instituciones europeas, muestran la evolución de la agenda temática de la investigación científica y tecnológica en la UE y la importancia que otorgan los europeos a las diferentes...

Cómo medir la eficacia de la comunicación científica II

Cómo medir la eficacia de la comunicación científica II

 El uso de identificadores persistentes se ha generalizado en los procesos de difusión científica tanto para autores (ORCID, WOS ResearchID…) como para artículos (DOI). ¿Pero sabes cuáles son los identificadores de las agencias y organizaciones que debes usar para...

La política científica en la construcción de la UE

La política científica en la construcción de la UE

 Desde los orígenes de la actual Unión Europea (UE), la investigación científica se ha consolidado como uno de los elementos fundamentales de su construcción. Ha favorecido la colaboración entre los Estados miembros, al servicio, primero, de las políticas comunes...

En nuestro blog

Comunicación del método científico y la alfabetización científica

El trabajo del método científico y la alfabetización científica deberían constituirse como prácticas frecuentes en las aulas. Prácticas cuya comunicación, ineludible, convendría quedar reflejada en publicaciones científicas. Un...

¿De verdad sirven las redes sociales para comunicar Ciencia?

Según la VIII encuesta de percepción social de la Ciencia publicada por la FECYT, un 43,6% de los españoles se informa ya sobre Ciencia y Tecnología a través de las redes sociales, lo que representa una extraordinaria...

La educación como inicio del camino hacia una economía circular

La educación es uno de los principales motores de cambio en la conducta de las personas. Parece evidente la necesidad de que se produzca un acercamiento a la economía circular desde el ámbito educativo. De este modo, se logrará...

Instagram y la difusión científica ¿Un camino a seguir para los investigadores?

 Difundir los resultados de la investigación científica es una tarea compleja cuando se aborda desde determinados contextos, y sin duda arriesgada cuando se trata de estructurarlos alrededor de un mensaje que cuando menos, debe...

La ética de la comunicación científica II

Este post continúa el recorrido del anterior, desde una perspectiva genérica pero reflexiva, sobre cuál es el sentido de la ciencia, y por qué la ética es una parte fundamental de la misma. En este caso, abordamos la figura del...
Este blog está financiado por el proyecto Comciencia. Comunicación eficaz, eficiente y responsable para proyectos de investigación competitivos (CSO2017-82875-C2-1-R, Ministerio de Economía, Industria y Competitividad (MINECO), la Agencia Estatal de Investigación (AEI) y el Fondo Europeo de Desarrollo Regional (FEDER).