Cómo medir la eficacia de la comunicación científica

Los indicadores de rendimiento (KPIs) al servicio de la medición de impacto de un proyecto

Manuel Gértrudix Barrio 

¿Sobre qué escribimos?

por | Sep 12, 2019

Las convocatorias de proyectos de investigación requieren que estos definan el impacto que tendrán sus planes de comunicación y divulgación. Medir la eficacia supone establecer, desde el diseño inicial, los indicadores que permitirán conocer en qué medida se cumplen los objetivos previstos. Los KPI (Key Prformance Indicator) permiten medir los resultados, identificar los elementos clave en su rendimiento, y tomar decisiones informadas sobre el desarrollo de las acciones de comunicación.

Definir indicadores para orientar el logro de los objetivos

Las convocatorias de proyectos ponen cada vez más empeño en que se describan de forma precisa los resultados y el impacto de la comunicación del proyecto para marcar la importancia que, desde su mismo diseño, tiene comprender este desde una dimensión 360º, considerando todos los públicos que forman parte del modelo de la cuádruple hélice de la innovación (Carayannis & Campbell, 2019).

Conocer la eficacia que tienen las acciones de comunicación científica, requiere, por tanto, definir una estrategia a través de la cuál se establezcan los mecanismos necesarios para saber en qué medida los objetivos planteados se logran, de forma que se pueda evaluar el desempeño real de las acciones llevadas a cabo, y corregirlas en su caso.

Uno de los instrumentos más habituales para hacerlo son los denominados KPI (Key Performance Indicator) que permiten evaluar el logro de los objetivos definidos en el proyecto. Los indicadores de rendimiento facilitan, mediante el uso de métricas cuantitativas (Bauer, 2004), evaluar cómo influyen las diferentes actividades en los resultados que se han obtenido, y de qué manera estas han incrementado o deteriorando los objetivos que se perseguían (IBM, 2017). La definición de estos indicadores sirve, además, para que, desde el inicio, todos los investigadores y colaboradores que participan en el proyecto conozcan y compartan la estrategia perseguida, lo que ayudará a que se sumen a ella y contribuyan al logro de los mismos objetivos colectivos.

Cómo definir nuestros indicadores

Establecer indicadores, y definir en ellos un valor esperado, nos acerca a conocer el ROI (Return of Investment), el retorno de la inversión del proyecto, y poder comunicarlo socialmente. Más allá del valor puramente cuantitativo que podamos asociar al ROI, lo cierto es que este puede incluir cualquier beneficio al proyecto, lo que incluye también datos subjetivos relacionados con el proyecto (Phillips, 1997). En el caso de los proyectos de investigación, y de forma concreta en sus planes de difusión y divulgación, el ROI debe estar asociado a todos aquellos otros elementos que generan valor y aportan beneficios medibles al proyecto, como el nivel de conocimiento de la acción, la participación de los agentes involucrados, la aplicabilidad del conocimiento obtenido, el nivel de interés generado, etc.

Actualmente existen diferentes modelos para la elaboración de indicadores de rendimiento, como el establecido por Parmenter (2015) que se desarrolla a través de siete niveles. Pero probablemente sea la metodología del Instituto ROI (2018) la que resulta más útil para la medición del retorno de inversión de un plan de comunicación de un proyecto competitivo de investigación. Esta establece cuatro grandes categorías: Reacción, aprendizaje, aplicación e impacto, y que se desarrollan en una secuencia de cuatro bloques:

 

  1. Evaluación del plan. Se desarrollan los objetivos que queremos alcanzar y, sobre estos, se establece el plan de evaluación y la forma de obtener y analizar los datos para hacerlo.
  2. Obtención de datos. Se definen los instrumentos de recogida de datos y se colectan estos en función de dichos instrumentos.
  3. Análisis de los datos. Se analizan los datos en el contexto del plan de comunicación del proyecto, se convierten los datos en métricas objetivables, y se calcula el ROI.
  4. Informar. Los resultados se trasladan a un informe que recoge tanto los beneficios obtenidos como los elementos de mejora para futuras fases del proyecto o la realización de nuevos.
Loading...

Loading...

Pasos para medir el ROI del plan de comunicación de un proyecto. Fuente: Elaboración propia a partir de datos del Instituto ROI.

Cómo seleccionar los indicadores

Es habitual encontrarse con diferentes fórmulas para referirse a los indicadores de rendimiento, como KPI, PI, lead indicator, lag indicator, metric, index, key figure(Barr, 2008), por lo que esta misma diversidad hace que el número de opciones que nos pueden servir de referencia para medir una misma actuación sea muy diversa. En función de los elementos de medición, Badawy et al (2016), categorizan estos en: KRIs (Key result indicators, que señala lo que se ha conseguido), RIs (Result indicators, que indica lo que se ha hecho), Pis (Performance indicators, revela lo que se debe hacer), y KPIs (que establece lo que debe hacerse para incrementar el rendimiento).

Aterrizar este modelo en el seguimiento del impacto de un plan de comunicación es fundamental para que realmente nos resulten de utilidad. En función de dónde nos interese poner el acento, y qué nos interese medir, podemos utilizar (Vaisman & Zimányi, 2014):

  • Indicadores de carácter temporal, como los Leading KPIs, Coincident KPIs o Lagging KPIs
  • Indicadores cuantitativos o cualitativos, como los Quantitative KPIs o Qualitative KPIs)
  • Procesuales, tanto de entrada como de salida, tales como los Input KPIs u Output KPIs
  • Operacionales o estratégicos, como los Operational KPIs o Strategic KPIs
  • De calidad, contexto, etc., como los Quality KPIs o Context KPIs).

La combinación de indicadores que utilicemos deberá ser lo más exhaustiva posible y resultar adecuada para que el seguimiento del proyecto y de sus acciones de comunicación, divulgación y difusión, de forma que permitan tomar decisiones informadas y corregir su orientación donde sea necesario.

¿Qué son los KPI’s? Fuente: Vitamin Business Intelligence.
Referencias

¿Sobre qué escribimos?

Te puede interesar

Ciencia y sociedad en la Unión Europea II

Ciencia y sociedad en la Unión Europea II

Desde 1977 los Eurobarómetros especiales sobre ciencia y tecnología, realizados por las instituciones europeas, muestran la evolución de la agenda temática de la investigación científica y tecnológica en la UE y la importancia que otorgan los europeos a las diferentes...

Cómo medir la eficacia de la comunicación científica II

Cómo medir la eficacia de la comunicación científica II

 El uso de identificadores persistentes se ha generalizado en los procesos de difusión científica tanto para autores (ORCID, WOS ResearchID…) como para artículos (DOI). ¿Pero sabes cuáles son los identificadores de las agencias y organizaciones que debes usar para...

La política científica en la construcción de la UE

La política científica en la construcción de la UE

 Desde los orígenes de la actual Unión Europea (UE), la investigación científica se ha consolidado como uno de los elementos fundamentales de su construcción. Ha favorecido la colaboración entre los Estados miembros, al servicio, primero, de las políticas comunes...

En nuestro blog

H2020. La adaptación de la información científica a las RRSS

Continuando la línea iniciada en entradas anteriores, vamos a tratar de conocer cuáles son las principales pautas a seguir para comunicar los resultados de los proyectos de investigación competitivos en las diferentes redes...

Instagram y la difusión científica ¿Un camino a seguir para los investigadores?

 Difundir los resultados de la investigación científica es una tarea compleja cuando se aborda desde determinados contextos, y sin duda arriesgada cuando se trata de estructurarlos alrededor de un mensaje que cuando menos, debe...

¿Es posible una verdadera narrativa científica desde una efectiva divulgación audiovisual?

La capacidad de contar de manera óptima nuestros proyectos científicos utilizando las diferentes plataformas digitales audiovisuales para su difusión, y empleando estrategias narrativas aplicadas al método científico puede...

IMV Paper, una alternativa interactiva para comunicar los resultados de tu investigación

La mayor satisfacción para cualquier investigador es que su trabajo sea leído. En muchas ocasiones escribir un paper no implica que nuestro trabajo llegue a sus destinatarios. El IMVpaper incrementa las posibilidades de que el...

Qué comunicamos…cuando comunicamos sobre ciencia

Dice Pol Morales en la presentación del libro Los públicos de la ciencia que “Las encuestas de opinión suelen reflejar una predilección de los ciudadanos por los temas científicos. Los datos de audiencia, en cambio, parecen...
Este blog está financiado por el proyecto Comciencia. Comunicación eficaz, eficiente y responsable para proyectos de investigación competitivos (CSO2017-82875-C2-1-R, Ministerio de Economía, Industria y Competitividad (MINECO), la Agencia Estatal de Investigación (AEI) y el Fondo Europeo de Desarrollo Regional (FEDER).
Share This