Using AI to Make Literature Reviews Smarter and More Efficient

Marin-Garcia, J. A., Martinez-Tomas, J., Juarez-Tarraga, A., & Santandreu-Mascarell, C. (2024). Protocol paper: From Chaos to Order. Augmenting Manual Article Screening with Sentence Transformers in Management Systematic Reviews. WPOM-Working Papers on Operations Management15, 172–208. https://doi.org/10.4995/wpom.22282

What is it about?

This protocol paper describes a new method to help researchers screen and classify scientific articles more efficiently during systematic literature reviews. The authors propose using AI language models called «sentence transformers» to automatically analyze article titles and abstracts, comparing them to the review’s topic of interest. This helps researchers prioritize which articles to review first, rather than working through them randomly. The method was tested with 14 different AI models on a small set of articles about workplace management practices.

Featured Image

Why is it important?

As scientific publications grow exponentially, researchers struggle to efficiently review all relevant literature. This method could: * Save significant time in the screening process * Reduce researcher fatigue and potential bias * Make systematic reviews more accessible to researchers with limited resources * Help democratize access to advanced AI tools for academic research * Support evidence-based management practices by making literature reviews more feasible The approach is particularly valuable because it’s designed to complement rather than replace human judgment, and can be implemented using free, accessible tools.

Perspectives

This protocol represents an innovative bridge between cutting-edge AI technology and traditional academic research methods. The authors’ commitment to making the tool freely available and easy to use for researchers worldwide, regardless of technical expertise or resources, is particularly noteworthy. The pilot results suggest promising potential, though more testing is needed to validate the approach at larger scales.

Professor Juan A. Marin-Garcia
Universitat Politecnica de Valencia

Read the Original

This page is a summary of: Protocol paper: From Chaos to Order. Augmenting Manual Article Screening with Sentence Transformers in Management Systematic Reviews, WPOM – Working Papers on Operations Management, December 2024, Universitat Politecnica de Valencia,
DOI: 10.4995/wpom.22282.

Visitas: 1

A Three-Step Publishing Model to Support Evidence-Based Management

Marin-Garcia, J. A. (2021). Three-stage publishing to support evidence-based management practice. WPOM-Working Papers on Operations Management12(2), 56–95. https://doi.org/10.4995/wpom.11755 

 

What is it about?

This paper proposes a new model for publishing scientific research in business and management that aims to make studies more transparent and useful for practitioners. The model includes three key stages: 1) Publishing the research protocol/plan before starting, 2) Publishing the collected data, and 3) Publishing the final results and conclusions. This approach helps ensure research is well-planned, data is accessible for verification, and findings can be confidently applied in real-world management practice.

Featured Image

Why is it important?

Currently, there’s a big gap between management research and practice – many research findings never get implemented by actual managers. This model helps bridge that gap by: * Making the research process more transparent and trustworthy * Ensuring data quality through peer review at each stage * Making it easier for practitioners to access and understand findings * Encouraging more systematic, well-planned studies * Supporting evidence-based management decisions The model could significantly improve how management research is conducted and shared, ultimately making it more valuable for both academics and practitioners.

Perspectives

This innovative proposal challenges traditional publishing approaches in management research. While similar models exist in medicine and other fields, this is one of the first attempts to systematically apply such rigorous standards to business research. This offers a practical solution to improve research quality and impact. The detailed guidelines and examples make this a valuable roadmap for researchers wanting to conduct more transparent, reproducible studies.

Professor Juan A. Marin-Garcia
Universitat Politecnica de Valencia

Visitas: 1

¿Cómo afecta el compromiso laboral a las emociones diarias?

En una encuesta reciente de GALLUP,durante el tercer trimestre 2024 en USA, se preguntaba si los participantes experimentaron emociones como estrés, preocupación, enojo o tristeza durante gran parte del día anterior y también con su nivel de «compromiso» (le llaman engagement y la verdad es que es una mezcla o potpurrí de indicadores que no son exactamente ni compromiso, ni implicación, ni ninguna medida específica)

Esta gráfica muestra cómo el promedio de la experiencia de emociones negativas diarias (estrés, preocupación, tristeza y enojo) es diferentes al agrupar a las personas participantes por el nivel de compromiso de los empleados en tres categorías: activamente desconectados-as, no comprometidos-as y comprometidos-as.

Conclusión:

Aparentemente, el compromiso laboral está vinculado a una reducción en las emociones negativas. Los empleados comprometidos muestran niveles mucho más bajos de estrés, preocupación, tristeza y enojo, mientras que los activamente desconectados sufren con mayor intensidad estas emociones negativas. Pero la verdad es que sólo con esta gráfica no sabemos cómo afecta, ni si el compromiso es la causa o la consecuencia de las emociones. Lo que parece, es que tienen alguna relación entre si (o que ambas realmente no tienen relación, pero si la tienen con una tercera variable, correlación espuria). 

Visitas: 1

La implicación y las emociones negativas en USA ¿Spain is different?

En una encuesta reciente de GALLUP, se preguntaba si los participantes experimentaron emociones como estrés, preocupación, enojo o tristeza durante gran parte del día anterior.

  1. El estrés es la emoción negativa más reportada y ha mostrado una tendencia ascendente desde 2008. Aumentó en 2020 (posiblemente debido a la pandemia de COVID-19) y aunque se ha reducido, se mantiene en niveles superiores a pre-pandemia
  2. La preocupación se mantuvo relativamente constante hasta 2020, cuando también aumentó bruscamente. Posteriormente, comenzó a disminuir ligeramente, estabilizándose alrededor del 40% en 2024 (valor superior a pre-pandemia).

  3. La tristeza tuvo un aumento gradual hasta 2020 y luego disminuyó ligeramente. Actualmente se encuentra en 22%.

  4. El enojo es la emoción menos frecuente entre las cuatro, con valores cercanos al 18% en 2024. Ha mostrado una tendencia relativamente estable con leves fluctuaciones.

Conclusión:

La gráfica destaca cómo las emociones negativas (particularmente el estrés y la preocupación) aumentaron durante períodos críticos como la pandemia, aunque algunas han disminuido desde entonces. Sin embargo, el estrés sigue siendo un factor presente en la vida diaria de los empleados en Estados Unidos.

¿Qué valores tendremos para estos indicadores en España? ¿Será una tendencia parecida? Pero, sobre todo, ¿seremos capaces de identificar las causas y no solo de describir un fenómeno?

Visitas: 1

Esto si es transformación digital. Quinquenios docentes universidad

Os cuento como era el proceso de solicitud de quinquenio la última vez que lo pedí y la comparación con la actual y ya me decís si encontráis alguna diferencia.

Proceso anterior:

En diciembre recibo un correo genérico que indica que se abre el plazo de solicitud de quinquenios para las personas que cumplan las condiciones de pedirlo. Se proporciona un enlace con las instrucciones para solicitarlo.

Voy a la pagina web de la universidad, busco el apartado de informacion personal y luego voy a meritos docentes y compruebo la fecha del ultimo quinquenio concedido. Si aun no me toca, el proceso acaba ahí.

Si el ultimo me lo concedieron hace 5 años, entonces vuelvo a la página de instrucciones, me descargo un formulario word con la plantilla en blanco de la instacnia al rector-a, y relleno todos los campos: nombre, apellidos, dni, departamento, centro, cuerpo docente actual, periodo anterior evaluado (inicio, fin y si fue evaluado favorable), periodo/tramo que solicito evaluar (inicio y fin), cuerpo docente en el que solicito el tramo,  volver a poner la fecha de inicio y fin del tramo que solicito despues de la frase «por todo lo expuesto, solicito….», fecha, nombre de firmante). Recopilo la informacion para el anexo en papel que tiene acompañar la solicitud: hoja de servicios (que hay que pedir al servicio de RRHH por correo electronico propordionando los datos de nombre y apellidos, y que en una par de días puedes pasar a recoger por el servicio en su horario de atencion en los dias laborable -el servicio está a 20 minutos andando desde mi despacho- ); justificacion de meritos anteriores y fecha de expiracion (sirve una captura de pantalla de la pagina web de la UPV).

Imprimo y firmo a mano la solicitud por duplicado.

En un dia laborable, en horario de ventanilla del registro general de la universidad (a unos 20 minutos andando de mi despacho), hago la cola pertinente y registro mi solicitud (me quedo una copia)

Curiosamente todos estos datos los tiene mi universidad en sus bases de datos, de hecho he ido consultando en la pagina web, en diferentes apartados de la intranet, la información que no sabía de memoria o no tenía la certeza de ser correcta.

Proceso actual:

En diciembre recibo un correo genérico que indica que se abre el plazo de solicitud de quinquenios y soy una de las personas que cumplena las condiciones para pedirlo.

Se me proporciona un enlace para iniciar el proceso con mi usuario registrado en la «intranet». Pulso el enlace y luego 5 clicks en el botón siguiente en cada una de las 5 pantallas donde se muestra la informacion percargada (mi nombre, dni, adscripcion, cuerpo; periodo anterior evaluado; periodo que solicito evaluar; el valor promedio de mis encuestas) y que verifico que es correcta. Tras el 5º click, el proceso ha finalizado y descargo el justificante. Son las 00.45 de un miércoles ycualquiera.

Esto es solo como profesor-a. En el «otro lado» tambien ha habido mejoras. Por ejemplo antes, se recogia la informacion de cada solicitud, se generaba «a mano» la resolución favorable (cuando procedía) de cada una de ellas, se imprimía, el rector-a lo firmaba a mano (cada una de ellas), se metia en un sobre y se mandaba por correo interno a cada una de las personas solicitantes.

Ahora se genera un PDF que se firma en una «bandeja de firmas» electrónica y se notifica automáticamente por correo electrónico

Visitas: 43