Algorithmic Justice and Human Rights: Structural Risks and Emerging Regulatory Frameworks
DOI:
https://doi.org/10.17561/tahrj.v26.9985Keywords:
Artificial intelligence, Judge Hermes, Human rights, Algorithmic governance, Data protection, Informational self-determination, Human-in-the-loopAbstract
The incorporation of artificial intelligence (AI), particularly large language models (LLMs), into judicial processes poses unprecedented challenges for the protection of human rights, especially regarding privacy, informational self-determination, and algorithmic transparency. This article introduces the concept of the “Hermes judge” as a normative and interpretative model capable of articulating the technical rationality of automated systems with the principles of the constitutional rule of law. Through a critical analysis of international regulatory frameworks—such as the GDPR, the European Union’s AI Act, and the FAIR principles—regulatory gaps, structural biases, and decision-making opacity are identified. In light of these risks, ethical and regulatory guidelines are proposed to ensure that AI functions as a cognitive aid, supporting tasks such as argument generation, precedent identification, and case summarization, without replacing hermeneutic judgment or compromising human dignity. From a functional perspective, Judge Hermes critically mediates between automated decision-making and fundamental principles of law, safeguarding judicial deliberation and the human dimension of justice.
Downloads
References
ADINOLFI, G. (2007). ‘Autodeterminación informativa, consideraciones acerca de un principio general y un derecho fundamental’, Cuestiones Constitucionales. Revista Mexicana de Derecho Constitucional, 1(17), pp. 1–29. Available at: https://doi.org/10.22201/iij.24484881e.2007.17.5807
AJDER, H., PATRINI, G., CAVALLI, F. and CULLEN, L. (2019). The State of Deepfakes: Landscape, Threats, and Impact. Amsterdam: Deeptrace. Available at: https://regmedia.co.uk/2019/10/08/deepfake_report.pdf
ALBERT-MÁRQUEZ, M. (2021). ‘Posthumanismo, inteligencia artificial y Derecho’, Persona y Derecho, 84, pp. 207–230. Available at: https://doi.org/10.15581/011.84.010 [Accessed: 22 september 2025]
ANGWIN, J., Larson, J., Mattu, S., & Kirchner, L. (2016, May 23). Machine bias. ProPublica. Available at: https://www.propublica.org/article/machine-bias-risk-assessments-in-criminal-sentencing [Accessed: 26 september 2025]
BARONA VILAR, S. (2024). ‘Justicia con algoritmos e Inteligencia Artificial, ¿acuerpando garantías y derechos procesales o liquidándolos?’, Derechos y Libertades: Revista de Filosofía del Derecho y Derechos Humanos, 51, pp. 83–115. Available at: https://doi.org/10.20318/dyl.2024.8584 [Accessed: 9 July 2025]
BAUMAN, Z. (2000). Modernidad líquida. Madrid: Fondo de Cultura Económica.
BBC (2016). Tay, la robot racista y xenófoba de Microsoft. Available at: https://www.bbc.com/mundo/noticias/2016/03/160325_tecnologia_microsoft_tay_bot_adolescente_inteligencia_artificial_racista_xenofoba_lb [Accessed: 13 June 2025].
BLÁZQUEZ RUIZ, F. J. (2022). ‘Riesgos para la privacidad en la aplicación de la inteligencia artificial al ámbito biosanitario. Implicaciones éticas y legales’, Anales de la Cátedra Francisco Suárez, (56), pp. 245-268. Available at: https://doi.org/10.30827/acfs.v56i.21677 [Accessed: 13 July 2025]
CÁCERES NIETO, E. (2024). ‘Reflexiones sobre la inteligencia artificial aplicada al derecho y el derecho de la inteligencia artificial: ¿Vamos hacia el mundo de Black Mirror?’, Revista del Posgrado en Derecho de la UNAM, 12(20), pp.75-118. Available at: https://doi.org/10.22201/ppd.26831783e.2024.20.419 [Accessed: 16 July 2025]
CÁMARA DE DIPUTADOS (2025). Iniciativa que reforma y adiciona diversas disposiciones de la Ley Federal de Telecomunicaciones y Radiodifusión y del Código Penal Federal, LXVI Legislatura. Available at: https://sil.gobernacion.gob.mx/Archivos/Documentos/2025/03/asun_4858151_20250319_1742510064.pdf [Accessed: 29 May 2025].
CENTRO LATINOAMERICANO DE ADMINISTRACIÓN PARA EL DESARROLLO. CLAD, (2023). Carta Iberoamericana de Inteligencia Artificial en la Administración Pública. pp. 13-15. Available at: https://rinedtep.edu.pa/server/api/core/bitstreams/e04dfadf-8fd9-45f8-b075-9fd70456c6db/content [Accessed: 22 May 2025].
CHOLLET, F. (2021). Deep Learning with Python, 2nd ed. New York: Manning Publications Co. LLC, pp. 1–7. Electronic version available at: https://sourestdeeds.github.io/pdf/Deep%20Learning%20with%20Python.pdf [Accessed: 1 June. 2025].
COECKELBERGH, M. (2021). Ética de la inteligencia artificial, translated by L. Álvarez Canga, 1st ed. Madrid: Cátedra, Colección Teorema. Available at: https://www.marcialpons.es/media/pdf/9788437642123.pdf [Accessed: 19 May 2025].
COMISIÓN EUROPEA (2019). Directrices Éticas para una Inteligencia Artificial Confiable, Grupo de Expertos de Alto Nivel sobre Inteligencia Artificial, Bruselas, April. Available at: https://digitalstrategy.ec.europa.eu/es/library/ethics-guidelines-trustworthy-ai [Accessed: 29 May 2025].
COMISIÓN EUROPEA (2020). Libro Blanco sobre la Inteligencia Artificial: un enfoque europeo hacia la excelencia y la confianza, Bruselas. Available at: https://eur-lex.europa.eu/legal-content/ES/TXT/?uri=CELEX%3A52020DC0065 [Accessed: 29 May. 2025].
COMISIÓN EUROPEA (2021). Propuesta de Reglamento del Parlamento Europeo y del Consejo por el que se establecen normas armonizadas en materia de inteligencia artificial (Ley de IA), Bruselas. Available at: https://eur-lex.europa.eu/legal-content/ES/TXT/?uri=CELEX:52021PC0206 [Accessed: 30 May. 2025].
CONSEJO DE LA JUDICATURA FEDERAL (2018). Criterios del Poder Judicial de la Federación en materia de protección de datos personales, 2nd ed. México: Suprema Corte de Justicia de la Nación. Available at: https://www.cjf.gob.mx/transparencia/resources/proteccionDatos/criteriosComiteTranparencia-13042023.pdf [Accessed: 22 May 2025].
CORTINA ORTS, A. (2019). ‘Ética de la inteligencia artificial’, Anales de la Real Academia de Ciencias Morales y Políticas, (96), pp. 379-394. Ministerio de Justicia. Available at: https://www.boe.es/biblioteca_juridica/anuarios_derecho/abrir_pdf.php?id=ANU-M-2019-10037900394 [Accessed: 13 May 2025].
DELGADILLO, A. and GONZÁLEZ, C. (2023). ‘Inteligencia artificial generativa: ¿qué es? ¿es un riesgo o ventaja?’, Revista Conecta. Available at: https://conecta.tec.mx/es/noticias/guadalajara/educacion/inteligencia-artificial-generativa-que-es-es-un-riesgo-o-ventaja [Accessed: 11 June. 2025].
DWORKIN, R. (2000). Los derechos en serio, translated by J.R. Capella, Barcelona: Ariel Derecho.
ELENA ORTEGA, J. M. (2019). ‘Singularidad tecnológica: ¿mito o nueva frontera de lo humano?’, Naturaleza y Libertad. Revista de Estudios Interdisciplinares, 12, pp. 87-103. Available at: https://doi.org/10.24310/NATyLIB.2019.v0i12.6269
ESTER SÁNCHEZ, A. T. (2025). ‘La inteligencia artificial en la justicia: Desafíos y oportunidades en la toma de decisiones judiciales’, Anales de la Cátedra Francisco Suárez, 59, pp. 317–340. Available at: https://doi.org/10.30827/acfs.v59i.31404
FEITO TORREZ, M. V. (2020). ‘El juez Hermes y el logos de lo razonable: Por qué la aplicación silogística del Derecho no es suficiente’, Derecho y Ciencias Sociales, 23, pp.112–117. Available at: https://doi.org/10.24215/18522971e079
FLORIDI, L., COWLS, J., BELTRAMETTI, M., CHATILA, R., CHAZERAND, P., DIGNUM, V., LUETGE, C., MADELÍN, R., PAGALLO, U., ROSSI, F., SCHAFER, B., VALCKE, P. and VAYENA, E. (2018). ‘AI4People — An Ethical Framework for a Good AI Society: Opportunities, Risks, Principles, and Recommendations’, Minds and Machines, 28(4), pp. 689–707. Available at: https://doi.org/10.1007/s11023-018-9482-5
FREDIN, E. (2018). ‘Keep calm and reskill – Reporte del Foro Económico Mundial plantea estrategias para aumentar el empleo frente a la automatización’, Edu News / Instituto para el Futuro de la Educación. Available at: https://goo.su/VUUYZy [Accessed: 27 May. 2025].
GRIGORE, A. E. (2022). ‘Derechos humanos e inteligencia artificial’, IUS ET SCIENTIA, 8(1), pp. 164–175. Available at: https://doi.org/10.12795/IETSCIENTIA.2022.i01.10
GUIJOSA, C. (2017). ‘¿Los robots robarán nuestros trabajos? Estudio muestra cómo la automatización puede transformar el empleo en el mundo y en México’, Edu News/Instituto para el Futuro de la Educación. Available at: https://goo.su/o35zK [Accessed 27 May. 2025].
GUZMÁN GARCÍA, M. Á. (2025). ‘Retos en la garantía de derechos humanos frente a la desaparición del INAI’, Anuario de Filosofía y Teoría del Derecho, 19, e19511. Available at: https://doi.org/10.22201/iij.24487937e.2025.19.19511
HUMAN RIGHTS WATCH, ACCESS NOW AND AMNESTY INTERNATIONAL (2018). ‘The Toronto Declaration: Protecting the rights to equality and non-discrimination in machine learning systems’. Available at: https://www.accessnow.org/the-toronto-declaration-protecting-the-rights-to-equality-and-non-discrimination-in-machine-learning-systems [Accessed: 9 June. 2025].
INSTITUTO FEDERAL DE TELECOMUNICACIONES [IFT] (2022). Anuario Estadístico 2022. Available at: https://www.ift.org.mx/estadisticas/anuario-estadistico-2022
IFT (2023). Anuario Estadístico 2023. Available at: https://www.ift.org.mx/sites/default/files/contenidogeneral/estadisticas/anuarioestadistico2023.pdf
KONWAR, P. (2025). ‘La protección de los derechos humanos y la integridad de la información en la era de la IA generativa’, Crónica ONU, 7 de enero. Available at: https://www.un.org/es/cr%C3%B3nica-onu/la-protecci%C3%B3n-de-los-derechos-humanos-y-la-integridad-de-la-informaci%C3%B3n-en-la-era-de-la [Accessed: 23 May 2025].
MANYIKA, J., LUND, S., CHUI, M., BUGHIN, J., WOETZEL, L., BATRA, P., KO, R., and SANGHVI, S. (2017). ‘Jobs lost, jobs gained: What the future of work will mean for jobs, skills, and wages’, McKinsey Global Institute. Available at: https://www.mckinsey.com/featured-insights/future-of-work/jobs-lost-jobs-gained-what-the-future-of-work-will-mean-for-jobs-skills-and-wages [Accessed: 27 May. 2025].
MARTÍNEZ BAHENA, G. C. (2012). ‘La inteligencia artificial y su aplicación al campo del Derecho’, Revista Alegatos, (82), pp. 827–846. Available at: https://alegatos.azc.uam.mx/index.php/ra/article/view/205
MEDINA ROMERO, M. Á. and TORRES CHÁVEZ, T. H. (2025). ‘Regulación de la Inteligencia Artificial: Desafíos para los Derechos Humanos en México’, Revista Iberoamericana de Derecho Electrónico, Vol. 15 Núm. 30 enero –junio 2025, e833 Available at: https://doi.org/10.23913/ride.v15i30.2291
MORELL, J. (2025). ‘Los “jueces IA” son más legalistas que los jueces humanos’, Blog de Innovación Legal – Abogacía Española. Available at: https://www.abogacia.es/publicaciones/blogs/blog-de-innovacion-legal/los-jueces-ia-son-mas-legalistas-que-los-jueces-humanos/ [Accessed: 25 June. 2025].
MUÑOZ RODRÍGUEZ, A. B. (2020). ‘El impacto de la inteligencia artificial en el proceso penal’, Anuario de la Facultad de Derecho. Universidad de Extremadura, 36, pp. 695–728. Available at: https://doi.org/10.17398/2695-7728.36.695
OST, F. J. (1993). “Hércules, Hermes: tres modelos de juez”, Academia, Revista sobre la Enseñanza del Derecho, Universidad de Buenos Aires, año 4, n° 8, 2007, p. 117. Publicado originalmente en Doxa, n° 14. Disponible en: http://historico.juridicas.unam.mx/publica/librev/rev/acdmia/cont/8/teo/teo5.pdf
PARLAMENTO EUROPEO (2019). Resolución de 12 de febrero de 2019 sobre una política industrial global en materia de inteligencia artificial y robótica (2018/2088(INI)). Available at: https://www.europarl.europa.eu/doceo/document/TA-8-2019-0081_ES.html [Accessed: 29 May. 2025].
PÉREZ-UGENA C. M. (2024). ‘Análisis comparado de los distintos enfoques regulatorios de la inteligencia artificial en la Unión Europea, EE. UU., China e Iberoamérica’, Anuario Iberoamericano de Justicia Constitucional, 28(1), pp. 129–156. Available at: https://doi.org/10.18042/cepc/aijc.28.05
POŠĆIĆ, A. and MARTINOVIĆ, A. (2022). ‘Regulatory sandboxes under the draft EU Artificial Intelligence Act: An opportunity for SMEs?’, InterEULawEast, 9(2), pp. 71–117. Available at: https://doi.org/10.22598/iele.2022.9.2.3
POSNER, E.A. and SARAN, S. (2025). ‘Judge AI: Assessing Large Language Models in Judicial Decision-Making’, University of Chicago Law School, Coase-Sandor Institute for Law & Economics Research Paper 25(03). Available at: https://doi.org/10.2139/ssrn.5098708
RED IBEROAMERICANA DE PROTECCIÓN DE DATOS [REDIPD] (2020). ‘Recomendaciones generales para el tratamiento de datos en inteligencia artificial’. Available at: https://www.redipd.org/sites/default/files/2020-02/guia-recomendaciones-generales-tratamiento-datos-ia.pdf [Accessed: 25 June. 2025].
RIVAS-VALLEJO, P. (2021). ‘Discriminación algorítmica: detección, prevención y tutela’, Jornadas Catalanas de Derecho Social 2021. Available at: https://www.researchgate.net/publication/354860623_Discriminacion_algoritmica_deteccion_prevencion_y_tutela [Accessed: 28 May. 2025].
RODRÍGUEZ-AMAT, J. R. (2022). ‘Hacia una gobernanza de los datos de las plataformas. Explorando los desajustes entre los datos y el sentido’, RAE-IC. Revista de la Asociación Española de Investigación de la Comunicación, 9(18), pp. 45–74. Available at: https://doi.org/10.24137/raeic.9.18.4
ROJAS-CONTRERAS, M., ORJUELA DUARTE, A. and SANTOS JAIMES, L.M. (2025). ‘Human-in-the-loop (HITL). as a Verification and Validation Strategy for Knowledge Generated by Generative Artificial Intelligence’, Proceedings of the 23rd LACCEI International Multi-Conference for Engineering, Education and Technology, pp. 1–10. Available at: https://doi.org/10.18687/LACCEI2025.1.1.1903
ROSZAK, T. (1994). The cult of information: A neo-Luddite treatise on high-tech, artificial intelligence, and the true art of thinking (2nd ed.). University of California Press.
RUSSELL, S. and NORVIG, P. (2020). ‘What Is AI?’, in Artificial Intelligence: A Modern Approach, 4th ed. Pearson Education, pp. 1-5. Available at: https://luismejias21.wordpress.com/wp-content/uploads/2017/09/inteligencia-artificial-un-enfoque-moderno-stuart-j-russell.pdf [Accessed: 30 May 2025].
SADIN, É. (2020). La inteligencia artificial o el desafío del siglo: Anatomía de un antihumanismo radical, translated by M. Martínez, Buenos Aires: Caja Negra.
SALCIDO LEDEZMA, M. A. (2025). ‘Reflexiones sobre la regulación en materia de inteligencia artificial: un análisis desde la perspectiva del derecho constitucional’, ERITRONIO. Revista Iberoamericana de Derecho y Tecnología, 1(1). Available at: https://eritronio.org/index.php/revista/article/view/12
SÁNCHEZ DÍAZ, M. F. (2024). ‘Inteligencia artificial generativa y los retos en la protección de los datos personales’, Revista Estudios en Derecho a la Información, (18), pp. 179-205. Instituto de Investigaciones Jurídicas, UNAM. Available at: https://doi.org/10.22201/iij.25940082e.2024.18.18852
SARTORI, G. (1998). Homo videns: Televisione e post-pensiero [Homo videns: Television and post-thinking]. Laterza.
SUPREMA CORTE DE JUSTICIA DE LA NACIÓN [SCJN] (2021). Acción de Inconstitucionalidad 82/2021 y su acumulada 86/2021. Ciudad de México: SCJN. Available at: https://www2.scjn.gob.mx/juridica/engroses/cerrados/Publico/Proyecto/AI82_2021y86_2021acumuladaPL.pdf [Accessed: 29 May. 2025].
SCJN (2024). Acción de Inconstitucionalidad 66/2024, promovida por el Ejecutivo Federal contra el artículo 185 Bis C del Código Penal del Estado de Sinaloa, ponencia del Ministro Juan Luis González Alcántara Carrancá’, El Juego de la Corte. Available at: https://eljuegodelacorte.nexos.com.mx/la-suprema-corte-inicia-mal-la-discusion-sobre-inteligencia-artificial [Accessed: 20 May 2025].
SCJN (2025A). Inteligencia artificial aplicada en procesos jurisdiccionales. Constituye una herramienta válida para calcular el monto de las garantías que se fijen en los juicios de amparo (Tesis aislada, Registro digital: 2031009, Tesis: II.2o.C.8 K (11a.)). Segundo Tribunal Colegiado en Materia Civil del Segundo Circuito. Semanario Judicial de la Federación, Undécima Época, Materia Común. Available at: https://sjfsemanal.scjn.gob.mx/detalle/tesis/2031009 [Accessed: 29 May 2025].
SCJN (2025B). Inteligencia artificial aplicada en procesos jurisdiccionales. Elementos mínimos que deben observarse para su uso ético y responsable con perspectiva de derechos humanos (Tesis aislada, Registro digital: 2031010, Tesis: II.2o.C.9 K (11a.)). Segundo Tribunal Colegiado en Materia Civil del Segundo Circuito. Semanario Judicial de la Federación, Undécima Época, materias: constitucional, común. Available at: https://sjf2.scjn.gob.mx/detalle/tesis/2031010 [Accessed: 29 May 2025].
STANKOVICH, M. (2022). ‘AI and Big Data Deployment in Health Care: Proposing Robust and Sustainable Governance Solutions for Developing Country Governments’, UNDP Human Development Report 2021/22: Special Report on Human Security. Available at: https://hdr.undp.org/system/files/documents/background-paper-document/2021-22hdrstankovich.pdf [Accessed: 19 June. 2025].
TIRSO, A., and Sánchez, E. (2025). “La inteligencia artificial en la justicia: Desafíos y oportunidades en la toma de decisiones judiciales”. ACFS. Revista de Filosofía Jurídica y Política, Universidad de Granada, núm. 59, 2025, p. 333. Available at: https://revistaseug.ugr.es/index.php/acfs/article/view/31404 [Accessed: 21 June. 2025].
TRIBUNAL CONSTITUCIONAL DE ESPAÑA (1993). Sentencia 238/2012. Available at: https://hj.tribunalconstitucional.es/es-ES/Resolucion/Show/238
UNESCO (2023). Kit de herramientas global sobre IA y el Estado de derecho para el poder judicial. Available at: https://unesdoc.unesco.org/ark:/48223/pf0000387331_spa [Accessed: 26 June. 2025].
VELÁZQUEZ FERNÁNDEZ, H. (2019). ‘¿Qué tan natural es la inteligencia artificial? Sobre los límites y alcances de la biomímesis computacional’, Naturaleza y Libertad. Revista de Estudios Interdisciplinares, (12), pp. 237-258. Available at: https://doi.org/10.24310/NATyLIB.2019.v0i12.6277
VINGE, V. (1993). ‘The coming technological singularity: How to survive in the post-human era’, NASA Technical Reports Server, Document ID 19940022856. Available at: https://ntrs.nasa.gov/citations/19940022856
WEXLER, R. (2017). ‘Cuando un programa informático te mantiene en la cárcel’, The New York Times, 13 June 2017. Available at: https://www.nytimes.com/2017/06/13/opinion/how-computers-are-harming-criminal-justice.html [Accessed: 25 June. 2025].
WORLD ECONOMIC FORUM. (2018). Towards a reskilling revolution: A future of jobs for all. World Economic Forum, pp. 7-8 Available at: https://www3.weforum.org/docs/WEF_FOW_Reskilling_Revolution.pdf [Accessed: 16 June. 2025].
YUSTE, R., GENSER, J. and HERRMANN, S. (2021). ‘It’s Time for Neuro-Rights’, Horizons: Journal of International Relations and Sustainable Development, (18), pp. 154–165. Available at: https://www.jstor.org/stable/48614119
ZAGREBELSKY, GUSTAVO, (1995). El derecho dúctil. Ley, derechos, justicia, 1ª ed., Editorial Trotta, (translated by Marina Gascón), pp. 115-135.
ZUBOFF, S. (2019). The Age of Surveillance Capitalism: The Fight for a Human Future at the New Frontier of Power. New York: Public Affairs.
Published
Issue
Section
License
Copyright (c) 2026 Geofredo Angulo López

This work is licensed under a Creative Commons Attribution 4.0 International License.






















