Transparencia de la inteligencia artificial en la administración pública: Una revisión de estándares internacionales

Lorayne Finol Romero, Ivette Esis Villarroel

Resumo


Este artículo compara estándares de soft law aplicables a los sistemas automatizados por inteligencia artificial (IA) en la administración pública, con el propósito de promover la gobernanza de algoritmos confiables, transparentes, responsables y centrados en los derechos de las personas. La metodología empleada se basa en una revisión comparativa de instrumentos de organismos globales. Se argumenta que, en la última década, la sociedad digital basada en datos ha transformado las interacciones y la toma decisiones, dando lugar a la formulación acelerada de estándares internacionales que influyen en procesos de transformación digital de la administración pública, conforme al concepto de gobernanza algorítmica, que apenas comienza a integrarse en los procesos automatizados del sector público. Se concluye que, a pesar de su rápida evolución, la discusión se ha centrado principalmente en aspectos técnicos, descuidando la garantía del derecho de acceso a una explicación de las decisiones y riesgos asociados al oscurantismo de las democracias. El estudio contextualiza cinco principios indispensables de transparencia algorítmica y destaca, dentro de las limitaciones, que no se puede asegurar que el legislador adopte vía lege ferenda estas recomendaciones porque estos instrumentos cambian vertiginosamente, y además no surten efectos vinculantes. La contribución principal del artículo es proporcionar una visión global y armonizada, instando a los actores políticos a examinar detenidamente la experiencia comparada para impulsar las regulaciones necesarias que permitan incrementar la confianza de los ciudadanos en sistemas automatizados por algoritmos, y la responsabilidad de la inteligencia artificial en la administración pública.

Palavras-chave


Transparencia, transformación digital, inteligencia artificial, administración pública.

Texto completo:

PDF (Español (España))

Referências


ALEXY, Robert. Teoría de los derechos fundamentales. Título original: Theorie Der Griindrechte. Suhrkamp-Verlag. Traducido por Ernesto Garzón Valdés. Revisión: Ruth Zimmerling. Madrid, Centro de Estudios Constitucionales, 1993.

BALLESTEROS, Andrea. Transparency in triads. Polar, Political and anthropological Review, Vol. 35, N. 2, 2012, pp. 160-166.

BENEDIKT-FREY, Carl and OSBORNE, Michael. El futuro del empleo: ¿Qué tan susceptibles son los empleos a la informatización? Previsión tecnológica y cambio social, N. 114, 2017. pp. 254-280.

BERMÚDEZ ABREU, Yoselyn. El soft law como método unificador del derecho mercantil internacional. Maracaibo, La Universidad del Zulia, 2007.

BOIX-PALOP, Andrés. Los algoritmos son reglamentos: la necesidad de extender las garantías propias de las normas reglamentarias a los programas empleados por la administración para la adopción de decisiones. Revista de Derecho Público: Teoría y Método, Vol. 1, 2020, p. 223-270.

BOIX-PALOP, Andrés y SORIANO ARNANZ, Alba. Transparencia y control del uso de la inteligencia artificial por las Administraciones. En: BALAGUER CALLEJÓN, Francisco y COTINO HUESO, Lorenzo. (Coords.). Derecho Público de la inteligencia artificial. Madrid, Fundación Manuel Giménez Abad, 2023, pp. 247-283.

BORDACHAR BENOIT, Michelle. Comentarios al proyecto de ley chileno sobre protección de datos personales: Deficiencias e inconsistencias en los derechos Arco. Revista Chilena de Derecho y Tecnología, Vol. 11, N. 2, 2022, pp. 397 – 414.

BORGES-BLÁZQUEZ, Raquel. El sesgo de la máquina en la toma de decisiones en el proceso penal, Ius Et Scientia, Vol. 6, N. 2, 2020, pp. 54 - 71.

BRUCE, Peter & FLEMING, Grand. Responsible Data Science: Transparency and Fairness in Algorithms. New Jersey, John Wiley & Sons, Inc., 2021.

CASTELLANOS-BALLESTEROS, Inmaculada J. Decisiones automatizadas y transparencia administrativa: nuevos retos para los derechos fundamentales, Revista Española de la Transparencia, N. 16, 2023, pp. 191-215.

CENTER FOR AI SAFETY. Mitigating the risk of extinction from AI should be a global priority alongside other societal-scale risks such as pandemics and nuclear war, Mayo 2023. Disponible en: https://www.safe.ai/statement-on-ai-risk (Acceso en: 31 out 2023)

COBBE, Jennifer; SENG AH LEE, Michelle & SINGH, Jatinder. Reviewable Automated Decision-Making: A Framework for Accountable Algorithmic Systems. In: ACM Conference on Fairness, Accountability, and Transparency (FAccT ‘21), March 1–10, 2021, Virtual Event, Canada. ACM, New York, NY, USA.

COGLIANESE, Cary & LEHR, David. Transparency and algorithmic governance, Administrative Law Review, Vol. 71, N. 1, 2019, pp. 1-55.

CONTRERAS, Pablo; TRIGO, Pablo y ORTIZ, Leonardo (2022). Un sistema fragmentado: La protección sectorial de los datos personales en Chile, Revista de Derecho Administrativo Económico, N° 35, 2022, pp. 36-64.

COTINO-HUESO, Lorenzo. SyRI, ¿a quién sanciono? Garantías frente al uso de inteligencia artificial y decisiones automatizadas en el sector público y la sentencia holandesa de febrero de 2020, La Ley Privacidad, Wolters Kluwer, N. 4, 2020, pp. 1-10. Disponible en: https://bit.ly/48lh2zA. (Acceso em: 07 ene 2024).

COTINO-HUESO, Lorenzo. Hacia La Transparencia 4.0: El Uso De La Inteligencia Artificial Y Big Data Para La Lucha Contra El Fraude Y La Corrupción Y Las (Muchas) Exigencias Constitucionales. En: RAMIÓ, Carles (ed.). Repensando la Administración pública. Administración digital e innovación pública. 1ª ed., Madrid, Instituto Nacional de Administración, 2021, pp. 169-196.

COTINO-HUESO, Lorenzo. Una Regulación Legal Y De Calidad Para Los Análisis Automatizados De Datos O Con Inteligencia Artificial. Los Altos Estándares Que Exigen El Tribunal Constitucional Alemán Y Otros Tribunales, Que No Se Cumplen Ni De Lejos En España. Revista General de Derecho Administrativo, N. 63, 2023a, pp. 1-22.

COTINO-HUESO, Lorenzo. Qué concreta transparencia e información de algoritmos e inteligencia artificial es la debida. Revista Española de la Transparencia, N. 16, 2023b, pp. 17-63.

CRESWELL, Jhon. Investigación Cualitativa y Diseño Investigativo Selección entre cinco tradiciones. John W. Creswell. SAGE Publications, 2009.

DE GREGORIO, Giovanni. The rise of digital constitutionalism in the European Union. International Journal of Constitutional Law, Vol. 19, N. 1, 2021, pp. 41-70.

DÍAZ-BENUSSI, Carlo. Obligaciones de seguridad en el tratamiento de datos personales en Chile: Escenario actual y desafíos regulatorios pendientes, Revista Chilena de Derecho y Tecnología, Vol. 9, N. 1, 2020, pp. 227-279.

DOMAGALA, Natalia. Ética de Datos – CDDO UK, (Sitio web) Actualizado el 2 de diciembre de 2021. Disponible en: https://bit.ly/3LUqLUw (Acceso em: 29 nov 2021).

DWORKIN, Ronald. Los derechos en serio. 2da Ed. Traducción de Marta Gustavino. Barcelona, Editorial Ariel, 1989.

FELER, Alan Matías. Soft Law como herramienta de adecuación del Derecho Internacional a las nuevas coyunturas. Lecciones y Ensayos, N. 95, 2015, pp. 281-303.

FINOL-ROMERO, Lorayne. Derecho a la transparencia: ¿Es suficiente una ley? Valencia, Editorial Tirant Lo Blanch, 2023a.

FINOL-ROMERO, Lorayne. Paradoja Datos Abiertos-Privacidad Como Preámbulo De La Política De Acceso Abierto Impulsada Desde Universidades, Revista Gobierno y Administración Pública, Vol. 5, N. 5, 2023b, pp. 40-64

FLORIDI, Luciano. The European Legislation on AI: a Brief Analysis of its Philosophical Approach. Philosophy & Technology, Vol. 34, 2021a, pp. 215–222.

FLORIDI, Luciano. The End of an Era: from Self-Regulation to Hard Law for the Digital Industry. Philosophy & Technology, Vol. 34, 2021b, pp. 619–622

FOUCAULT, Michel. Vigilar y castigar: nacimiento de la prisión. (Nueva criminología y derecho) Traducción de: Aurelio Garzón del Camino. Buenos Aires: Siglo XXI Editores Argentina, 2002.

GAMERO-CASADO, Eduardo. Sistemas automatizados de toma de decisiones en el Derecho Administrativo Español, Revista General de Derecho Administrativo, N. 63, 2023, pp. 1-35.

GARRIDO, Romina & COTORAS, Dusan. Informe Pilotaje de la Elaboración de la Instrucción General sobre Transparencia Algorítmica. Santiago de Chile: GobLab UAI / BID Lab, 2023, disponible en: https://bit.ly/41PLTSo (Acceso em: 07 ene 2024).

GOODMAN, Bryce & FLAXMAN, Seth. European Union Regulations on Algorithmic Decision Making and a “Right to Explanation”. AI Magazine, Vol. 38, N. 3, 2017, pp. 50-57.

GIEST, Sarah & GRIMMELIKHUIJSEN, Stephen. Introduction to special issue algorithmic transparency in government: Towards a multi-level perspective. Information Polity. Vol. 25, N. 1, 2020, pp. 409–417.

GRIMMELIKHUIJSEN, Stephan. Explaining Why the Computer Says No: Algorithmic Transparency Affects the Perceived Trustworthiness of Automated Decision-Making. Public Administration Review. Vol. 83, N. 2, 2023, pp. 241-262.

LI, Fei-Fei & ETCHEMENDY, Jhon. HIA. Iniciativa de IA centrada en el ser humano de Stanford. Stanford University, Oct. 18, 2018, disponible en: https://hai.stanford.edu/news/introducing-stanfords-human-centered-ai-initiative (Acceso em 07 ene 2024).

MALGIERI, Gianclaudio. Automated Decision-Making in the EU Member States: The Right to Explanation and Other 'Suitable Safeguards' for Algorithmic Decisions in the EU National Legislations, Computer Law & Security Review, 2018, pp. 1-40, disponible em: https://papers.ssrn.com/sol3/papers.cfm?abstract_id=3233611 (Acceso em: 07 ene 2024).

MANTELERO, Alessandro. Beyond Data. Human Rights, Ethical and Social Impact Assessment in AI, Information Technology and Law Series, N. 36. T.M.C. Asser Press, Springer, 2022.

MARTÍN-DELGADO, Isaac. Naturaleza, Concepto Y Régimen Jurídico De La Actuación Administrativa Automatizada. Revista de Administración Pública, N. 180, 2009, pp. 353-386

MARTÍNEZ GARAY, Lucía. Peligrosidad, Algoritmos y Due Process: El Caso State vs. Loomis. Revista De Derecho Penal y Criminología, Vol. 3, N. 20, 2018, pp. 485-502.

MARGETTS, Helen & DOROBANTU, Charlotte. Rethinking government with AI. Nature, N. 568, 2019, pp. 163-165.

MEIJER, Albert & GRIMMELIKHUIJSEN, Stephan. Responsible and Accountable Algorithmization: How to Generate Citizen Trust in Governmental Usage of Algorithms. En R. P. y M. Schuilenburg (Ed.). The Algorithmic Society. London, Routledge, 2020.

MIRANZO, Javier. Inteligencia Artificial y Derecho Administrativo. Editorial Tecnos, Madrid, 2023.

MÖKANDER, Jakob, JUNEJA, Prathm, WATSON, David y FLORIDI, Luciano. The US Algorithmic Accountability Act of 2022 vs. The EU Artificial Intelligence Act: what can they learn from each other? Minds and Machines, Vol. 32, 2022, pp. 751–758.

MUÑOZ-GUTIÉRREZ, Catherine. La discriminación en una sociedad automatizada: Contribuciones desde América Latina, Revista Chilena De Derecho y Tecnología, Vol. 10, N. 1, 2021, pp. 271-307.

NEW YORK TIMES. ‘The Godfather of A.I.’ Leaves Google and Warns of Danger Ahead, June 30, 2023, disponible en: https://bit.ly/3ZTkWMB (Acceso em: 30 nov 2023).

ORTIZ DE ZÁRATE, Lucía (2022). Explicabilidad (de la inteligencia artificial). Eunomía. Revista en Cultura de la Legalidad, N. 22, 2022, pp. 328-344.

PASQUALE, Frank. The Black Box Society: The Secret Algorithms That Control Money and Information. 1ª ed. Cambridge, Harvard University Press, 2015.

PENTLAND, Alex. The data-driven society. Scientific American, Vol. 309, N. 4, 2013, pp. 78-83.

REYES-OLMEDO, Patricia. Estándares técnico-jurídicos de gestión para servicios digitales de información legislativa. Revista Chilena de Derecho y Tecnología, Vol. 6, N. 2, 2017, pp. 57-95.

RIVERA-EISENMANN, Mauricio. Transparencia e Inteligencia Artificial: una nueva perspectiva. Encrucijada, Revista Electrónica Del Centro De Estudios En Administración Pública, N. 37, 2021, pp. 60–71.

SORIANO-ARNANZ, Alba. Decisiones automatizadas: problemas y soluciones jurídicas más allá de la protección de datos, Revista de Derecho Público: Teoría y Método. Vol. 3, 2021, pp. 85-127.

TROITINO, David Ramiro y KERIKMÄE, Tanel. El Mercado de la Unión Europea, de analógico a digital. Retos para su interacción y disfrute en el marco Latinoamericano. Revista de Direito Internacional, Vol. 20, N. 2, 2023, pp. 40-49.

VESTRI, Gabriele. La inteligencia artificial ante el desafío de la transparencia algorítmica. una aproximación desde la perspectiva jurídico-administrativa. Revista Aragonesa de Administración Pública, N. 56, 2021, pp. 368-398.

VALLE-CRUZ, David; PLATA-CESAR, Nely y GONZÁLEZ-RUÍZ, Leonardo. Handbook of Research on Applied Artificial Intelligence and Robotics for Government Processes. IGI Global, 2022.

YUVAL NOAH, Harari. Reboot for the AI revolution, Nature, Vol. 550, 2017, pp. 324-327.

WHITE, James & LIDSKOG, Rolf. La ignorancia y la regulación de la inteligencia artificial, Journal of Risk Research, Vol. 25, N. 4, 2022, pp. 488-500.

Normas citadas:

CENTRO LATINOAMERICANO DE ADMINISTRACIÓN PARA EL DESARROLLO. Carta Iberoamericana de Gobierno Abierto. Aprobada por la XVII Conferencia Iberoamericana de Ministras y Ministros de Administración Pública y Reforma del Estado. Bogotá, Colombia, 8 de julio de 2016.

CENTRO LATINOAMERICANO DE ADMINISTRACIÓN PARA EL DESARROLLO. Carta Iberoamericana de Gobierno Electrónico. Aprobada por la IX Conferencia Iberoamericana de Ministros de Administración Pública. Santiago de Chile, 10 de noviembre de 2007.

CHILE. Lineamientos para el uso de herramientas de inteligencia artificial en el sector público, de 11 de diciembre de 2023. Ministerio de Ciencia de Chile, Oficio Nº 711.

CHILE. Ley N° 21.180 de Transformación Digital del Estado, publicada el 11 de noviembre de 2019, modifica las bases de los procedimientos administrativos para su digitalización.

CHILE. Ley Nº 19.880 Establece Bases De Los Procedimientos Administrativos Que Rigen Los Actos De Los Órganos De La Administración Del Estado, de 12-NOV-1986. Última modificación: 20-AGO-2008 - Ley 20.285.

CHILE. Política Nacional de Inteligencia Artificial (PNIA) de 2021. Decreto Núm. 20, de 10 de diciembre de 2021, pero aún discute en el Congreso el Boletín Nº 15.869-19,

ESTADOS UNIDOS DE AMÉRICA. Algorithmic Accountability Act of 2023. H.R.5628 - 117th Congress. https://doi.org/10.1016/S0140-6736(02)37657-8

ESTADOS UNIDOS. NIST US (National Institute of Standards and Technology) of Department of Commerce Artificial Intelligence Risk Management Framework (AI RMF 1.0). https://nvlpubs.nist.gov/nistpubs/ai/nist.ai.100-1.pdf

OECD. Recommendation of the Council on Artificial Intelligence. https://legalinstruments.oecd.org/en/instruments/OECD-LEGAL-0449 (Acceso em: 17 nov 2023).

OECD. Cuarenta y dos países adoptan los Principios de la OCDE sobre Inteligencia Artificial. https://bit.ly/3NUmZeE. (Acceso em: 20 nov 2021).

REINO UNIDO. Algorithmic Transparency Standard de 2021 UK Algorithmic Transparency Recording Standard (ATRS), https://bit.ly/45txQlN (Acceso em: 17 nov 2023)

UNESCO. Recomendación sobre la Ciencia Abierta, UNESCO (2021), del 9 al 24 de noviembre de 2021, en su 41ª reunión.

UNESCO. Recomendación sobre la ética de la inteligencia artificial. https://unesdoc.unesco.org/ark:/48223/pf0000381137_spa

UNIÓN EUROPEA. HLGE (2019). Libro Blanco sobre IA de EU (2020). White Paper on Artificial Intelligence: a European approach to excellence and trust, de febrero de 2020.

UNIÓN EUROPEA. Reglamento (UE) 2022/868 del Parlamento Europeo y del Consejo de 30 de mayo de 2022. Relativo a la Gobernanza de Datos (Reglamento de Gobernanza de Datos).

UNIÓN EUROPEA. Plan de Acción del Grupo de Expertos en datos FAIR de la Comisión, de 2018. https://ec.europa.eu/info/sites/info/files/turning_fair_into_reality_1.pdf

UNIÓN EUROPEA. Artificial intelligence Act, of European Union, 14 de junio de 2023. https://eur-lex.europa.eu/legal-

UNIÓN EUROPEA. Briefing of Artificial intelligence act. Ley de IA de la UE: primera normativa sobre inteligencia artificial del Parlamento Europeo. https://bit.ly/3RRDE57

UNIÓN EUROPEA. Directiva (UE) 2019/1024 Del Parlamento Europeo y del Consejo, de 20 de junio de 2019, relativa a la reutilización de la información del sector público. Publicada en el Diario Oficial de la Unión Europea (172/56-78).

UNIÓN EUROPEA. Comisión Europea (2019): HLEG (Grupo Independiente de Expertos de Alto nivel sobre Inteligencia Artificial). Directrices éticas para una IA fiable, https://data.europa.eu/doi/10.2759/14078

Jurisprudencia:

ALEMANIA. Sentencia del Tribunal Constitucional Federal, de fecha 16 de febrero de 2023. 1 BvR 1547/19. 1 BvR 2634/20. “Análisis de datos automatizado”. Consultada en: https://www.bundesverfassungsgericht.de/e/rs20230216_1bvr154719.html

ESTADOS UNIDOS DE AMÉRICA. Sentencia State of Wisconsin v. Loomis, Nº 2015AP157-CR, July 13, 2016. 371 Wis. 2d 749. Consultada en: State v. Loomis | Cases | Wisconsin | Westlaw Precision




DOI: https://doi.org/10.5102/rdi.v21i1.9422

ISSN 2236-997X (impresso) - ISSN 2237-1036 (on-line)

Desenvolvido por:

Logomarca da Lepidus Tecnologia