Resumen y motivación

La mayoría de las organizaciones que construyen y operan servicios de TI rinden cuentas ante alguien: reguladores, clientes, organismos de certificación, aseguradoras, juntas directivas. El cumplimiento normativo es el acto de ajustarse a leyes, reglas y normas, y de demostrar que se hace. Una auditoría es un examen sistemático de evidencia para juzgar si eso es cierto. En TI esto incluye las auditorías de los controles de la información financiera, de las obligaciones de protección de datos, de las certificaciones de seguridad y de los compromisos contractuales. La auditoría de tecnologías de la información examina los controles que rodean a los sistemas y a los datos que guardan.

El cumplimiento y la entrega continua tienen fama de fricción. El cumplimiento pide documentos, firmas y aprobaciones antes del cambio, y la entrega continua favorece los cambios pequeños liberados de forma continua. La fricción es real cuando el cumplimiento se trata como una fase al final. Disminuye cuando el cumplimiento se incorpora al flujo del trabajo. Los registros de cambios, las revisiones de código, las pruebas automatizadas y los registros de acceso son evidencia, y una canalización de entrega los produce todos los días. La auditoría continua usa comprobaciones automatizadas y casi en tiempo real de los controles en lugar de muestras periódicas, y encaja con la cadencia de la entrega continua. Una pista de auditoría es un registro que muestra quién hizo qué, cuándo y en qué sistema, y suele ser la evidencia más sólida que tienes.

ITIL describe las prácticas pertinentes: la gestión de la seguridad de la información, la gestión de riesgos y la gobernanza del sistema de valor del servicio, y remite a normas como ISO/IEC 27001 para los sistemas de gestión de la seguridad de la información. Los marcos que las organizaciones afrontan comúnmente incluyen regímenes de informes de controles financieros, como la ley Sarbanes–Oxley de Estados Unidos, leyes de protección de datos como el Reglamento General de Protección de Datos de la Unión Europea e informes de aseguramiento como SOC 2, que examinan controles relevantes para la seguridad y criterios relacionados. Los detalles difieren según la jurisdicción, el sector y la fecha, y este tema describe la práctica de medición, no los requisitos legales. Trabaja con tus colegas de cumplimiento, jurídicos y de auditoría para saber qué te aplica.

El objetivo de las métricas de cumplimiento es saber cuán bien cumple la organización sus obligaciones y cuánto esfuerzo lleva, para que ambas cosas puedan mejorar. El riesgo es que el cumplimiento se convierta en una actuación para el auditor. Un equipo puede superar una auditoría produciendo documentos en el último momento y aun así mantener prácticas arriesgadas. Se aplica la barrera de protección de la ley de Goodhart: cuando los "hallazgos de auditoría" son una meta, la gente evita el escrutinio, estrecha el alcance y negocia la redacción (véase el tema 1.2, Ley de Goodhart y psicología de las métricas).

Ayudan dos líneas de pensamiento.

  • El cumplimiento como subproducto. Si la canalización registra automáticamente la revisión, las pruebas, la aprobación y el despliegue, la evidencia existe tanto si hay una auditoría cerca como si no. Esto también elimina la tentación de reconstruir la evidencia después.
  • Los auditores como partes interesadas. La práctica ágil valora la colaboración continua con las partes interesadas. Los auditores y los evaluadores son partes interesadas con preguntas legítimas. Implicarlos en el diseño de los controles y de la evidencia reduce la sorpresa y el retrabajo, preservando su independencia.

Principios clave

  • Produce la evidencia como subproducto del trabajo. Las canalizaciones, los tickets y los registros deben responder a la mayoría de las preguntas de auditoría.
  • Asigna las obligaciones a controles y responsables. Toda obligación tiene un control, y todo control tiene un responsable.
  • Colabora pronto con los auditores. Comparte los diseños y los enfoques de evidencia antes de la auditoría, y preserva su independencia.
  • Corrige las causas, no los hallazgos. Un hallazgo cerrado sin eliminar la causa vuelve.
  • Mide el esfuerzo además del resultado. El costo del cumplimiento es parte del cuadro.
  • Mantén la segregación de funciones donde importa. La independencia de la revisión es un control que la automatización puede respaldar pero no sustituir.
  • Sé honesto sobre las brechas. Las debilidades que se informan a uno mismo es mejor que las encuentre uno que otros.

Definiciones de métricas

Métrica Definición Fórmula Unidad Fuente de datos Práctica de ITIL Equivalente ágil Cadencia
Cobertura de obligaciones Proporción de obligaciones aplicables asignadas a un control con un responsable y una fuente de evidencia obligaciones asignadas al menos a un control con responsable y fuente de evidencia / obligaciones aplicables porcentaje Registro de obligaciones y registro de controles Gobernanza; gestión de la seguridad de la información; gestión de riesgos La definición de terminado incluye la evidencia del control Trimestral
Tasa de automatización de la evidencia Proporción de la evidencia de controles incluidos recogida automáticamente de sistemas de registro elementos de evidencia de controles recogidos automáticamente / elementos de evidencia exigidos porcentaje Registro de controles, registros de la canalización y de los sistemas Gestión de la seguridad de la información; habilitación de cambios La canalización registra automáticamente la revisión, las pruebas y el despliegue Trimestral
Plazo de entrega de la evidencia Tiempo para suministrar la evidencia pedida por un auditor o evaluador mediana y percentil 85 de días desde la petición hasta la evidencia aceptada días Seguimiento de peticiones de auditoría Gobernanza; gestión de la seguridad de la información Capacidad de respuesta ante una pregunta de una parte interesada Por auditoría
Tiempo de cierre de hallazgos Tiempo para cerrar los hallazgos de auditoría, por gravedad mediana y percentil 85 de días desde que se emite el hallazgo hasta el cierre verificado días Seguimiento de hallazgos Mejora continua; gestión de riesgos Tiempo para corregir un defecto Mensual
Tasa de hallazgos repetidos Proporción de hallazgos que se repiten de una auditoría o revisión anterior hallazgos que coinciden en lo sustancial con un hallazgo cerrado anterior / hallazgos del periodo porcentaje Seguimiento de hallazgos con vínculos de causa Mejora continua; gestión de problemas Defecto recurrente tras una corrección Por ciclo de auditoría
Conflictos de segregación de funciones Recuento de combinaciones de acceso o de aprobación que violan las reglas de segregación, y tiempo para resolverlos conflictos detectados; mediana de días para resolver recuento; días Herramientas de gestión de identidades y accesos, registros de cambios Gestión de la seguridad de la información; habilitación de cambios Revisión independiente de los cambios Mensual
Esfuerzo de auditoría Horas-persona que la organización dedica a preparar y respaldar un ciclo de auditoría, por unidad de alcance horas registradas en la preparación y el apoyo de la auditoría / controles o sistemas incluidos en el alcance horas por unidad Registros de tiempo o estimaciones de esfuerzo Gobernanza; mejora continua Costo del trabajo que no es de entrega Por ciclo de auditoría

Indica en el registro las obligaciones incluidas y el alcance de la auditoría. El tiempo de cierre arranca cuando se emite el hallazgo y se detiene cuando el auditor o un verificador independiente confirma el cierre, no cuando el equipo dice que está hecho. Los hallazgos repetidos se emparejan por causa, no por redacción, y se registra la regla de emparejamiento. El esfuerzo de auditoría es una medida de tendencia de la organización y nunca una medida de individuos.

Recomendaciones

Conoce tus obligaciones y controles

1. Enumera en lenguaje llano las obligaciones que aplican. Con tus colegas jurídicos y de cumplimiento, enumera las leyes, normas, contratos y políticas que obligan al servicio, y lo que cada una exige en términos de resultados. Mantén la lista corta y legible. Las obligaciones que nadie sabe enunciar con claridad son las que causan sorpresas en la auditoría.

2. Asigna cada obligación a controles, responsables y evidencia. Para cada obligación, nombra el control que la cumple, la persona responsable y la evidencia que muestra que el control opera. Donde un control cumple varias obligaciones, dilo, porque eso reduce el esfuerzo duplicado. La cobertura de obligaciones mide la completitud de este mapa. Las obligaciones sin asignar son brechas que cerrar o que aceptar a sabiendas.

3. Prefiere menos controles y más sólidos. Un control automatizado y probado vale más que varios manuales. Busca controles que se solapen y retira los que no sirven a ninguna obligación. Cada control cuesta esfuerzo operarlo y evidenciarlo (véase el tema 8.2, Métricas de riesgos y controles).

Haz de la evidencia un subproducto

4. Deja que la canalización produzca la evidencia. Vincula cada cambio de producción con una petición, una revisión de código, los resultados de las pruebas y una aprobación donde se exija una, todo registrado automáticamente. Un registro de despliegue que muestra esto cuenta al auditor lo que ocurrió sin necesidad de escribir un documento. Esto se apoya en las prácticas de entrega continua que los equipos ágiles ya usan (véase el tema 4.5, Métricas de versiones y despliegues).

5. Usa comprobaciones de política en la canalización. Codifica reglas, como "ningún despliegue sin una revisión de alguien que no sea el autor" o "ningún acceso a producción sin un ticket", como comprobaciones automatizadas. La comprobación es a la vez un control y su evidencia. Mantén las reglas visibles y versionadas, para que los cambios en ellas también queden registrados. Esto respalda la segregación de funciones, el principio de que ninguna persona debe controlar todas las etapas de un proceso sensible.

6. Conserva bien las pistas de auditoría. Guarda los registros de acceso y de cambios de una forma que no puedan alterar las personas a quienes describen, consérvalos durante el periodo exigido y hazlos consultables. Una pista que pueden editar aquellos a quienes registra es una evidencia débil. Comprueba las reglas de retención con tus colegas jurídicos.

7. Mide cuánta evidencia es automática. La tasa de automatización de la evidencia muestra dónde queda recogida manual. Ordena los elementos manuales por esfuerzo y riesgo, y automatiza primero los peores. A medida que sube la tasa, bajan el esfuerzo de auditoría y el plazo de entrega.

Trabaja con los auditores

8. Invita a los auditores al diseño. Comparte pronto con la auditoría interna y con los evaluadores externos los cambios planificados en los controles y en la evidencia, y pregunta qué los satisfaría. La independencia significa que no diseñan tus controles, y no significa que no puedan decirte qué evidencia necesitarán. Las conversaciones tempranas reducen el retrabajo. El Instituto de Auditores Internos publica normas de la profesión que explican el papel de la auditoría interna.

9. Prepara un índice de evidencia. Mantén un índice vivo de dónde reside cada tipo de evidencia y cómo recuperarla. Sigue el plazo de entrega de las peticiones de evidencia y usa los retrasos para encontrar la automatización que falta. Un proceso breve y constante supera a una carrera antes de cada auditoría.

10. Acuerda el significado de materialidad y alcance. Pregunta a los auditores cómo juzgan lo que importa y lo que está dentro del alcance, y registra la respuesta. Un entendimiento compartido previene disputas posteriores. No estreches el alcance para evitar el escrutinio, y no lo amplíes sin motivo.

Corrige las causas y aprende

11. Trata cada hallazgo como un registro de problema. Encuentra la causa, corrígela y verifica el cierre mediante alguien independiente. Vincula los hallazgos repetidos con los anteriores y examina por qué la primera corrección no se sostuvo. Una tasa alta de hallazgos repetidos señala correcciones que trataron síntomas, lo que se vincula con la gestión de problemas (véase el tema 4.1, Métricas de gestión de problemas).

12. Sigue el costo y redúcelo. Registra el esfuerzo de auditoría a lo largo de los ciclos. Si el esfuerzo es alto y plano, busca duplicación entre auditorías, recogida manual de evidencia y controles que no sirven a nadie. Informa de la tendencia del esfuerzo junto con los resultados. El cumplimiento vale su costo cuando reduce el riesgo real, y las métricas te ayudan a saberlo.

Vectores de manipulación y barreras de protección

Métrica Cómo se manipula Métrica o práctica de barrera de protección emparejada
Cobertura de obligaciones Asignar obligaciones a controles débiles o irrelevantes; definir las obligaciones de forma estrecha Revisión de la relevancia de los controles por un tercero; probar los controles (véase el tema 8.2, Métricas de riesgos y controles)
Tasa de automatización de la evidencia Contar capturas de pantalla o exportaciones como automáticas; automatizar primero la evidencia de poco valor Definir automático como generado por el sistema y resistente a la manipulación; ordenar por riesgo
Plazo de entrega de la evidencia Aportar rápidamente evidencia parcial; negociar la redacción de la petición Contar solo la evidencia aceptada; seguir las peticiones de seguimiento
Tiempo de cierre de hallazgos Cerrar hallazgos sin verificación; reclasificar la gravedad Verificación independiente; registro de cambios de gravedad
Tasa de hallazgos repetidos Reformular los hallazgos para que no coincidan; cerrar el hallazgo anterior como un tipo distinto Emparejar por causa con una regla registrada; revisión por la auditoría interna
Conflictos de segregación de funciones Trasladar los conflictos a sistemas fuera del alcance; conceder accesos temporales que nunca se registran Cubrir todos los sistemas con procesos sensibles; revisar los accesos temporales
Esfuerzo de auditoría No registrar las horas; trasladar el esfuerzo a otros presupuestos Muestrear los registros de tiempo; comparar con encuestas a los equipos

Una lectura sana es una automatización de la evidencia creciente, un plazo de entrega más corto y estable, hallazgos cerrados con verificación, una tasa de repetición baja y un esfuerzo de auditoría que baja a medida que madura el proceso.

Compensaciones: ventajas e inconvenientes

Enfoque Fortaleza Debilidad
Evidencia manual periódica Familiar para los auditores Costosa; reconstruida a posteriori
Evidencia continua automatizada Barata de mantener; oportuna Necesita ingeniería; los auditores necesitan confiar en la fuente
Aprobaciones pesadas Control visible Lentas; agrupan los cambios
Comprobaciones de política automatizadas Coherentes y rápidas Las reglas deben ser correctas y visibles
Implicación temprana de los auditores Menos sorpresas Necesita cuidado para preservar la independencia
Auditoría al final Separación clara Hallazgos tardíos; retrabajo
Un control para muchas obligaciones Eficiente Un solo fallo afecta a varias obligaciones
Muchos controles específicos Asignación clara Esfuerzo duplicado

La respuesta en prosa es automatizar la evidencia a partir de la canalización y de los sistemas de registro, implicar pronto a los auditores en el diseño preservando su independencia y mantener un conjunto reducido de controles sólidos asignados a las obligaciones.

Preguntas para conversar con tu equipo

1. ¿Qué pregunta de auditoría nos lleva más tiempo responder, y por qué? Elige la petición de evidencia más lenta de la última auditoría y síguela. ¿Falta la evidencia, está dispersa o está en la cabeza de alguien? Discutid qué la haría automática. El facilitador debe captar el costo en horas.

2. ¿Podemos mostrar, para cualquier cambio de producción del último mes, quién lo revisó y qué pruebas se ejecutaron? Elige un cambio al azar e inténtalo. Anota dónde se rompe la cadena. Acordad una mejora del registro de cambios o de la canalización que cierre la brecha.

3. ¿Qué prometimos en la última auditoría, y se sostuvo? Revisa los hallazgos y las correcciones. Para cada uno, pregunta si se eliminó la causa y quién verificó el cierre. Busca repeticiones. Acordad un hallazgo que examinar con más profundidad.

4. ¿Qué nos dirían los auditores si les preguntáramos cómo facilitar la evidencia? Planifica una conversación con la auditoría interna o con un evaluador sobre el diseño de la evidencia. Pregunta en qué confían y en qué no. El facilitador debe tratar sus respuestas como información, y tener presentes las reglas de independencia.

5. ¿Qué controles operamos que ninguna obligación necesita? Enumera los controles y las obligaciones a las que sirven. Encuentra los que no tienen un propósito claro. Discutid retirarlos, y la evidencia de que son innecesarios.

6. ¿Dónde podría una sola persona hacer algo sensible de principio a fin aquí? Piensa en el despliegue, la concesión de accesos y los pagos. Comprueba si las herramientas imponen la separación o solo la política. Discutid controles compensatorios, como la revisión automatizada, donde el personal es poco numeroso.

Cuatro perspectivas

Equipos de producto y entrega

Los equipos de entrega producen buena parte de la evidencia haciendo bien su trabajo. Deben mantener vinculados los registros de cambios, de revisiones y de pruebas, usar comprobaciones de política en la canalización y plantear inquietudes sobre los controles que frenan el trabajo sin reducir el riesgo. Se benefician de las conversaciones tempranas con los auditores sobre qué evidencia es suficiente.

Equipos de servicio y operaciones

Los equipos de operaciones llevan la gestión de accesos, los registros, las copias de seguridad y el manejo de incidentes, que son centrales en muchas auditorías. Deben mantener los registros resistentes a la manipulación y conservados, gestionar las revisiones de acceso según el calendario y mantener el índice de evidencia. Cargan con el peso de la evidencia manual y pueden señalar dónde ayudaría más la automatización.

Liderazgo y gobernanza

Los líderes responden del cumplimiento y a menudo de los resultados de las auditorías. Deben financiar la automatización de la evidencia, pedir la cobertura y las tasas de hallazgos repetidos y no solo el recuento de hallazgos, y apoyar la independencia de los auditores. La gobernanza debe esperar informes honestos de las brechas, y un plan para cada una.

Clientes y usuarios

Los clientes y los usuarios se apoyan en el cumplimiento como garantía de cómo se manejan sus datos y servicios. Se benefician cuando los informes de aseguramiento son claros, cuando los incidentes se informan según se exige y cuando los controles no dificultan el uso legítimo más de lo necesario. La comunicación transparente sobre el cumplimiento genera confianza.

En la práctica: un ejemplo de ITIL ágil

Una empresa de pagos de tamaño medio opera una plataforma de procesamiento de tarjetas y se evalúa cada año frente a un marco de aseguramiento de la seguridad y un régimen de protección de datos. Los números siguientes son ilustrativos.

La preparación de la auditoría lleva a los equipos de ingeniería unas seis semanas cada año. La evaluación del año pasado se cerró con 14 hallazgos, de los cuales 5 se repetían del año anterior. La jefa de cumplimiento traza el cuadro. La cobertura de obligaciones es del 83 por ciento, y el 17 por ciento de las obligaciones no tiene un responsable de control con nombre. La automatización de la evidencia es del 22 por ciento, y la mayor parte de la evidencia de aprobación de cambios proviene de capturas de pantalla de tickets compiladas a mano. La mediana del plazo de entrega de la evidencia es de 9 días, con un percentil 85 de 21 días. La mediana del tiempo de cierre de hallazgos es de 74 días, y el cierre lo marcaba a menudo el equipo propietario sin verificación.

La jefa de cumplimiento trabaja con los equipos de entrega y de operaciones y con la auditora interna. Cambian cuatro cosas. Cada cambio de producción en la canalización se vincula ahora con la petición, la revisión de código por alguien que no es el autor, los resultados de las pruebas y el despliegue, registrados automáticamente en el registro de cambios. Una comprobación de política bloquea un despliegue que carezca de una revisión independiente, y registra la vía de excepción para las emergencias. Las revisiones de acceso se ejecutan cada trimestre desde el sistema de identidad, que muestra directamente los conflictos de segregación de funciones. Cada hallazgo se convierte en un registro de problema, con un verificador independiente de la auditoría interna, y los hallazgos repetidos se vinculan con sus predecesores.

En la evaluación siguiente, la tasa de automatización de la evidencia es del 71 por ciento, la mediana del plazo de entrega de la evidencia es de 2 días, el percentil 85 es de 5 días y la preparación de la auditoría lleva unas dos semanas. La cobertura de obligaciones es del 97 por ciento, y los elementos restantes tienen una aceptación documentada. Los hallazgos bajan a 6, con una repetición, y la mediana del tiempo de cierre es de 31 días con verificación independiente. El director general pide cero hallazgos para el año siguiente. La jefa de cumplimiento propone seguir los hallazgos repetidos, el tiempo de cierre y la automatización de la evidencia, y explica que una meta de cero hallazgos empuja a los equipos a ocultar problemas o a estrechar el alcance, y que un evaluador que no encuentra nada quizá no ha mirado con suficiente dureza. La decisión se registra, y la junta acepta revisar las medidas en la reunión siguiente.

Perspectiva por sector

Startup. Las obligaciones pueden llegar de repente con un gran cliente o una ronda de financiación. Crea hábitos pronto: revisión entre pares, registros de cambios y control de acceso en la canalización, para que exista evidencia cuando se pida. Elige un marco cuando el negocio lo necesite y asígnalo a lo que ya haces.

Pequeña empresa. Los deberes de cumplimiento suelen venir fijados por contratos y por la ley, y los recursos son limitados. Mantén una lista corta de obligaciones, apóyate en servicios gestionados con sus propios informes de aseguramiento y guarda una carpeta de evidencia sencilla. Cuidado con comprar herramientas de cumplimiento que cuesten más que el riesgo que atienden.

Gran empresa. Muchas obligaciones se solapan, así que un marco de control unificado que asigna un control a muchas obligaciones ahorra mucho esfuerzo. Usa fuentes de evidencia comunes, un seguimiento de hallazgos compartido y un calendario de auditorías para evitar peticiones repetidas. Coordina la auditoría interna, el cumplimiento y la seguridad para que los equipos no sean examinados tres veces por lo mismo.

Gobierno y sector público. Los deberes de cumplimiento son extensos y públicos, e incluyen reglas de contratación, de registros, de accesibilidad y de protección de datos, con auditorías por organismos nacionales. Documenta las decisiones y la evidencia durante el periodo exigido, haz coherentes los informes entre organismos donde sea posible y mantén una línea clara entre la auditoría independiente y la dirección. Las obligaciones pueden cambiar con las elecciones y la legislación (véase el tema 8.5, Informes regulatorios y gubernamentales).

Caso de negocio: motivaciones, ROI y TCO

Los costos incluyen las herramientas para el registro de controles, la integración de la canalización para la evidencia, los sistemas de identidad y de registros, y el tiempo del personal de cumplimiento y de los equipos. El esfuerzo inicial de automatizar la evidencia es significativo, y sustituye al trabajo manual recurrente.

Los retornos son un menor esfuerzo de auditoría recurrente, respuestas más rápidas a las peticiones, menos hallazgos repetidos y una visión más honesta de la salud de los controles. También incluyen el costo evitado de las sorpresas tardías en un ciclo de certificación. Construye el caso con tus propios números: las horas de preparación de auditoría antes y después, el plazo de entrega de la evidencia, el número y la antigüedad de los hallazgos y el costo de cualquier retraso relacionado con auditorías en un trato comercial. Evita citar estudios sobre el costo del cumplimiento salvo que puedas rastrear su método y su relevancia. Cuenta el costo del programa y el riesgo de automatizar en exceso controles débiles. El tratamiento financiero más amplio aparece en el último tema de la parte anterior (véase el tema 7.7, Retorno de la inversión y caso de negocio).

Antipatrones y trampas

  • Preparar la auditoría en el último mes. Produce evidencia reconstruida y una carrera. Registra la evidencia a medida que ocurre el trabajo.
  • Capturas de pantalla como evidencia. Son manuales, fáciles de alterar y caras. Usa registros generados por el sistema.
  • Aspirar a cero hallazgos. Premia el alcance estrecho y los problemas ocultos. Sigue el cierre, las repeticiones y la cobertura.
  • Cerrar hallazgos por afirmación. El mismo hallazgo vuelve. Verifica el cierre de forma independiente.
  • Tratar a los auditores como adversarios. Aumenta el costo para ambas partes. Colabora en el diseño de la evidencia preservando la independencia.
  • Controles que no sirven a ninguna obligación. Cuestan esfuerzo y crían cinismo. Retíralos.
  • Automatizar un mal control. Produce evidencia de un control débil a escala. Prueba primero el control.
  • Segregación de funciones manual. Se apoya en la memoria. Aplícala en las herramientas y revisa las excepciones.

Modelo de madurez

Dimensión 1 Iniciar 2 Desarrollar 3 Estandarizar 4 Gestionar 5 Orquestar
Obligaciones y controles Conocidos por unas pocas personas Lista de obligaciones y de controles Asignados a controles, responsables y fuentes de evidencia Cobertura con seguimiento; solapamiento reducido; controles probados Marco de control unificado entre equipos, proveedores y regímenes
Evidencia Compilada antes de las auditorías Plantillas estándar y una carpeta de evidencia Las canalizaciones y los sistemas de registro producen buena parte de la evidencia Tasa de automatización, plazo de entrega y esfuerzo gestionados Aseguramiento continuo con auditores que consumen la evidencia directamente
Hallazgos y aprendizaje Hallazgos discutidos y cerrados por afirmación Hallazgos con seguimiento Hallazgos tratados como registros de problema con verificación independiente Repeticiones y tiempo de cierre analizados y retroalimentados al diseño de controles Hallazgos compartidos en toda la organización y con los socios; la mejora es rutina

Lista de verificación

  • Las obligaciones aplicables están enumeradas en lenguaje llano, con responsables.
  • Cada obligación está asignada a controles y a una fuente de evidencia.
  • Los cambios de producción llevan automáticamente vinculada la evidencia de petición, revisión, pruebas y despliegue.
  • Las comprobaciones de política imponen la revisión y la separación de funciones en la canalización.
  • Las pistas de auditoría son resistentes a la manipulación y se conservan durante el periodo exigido.
  • Existe un índice de evidencia, y se mide el plazo de entrega de las peticiones.
  • Se consulta a los auditores sobre el diseño de la evidencia preservando la independencia.
  • Los hallazgos se registran como registros de problema y se cierran con verificación independiente.
  • Los hallazgos repetidos se vinculan con sus predecesores y se examinan sus causas.
  • El esfuerzo de auditoría se sigue como tendencia y se revisa en busca de duplicación.

Prompts de IA

Asigna obligaciones a controles.

Aquí hay una lista de obligaciones que aplican a nuestro servicio en [sector and
jurisdiction]: [paste in plain language]. Aquí está nuestra lista de controles:
[paste]. Construye una tabla que asigne cada obligación a controles, a la
evidencia que muestra que cada control opera y a un rol responsable. Señala las
obligaciones sin control, los controles sin obligación y la evidencia débil. No
des conclusiones jurídicas. Enumera tus supuestos y las preguntas para el área
jurídica y de cumplimiento.

Planifica la automatización de la evidencia.

Nuestra evidencia manual de auditoría incluye: [list items with hours spent].
Nuestros sistemas de registro son: [list tools]. Ordena los elementos de
evidencia por esfuerzo y riesgo y propón cómo podría recogerse cada uno
automáticamente de un sistema de registro, qué hace fiable la evidencia
(resistencia a la manipulación, completitud) y qué confirmar con los auditores.
No supongas funciones de herramientas concretas. Enumera tus supuestos.

Analiza los hallazgos repetidos.

Aquí hay hallazgos de los últimos [number] ciclos de auditoría, con causas y
correcciones: [paste, sanitized]. Agrupa los hallazgos por causa subyacente,
identifica las repeticiones y sugiere por qué las correcciones anteriores no se
sostuvieron. Propón una regla para emparejar hallazgos por causa y un paso de
verificación para el cierre. No especules más allá de la información dada.
Enumera tus supuestos.

Prepara una conversación temprana con los auditores.

Redacta una agenda para una reunión con la auditoría interna sobre el cambio de
cómo producimos la evidencia de [control or process]. Incluye lo que planeamos
cambiar, las preguntas que necesitamos que se respondan (evidencia aceptable,
muestreo, materialidad), lo que no les pediremos que hagan para preservar la
independencia y cómo registraremos el resultado. Usa lenguaje llano. Enumera
tus supuestos y riesgos.

Habilidades de IA

Puntos clave

  • Produce la evidencia como subproducto de la entrega, a partir de canalizaciones y sistemas de registro, y mide cuánta es automática.
  • Asigna cada obligación a un control, un responsable y una fuente de evidencia.
  • Invita pronto a los auditores al diseño de la evidencia, y protege su independencia.
  • Cierra los hallazgos eliminando las causas, verifica el cierre de forma independiente y vigila la tasa de hallazgos repetidos.
  • Evita metas como cero hallazgos, y sigue el esfuerzo junto con los resultados.
  • Aplica la separación de funciones en las herramientas y mantén las pistas de auditoría resistentes a la manipulación.

Referencias y lecturas complementarias

  1. ISO/IEC 27001, Information security, cybersecurity and privacy protection: Information security management systems: Requirements, International Organization for Standardization.
  2. Institute of Internal Auditors, Global Internal Audit Standards, 2024.
  3. American Institute of Certified Public Accountants, Trust Services Criteria (used in SOC 2 examinations), latest version.
  4. Kim, G., Humble, J., Debois, P., and Willis, J., The DevOps Handbook, IT Revolution, 2016.
  5. Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
  6. Beck, K., et al., Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org/principles.html.
  7. Wikipedia, Regulatory compliance.
  8. Wikipedia, Information technology audit.
  9. Wikipedia, Continuous auditing.
  10. Wikipedia, Audit trail.
  11. Wikipedia, ISO/IEC 27001.
  12. Wikipedia, Sarbanes–Oxley Act.
  13. Wikipedia, General Data Protection Regulation.
  14. Wikipedia, SOC 2.
  15. Wikipedia, Goodhart's law.
  16. Wikipedia, Segregation of duties.
  17. Wikipedia, Internal audit.