Метрики соответствия и аудита
Соответствие проще и честнее всего, когда свидетельства производит сама работа, поэтому измеряйте, какая часть свидетельств приходит автоматически, как быстро исправляются находки и как часто одна и та же находка возвращается, и относитесь к аудиторам как к заинтересованным сторонам, присоединяющимся к разговору рано.
Обзор и мотивация
Большинство организаций, строящих и ведущих ИТ-услуги, перед кем-то отчитываются: регуляторами, клиентами, органами сертификации, страховщиками, советами. Соответствие регулированию есть акт соблюдения законов, правил и стандартов и демонстрации этого. Аудит есть систематическое рассмотрение свидетельств, чтобы судить, так ли это. В ИТ сюда входят аудиты контролей финансовой отчётности, обязательств по защите данных, сертификаций безопасности и договорных обязательств. Аудит информационных технологий рассматривает контроли вокруг систем и данных, которые они хранят.
У соответствия и непрерывной поставки репутация трения. Соответствие просит документы, подписи и утверждения до изменения, а непрерывная поставка предпочитает малые изменения, выпускаемые непрерывно. Трение реально, когда соответствие рассматривается как фаза в конце. Оно ослабевает, когда соответствие встроено в поток работы. Записи об изменениях, рецензирование кода, автоматизированные тесты и логи доступа суть свидетельства, а конвейер поставки производит их каждый день. Непрерывный аудит использует автоматизированные проверки контролей почти в реальном времени вместо периодических выборок и соответствует ритму непрерывной поставки. Журнал аудита есть запись, показывающая, кто что сделал, когда, в какой системе, и это часто сильнейшее свидетельство, которое у вас есть.
ITIL описывает соответствующие практики: управление информационной безопасностью, управление рисками и управление системой создания ценности, и указывает на стандарты вроде ISO/IEC 27001 для систем управления информационной безопасностью. Рамки, с которыми организации обычно сталкиваются, включают режимы отчётности по финансовым контролям, такие как закон Сарбейнса-Оксли в США, законы о защите данных, такие как Общий регламент по защите данных в Европейском союзе, и отчёты обеспечения уверенности, такие как SOC 2, рассматривающие контроли, относящиеся к безопасности и связанным критериям. Детали различаются по юрисдикции, сектору и дате, и эта тема описывает практику измерения, а не юридические требования. Работайте с вашими коллегами по соответствию, праву и аудиту по тому, что применимо к вам.
Цель метрик соответствия состоит в том, чтобы узнать, насколько хорошо организация выполняет свои обязательства и сколько усилий это требует, чтобы улучшить оба. Риск в том, что соответствие становится представлением для аудитора. Команда может пройти аудит, производя документы в последний момент, и всё же вести рискованные практики. Ограждение из закона Гудхарта применимо: когда целью становятся «находки аудита», люди избегают пристального внимания, сужают область и торгуются о формулировках (см. тему 1.2, Закон Гудхарта и психология метрик).
Помогают две линии мысли.
- Соответствие как побочный продукт. Если конвейер записывает рецензирование, тестирование, утверждение и развёртывание автоматически, свидетельства существуют, близок аудит или нет. Это также убирает искушение восстанавливать свидетельства потом.
- Аудиторы как заинтересованные стороны. Практика Agile ценит непрерывное сотрудничество с заинтересованными сторонами. Аудиторы и оценщики суть заинтересованные стороны с законными вопросами. Вовлечение их в проектирование контролей и свидетельств сокращает сюрпризы и переделки, сохраняя их независимость.
Ключевые принципы
- Производите свидетельства как побочный продукт работы. Конвейеры, заявки и логи должны отвечать на большинство вопросов аудита.
- Сопоставляйте обязательства с контролями и владельцами. У каждого обязательства есть контроль, а у каждого контроля есть владелец.
- Сотрудничайте с аудиторами рано. Делитесь проектами и подходами к свидетельствам до аудита и сохраняйте их независимость.
- Исправляйте причины, а не находки. Находка, закрытая без устранения причины, возвращается.
- Измеряйте усилия так же, как результат. Цена соответствия есть часть картины.
- Сохраняйте разделение обязанностей там, где это важно. Независимость пересмотра есть контроль, который автоматизация может поддерживать, но не заменить.
- Будьте честны о пробелах. Самосообщённые слабости лучше находить вам, чем другим.
Определения метрик
| Метрика | Определение | Формула | Единица | Источник данных | Практика ITIL | Agile-аналог | Периодичность |
|---|---|---|---|---|---|---|---|
| Охват обязательств | Доля применимых обязательств, сопоставленных с контролем, владельцем и источником свидетельств | обязательства, сопоставленные хотя бы с одним контролем с владельцем и источником свидетельств / применимые обязательства | процент | Реестр обязательств и реестр контролей | Управление; управление информационной безопасностью; управление рисками | Определение готовности включает свидетельства контроля | Раз в квартал |
| Доля автоматизации свидетельств | Доля свидетельств контролей в области, собираемая автоматически из учётных систем | элементы свидетельств контролей, собранные автоматически / требуемые элементы свидетельств | процент | Реестр контролей, логи конвейера и систем | Управление информационной безопасностью; управление изменениями (change enablement) | Конвейер записывает рецензирование, тесты и развёртывание автоматически | Раз в квартал |
| Время подготовки свидетельств | Время предоставления свидетельств, запрошенных аудитором или оценщиком | медиана и 85-й перцентиль дней от запроса до принятого свидетельства | дни | Трекер запросов аудита | Управление; управление информационной безопасностью | Отзывчивость на вопрос заинтересованной стороны | По аудиту |
| Время закрытия находок | Время закрытия находок аудита по серьёзности | медиана и 85-й перцентиль дней от выдачи находки до проверенного закрытия | дни | Трекер находок | Непрерывное улучшение; управление рисками | Время исправления дефекта | Раз в месяц |
| Доля повторных находок | Доля находок, повторяющихся с предыдущего аудита или пересмотра | находки, по существу совпадающие с ранее закрытой находкой / находки в периоде | процент | Трекер находок со связями причин | Непрерывное улучшение; управление проблемами | Повторяющийся дефект после исправления | По циклу аудита |
| Конфликты разделения обязанностей | Число сочетаний доступа или утверждения, нарушающих правила разделения, и время разрешения | обнаруженные конфликты; медиана дней до разрешения | число; дни | Инструменты управления идентификацией и доступом, записи об изменениях | Управление информационной безопасностью; управление изменениями | Независимый пересмотр изменений | Раз в месяц |
| Усилия на аудит | Человеко-часы, которые организация тратит на подготовку к циклу аудита и его поддержку, на единицу области | часы, записанные на подготовку к аудиту и поддержку / контроли или системы в области | часов на единицу | Записи времени или оценки усилий | Управление; непрерывное улучшение | Цена работы, не являющейся поставкой | По циклу аудита |
Указывайте обязательства в области и область аудита в реестре. Время закрытия начинается, когда находка выдана, и останавливается, когда аудитор или независимый проверяющий подтверждает закрытие, а не когда команда говорит, что готово. Повторные находки сопоставляются по причине, а не по формулировке, а правило сопоставления записывается. Усилия на аудит есть мера тренда для организации и никогда мера отдельных людей.
Рекомендации
Знайте свои обязательства и контроли
1. Перечислите применимые обязательства простым языком. Вместе с коллегами по праву и соответствию перечислите законы, стандарты, контракты и политики, связывающие услугу, и что каждое требует в терминах результатов. Держите список коротким и читаемым. Обязательства, которые никто не может изложить просто, суть те, что вызывают сюрпризы аудита.
2. Сопоставьте каждое обязательство с контролями, владельцами и свидетельствами. Для каждого обязательства назовите контроль, который его выполняет, подотчётного человека и свидетельство, показывающее, что контроль работает. Где один контроль выполняет несколько обязательств, скажите об этом, потому что это сокращает дублирование усилий. Охват обязательств измеряет полноту этой карты. Несопоставленные обязательства суть пробелы, которые надо закрыть или сознательно принять.
3. Предпочитайте меньше, но сильнее контролей. Автоматизированный и испытанный контроль стоит нескольких ручных. Ищите перекрывающиеся контроли и выводите те, что не служат ни одному обязательству. Каждый контроль стоит усилий на работу и на свидетельства (см. тему 8.2, Метрики рисков и контролей).
Сделайте свидетельства побочным продуктом
4. Пусть конвейер производит свидетельства. Связывайте каждое продуктивное изменение с запросом, рецензированием кода, результатами тестов и утверждением, где оно требуется, всё записывается автоматически. Запись о развёртывании, показывающая это, говорит аудитору, что произошло, без написания документа. Это опирается на практики непрерывной поставки, которыми команды Agile уже пользуются (см. тему 4.5, Метрики релизов и развёртывания).
5. Используйте проверки политик в конвейере. Закодируйте правила, такие как «нет развёртывания без рецензирования кем-то, кроме автора» или «нет продуктивного доступа без заявки», как автоматизированные проверки. Проверка есть и контроль, и его свидетельство. Держите правила видимыми и версионированными, чтобы изменения в них тоже записывались. Это поддерживает разделение обязанностей, принцип, по которому никто один не должен контролировать все стадии чувствительного процесса.
6. Сохраняйте журналы аудита должным образом. Храните логи доступа и изменений так, чтобы их нельзя было изменить людям, которых они описывают, сохраняйте их в требуемый срок и делайте доступными для поиска. Журнал, который могут править те, кого он записывает, есть слабое свидетельство. Проверяйте правила хранения с коллегами по праву.
7. Измеряйте, какая часть свидетельств автоматическая. Доля автоматизации свидетельств показывает, где остаётся ручной сбор. Ранжируйте ручные элементы по усилиям и риску и сначала автоматизируйте худшие. По мере роста доли усилия на аудит и время подготовки падают.
Работайте с аудиторами
8. Приглашайте аудиторов в проектирование. Делитесь планируемыми изменениями контролей и свидетельств с внутренним аудитом и внешними оценщиками рано и спрашивайте, что их удовлетворит. Независимость означает, что они не проектируют ваши контроли, и не означает, что они не могут сказать, какие свидетельства им понадобятся. Ранние разговоры сокращают переделки. Институт внутренних аудиторов публикует стандарты профессии, объясняющие роль внутреннего аудита.
9. Подготовьте указатель свидетельств. Ведите живой указатель, где находится каждый тип свидетельств и как его получить. Отслеживайте время подготовки по запросам свидетельств и используйте задержки, чтобы находить недостающую автоматизацию. Короткий устойчивый процесс лучше авральной суеты перед каждым аудитом.
10. Договоритесь о значении существенности и области. Спросите аудиторов, как они судят, что важно и что в области, и запишите ответ. Общее понимание предотвращает споры позже. Не сужайте область, чтобы избежать пристального внимания, и не расширяйте её без причины.
Исправляйте причины и учитесь
11. Относитесь к каждой находке как к записи о проблеме. Найдите причину, исправьте её и подтвердите закрытие независимым лицом. Связывайте повторные находки с более ранними и разбирайте, почему первое исправление не удержалось. Высокая доля повторных находок указывает на исправления, лечившие симптомы, что связано с управлением проблемами (см. тему 4.1, Метрики управления проблемами).
12. Отслеживайте цену и сокращайте её. Записывайте усилия на аудит по циклам. Если усилия высоки и не меняются, ищите дублирование между аудитами, ручной сбор свидетельств и контроли, не служащие никому. Сообщайте тренд усилий вместе с результатами. Соответствие стоит своей цены, когда сокращает реальный риск, и метрики помогают это различить.
Векторы манипуляции и ограждения
| Метрика | Как её искажают | Парная метрика или практика-ограждение |
|---|---|---|
| Охват обязательств | Сопоставлять обязательства со слабыми или нерелевантными контролями; определять обязательства узко | Пересмотр релевантности контролей второй стороной; испытание контролей (см. тему 8.2, Метрики рисков и контролей) |
| Доля автоматизации свидетельств | Засчитывать снимки экрана или выгрузки как автоматические; сначала автоматизировать малоценные свидетельства | Определять автоматическое как порождённое системой и защищённое от подделки; ранжировать по риску |
| Время подготовки свидетельств | Быстро предоставлять частичные свидетельства; торговаться о формулировке запроса | Считать только принятые свидетельства; отслеживать дополнительные запросы |
| Время закрытия находок | Закрывать находки без проверки; переклассифицировать серьёзность | Независимая проверка; журнал изменений серьёзности |
| Доля повторных находок | Переформулировать находки, чтобы они не совпадали; закрывать более раннюю находку как другой тип | Сопоставлять по причине с записанным правилом; пересмотр внутренним аудитом |
| Конфликты разделения обязанностей | Переносить конфликты в системы вне области; выдавать временный доступ, который не записывается | Охватывать все системы с чувствительными процессами; пересматривать временный доступ |
| Усилия на аудит | Не записывать часы; переносить усилия на другие бюджеты | Выборочная проверка записей времени; сравнение с опросами команд |
Здоровое чтение есть растущая автоматизация свидетельств, более короткое и устойчивое время подготовки, находки, закрытые с проверкой, низкая доля повторов и усилия на аудит, падающие по мере взросления процесса.
Компромиссы: плюсы и минусы
| Подход | Сильная сторона | Слабая сторона |
|---|---|---|
| Периодические ручные свидетельства | Знакомы аудиторам | Дорого; восстанавливаются постфактум |
| Автоматизированные непрерывные свидетельства | Дёшево поддерживать; своевременно | Нужна инженерия; аудиторам нужно доверять источнику |
| Тяжёлые утверждения | Видимый контроль | Медленно; накапливают изменения |
| Автоматизированные проверки политик | Единообразно и быстро | Правила должны быть верными и видимыми |
| Раннее вовлечение аудиторов | Меньше сюрпризов | Нужна осторожность для сохранения независимости |
| Аудит в конце | Ясное разделение | Поздние находки; переделки |
| Один контроль на многие обязательства | Эффективно | Один отказ затрагивает несколько обязательств |
| Много специфичных контролей | Ясное сопоставление | Дублирование усилий |
Ответ прост: автоматизируйте свидетельства из конвейера и учётных систем, вовлекайте аудиторов рано в проект, сохраняя их независимость, и держите стройный набор сильных контролей, сопоставленных с обязательствами.
Вопросы для обсуждения в команде
1. Какой вопрос аудита требует у нас больше всего времени на ответ и почему? Выберите самый медленный запрос свидетельств с последнего аудита и проследите его. Свидетельство отсутствует, разбросано или в чьей-то голове? Обсудите, что сделало бы его автоматическим. Ведущему стоит зафиксировать цену в часах.
2. Можем ли мы показать для любого продуктивного изменения за последний месяц, кто его рецензировал и какие тесты шли? Выберите изменение наугад и попробуйте. Отметьте, где цепочка рвётся. Договоритесь об одном улучшении записи об изменении или конвейера, закрывающем пробел.
3. Что мы обещали на последнем аудите и удержалось ли это? Просмотрите находки и исправления. По каждому спросите, была ли устранена причина и кто проверил закрытие. Ищите повторы. Договоритесь рассмотреть глубже одну находку.
4. Что сказали бы нам аудиторы, если бы мы спросили, как облегчить свидетельства? Запланируйте разговор с внутренним аудитом или оценщиком о проекте свидетельств. Спросите, чему они доверяют, а чему нет. Ведущему стоит воспринимать их ответы как информацию и помнить о правилах независимости.
5. Какие контроли мы ведём такие, что ни одному обязательству не нужны? Перечислите контроли и обязательства, которым они служат. Найдите те, у которых нет ясной цели. Обсудите их вывод и свидетельства, что они не нужны.
6. Где здесь один человек мог бы сделать нечто чувствительное от начала до конца? Подумайте о развёртывании, выдаче доступа и платежах. Проверьте, обеспечивают ли разделение инструменты или только политика. Обсудите компенсирующие контроли, такие как автоматизированный пересмотр, где персонала мало.
Четыре точки зрения
Продуктовые команды и команды поставки
Команды поставки производят значительную часть свидетельств, хорошо делая свою работу. Им следует держать записи об изменениях, рецензировании и тестах связанными, использовать проверки политик конвейера и поднимать опасения о контролях, замедляющих работу без снижения риска. Им выгодны ранние разговоры с аудиторами о том, какого свидетельства достаточно.
Команды услуг и эксплуатации
Команды эксплуатации ведут управление доступом, логирование, резервные копии и обработку инцидентов, центральные для многих аудитов. Им следует держать логи защищёнными от подделки и сохранёнными, проводить пересмотры доступа по графику и вести указатель свидетельств. Они несут бремя ручных свидетельств и могут указать, где автоматизация помогла бы больше всего.
Руководство и управление
Руководители подотчётны за соответствие и часто за исходы аудитов. Им следует финансировать автоматизацию свидетельств, просить охват и долю повторных находок вместо одного числа находок и поддерживать независимость аудиторов. Управлению следует ожидать честных отчётов о пробелах и плана по каждому.
Клиенты и пользователи
Клиенты и пользователи полагаются на соответствие как на уверенность в том, как обращаются с их данными и услугами. Им выгодно, когда отчёты обеспечения уверенности ясны, когда об инцидентах сообщают как требуется и когда контроли не усложняют законное использование сверх необходимого. Прозрачная коммуникация о соответствии строит доверие.
На практике: пример из управления услугами
Платёжная компания среднего размера ведёт платформу обработки карт и ежегодно оценивается по рамке обеспечения уверенности безопасности и режиму защиты данных. Числа ниже иллюстративны.
Подготовка к аудиту занимает у инженерных команд около шести недель каждый год. Прошлогодняя оценка закрылась 14 находками, из которых 5 повторились с предыдущего года. Руководитель по соответствию составляет картину. Охват обязательств составляет 83 %, причём у 17 % обязательств нет названного владельца контроля. Автоматизация свидетельств составляет 22 %, и большинство свидетельств по утверждению изменений идёт из снимков экрана заявок, составленных вручную. Медианное время подготовки свидетельств составляет 9 дней при 85-м перцентиле 21 день. Медианное время закрытия находок составляет 74 дня, и закрытие часто отмечалось владеющей командой без проверки.
Руководитель по соответствию работает с командами поставки и эксплуатации и внутренним аудитором. Они меняют четыре вещи. Каждое продуктивное изменение в конвейере теперь связывается с запросом, рецензированием кода кем-то, кроме автора, результатами тестов и развёртыванием, записываемыми автоматически в записи об изменении. Проверка политики блокирует развёртывание без независимого рецензирования и записывает путь исключения для экстренных случаев. Пересмотры доступа идут ежеквартально из системы идентификации, напрямую показывающей конфликты разделения обязанностей. Каждая находка становится записью о проблеме с независимым проверяющим из внутреннего аудита, а повторные находки связываются с предшественницами.
На следующей оценке доля автоматизации свидетельств составляет 71 %, медианное время подготовки свидетельств 2 дня, 85-й перцентиль 5 дней, а подготовка к аудиту занимает около двух недель. Охват обязательств составляет 97 %, остальные элементы имеют документированное принятие. Находки падают до 6, с одним повтором, а медианное время закрытия 31 день с независимой проверкой. Генеральный директор просит ноль находок на следующий год. Руководитель по соответствию предлагает отслеживать повторные находки, время закрытия и автоматизацию свидетельств и объясняет, что цель в ноль находок толкает команды прятать проблемы или сужать область, а оценщик, не нашедший ничего, мог не искать достаточно усердно. Решение записано, а совет соглашается пересмотреть меры на следующем заседании.
Agile, ИИ, автоматизация и аналитика
Agile
Производите свидетельства как побочный продукт работы и приглашайте аудиторов в разговор рано. Осторожность в том, что цель по находкам аудита может отбить честное самосообщение.
ИИ
Обязательства, связанные с ИИ, меняются, поэтому проверяйте применимое право у вашего юридического консультанта и ведите инвентарь систем ИИ как свидетельство. Не просите инструмент ИИ формулировать утверждения о соответствии. Осторожность в том, что сводки свидетельств, порождённые ИИ, нуждаются в проверке человеком по источнику.
Автоматизация
Автоматизируйте сбор свидетельств из конвейеров и инструментов и измеряйте долю автоматизации свидетельств и время подготовки. Осторожность в том, что автоматизация может производить свидетельства полные, но неверные, поэтому проверяйте выборку.
Аналитика
Сообщайте повторные находки и время закрытия со счётами. Решение, которое это информирует, состоит в том, где контроли отказывают повторно. Осторожность в том, что усилия на аудит есть цена, а не цель, и их сокращение не должно сокращать охват.
Отраслевой взгляд
Стартап. Обязательства могут появиться внезапно с крупным клиентом или раундом финансирования. Стройте привычки рано: рецензирование коллегами, записи об изменениях и контроль доступа в конвейере, чтобы свидетельства существовали, когда о них попросят. Выберите одну рамку, когда бизнесу она нужна, и сопоставьте её с тем, что вы уже делаете.
Малый бизнес. Обязанности по соответствию часто задаются контрактами и законом, а ресурсов мало. Ведите короткий список обязательств, полагайтесь на управляемые услуги с их собственными отчётами обеспечения уверенности и ведите простую папку свидетельств. Остерегайтесь покупки инструментов соответствия, стоящих больше, чем риск, который они адресуют.
Крупная компания. Многие обязательства перекрываются, поэтому единая рамка контролей, сопоставляющая один контроль со многими обязательствами, экономит большие усилия. Используйте общие источники свидетельств, общий трекер находок и календарь аудитов, чтобы избежать повторных запросов. Координируйте внутренний аудит, соответствие и безопасность, чтобы команды не проверяли трижды на одно и то же.
Государство и публичный сектор. Обязанности по соответствию обширны и публичны, включая правила закупок, записей, доступности и защиты данных, с аудитами национальными органами. Документируйте решения и свидетельства в требуемый срок, делайте отчёты единообразными между ведомствами, где возможно, и держите ясную линию между независимым аудитом и управлением. Обязательства могут меняться с выборами и законодательством (см. тему 8.5, Регулируемая и государственная отчётность).
Бизнес-обоснование: мотивы, ROI и TCO
Затраты включают инструменты реестра контролей, интеграцию конвейера для свидетельств, системы идентификации и логирования и время сотрудников по соответствию и команд. Первоначальные усилия по автоматизации свидетельств значительны, и они заменяют повторяющуюся ручную работу.
Отдача есть меньшие повторяющиеся усилия на аудит, более быстрые ответы на запросы, меньше повторных находок и более честный взгляд на здоровье контролей. Она также включает избегнутую цену сюрпризов поздно в цикле сертификации. Стройте обоснование из собственных чисел: часы подготовки к аудиту до и после, время подготовки свидетельств, число и возраст находок и цену любой связанной с аудитом задержки в коммерческой сделке. Избегайте цитирования исследований цены соответствия, если не можете проследить их метод и релевантность. Учитывайте цену программы и риск чрезмерной автоматизации слабых контролей. Более широкое финансовое рассмотрение появляется в последней теме предыдущей части (см. тему 7.7, Возврат инвестиций и бизнес-обоснование).
Антипаттерны и ловушки
- Подготовка к аудиту в последний месяц. Она производит восстановленные свидетельства и суету. Записывайте свидетельства по ходу работы.
- Снимки экрана как свидетельства. Они ручные, легко подделываются и дороги. Используйте записи, порождённые системой.
- Цель в ноль находок. Она награждает узкую область и скрытые проблемы. Отслеживайте закрытие, повторы и охват.
- Закрытие находок утверждением. Та же находка возвращается. Проверяйте закрытие независимо.
- Отношение к аудиторам как к противникам. Это повышает цену с обеих сторон. Сотрудничайте над проектом свидетельств, сохраняя независимость.
- Контроли, не служащие ни одному обязательству. Они стоят усилий и порождают цинизм. Выводите их.
- Автоматизация плохого контроля. Она производит свидетельства слабого контроля в масштабе. Сначала испытайте контроль.
- Ручное разделение обязанностей. Оно полагается на память. Обеспечивайте его в инструментах и пересматривайте исключения.
Модель зрелости
| Измерение | 1 Инициирование | 2 Развитие | 3 Стандартизация | 4 Управление | 5 Оркестрация |
|---|---|---|---|---|---|
| Обязательства и контроли | Известны немногим | Список обязательств и контролей | Сопоставлены с контролями, владельцами и источниками свидетельств | Охват отслеживается; перекрытие сокращено; контроли испытываются | Единая рамка контролей между командами, поставщиками и режимами |
| Свидетельства | Собираются перед аудитами | Стандартные шаблоны и папка свидетельств | Конвейеры и учётные системы производят много свидетельств | Доля автоматизации, время подготовки и усилия управляются | Непрерывное обеспечение уверенности, аудиторы потребляют свидетельства напрямую |
| Находки и обучение | Находки оспариваются и закрываются утверждением | Находки отслеживаются | Находки рассматриваются как записи о проблемах с независимой проверкой | Повторы и время закрытия анализируются и возвращаются в проект контролей | Находки разделяются по организации и с партнёрами; улучшение рутинно |
Контрольный список
- Применимые обязательства перечислены простым языком, с владельцами.
- Каждое обязательство сопоставлено с контролями и источником свидетельств.
- Продуктивные изменения автоматически несут связанные свидетельства запроса, рецензирования, теста и развёртывания.
- Проверки политик обеспечивают рецензирование и разделение обязанностей в конвейере.
- Журналы аудита защищены от подделки и хранятся в требуемый срок.
- Указатель свидетельств существует, а время подготовки по запросам измеряется.
- С аудиторами консультируются по проекту свидетельств, независимость сохраняется.
- Находки записываются как записи о проблемах и закрываются с независимой проверкой.
- Повторные находки связаны с предшественницами и разбираются на причину.
- Усилия на аудит отслеживаются как тренд и пересматриваются на дублирование.
Промпты для ИИ
Сопоставьте обязательства с контролями.
Here is a list of obligations that apply to our service in [sector and
jurisdiction]: [paste in plain language]. Here is our list of controls:
[paste]. Build a table mapping each obligation to controls, the evidence that
shows each control operates, and an owner role. Flag obligations with no
control, controls with no obligation, and weak evidence. Do not give legal
conclusions. List your assumptions and questions for legal and compliance.
Спланируйте автоматизацию свидетельств.
Our manual audit evidence includes: [list items with hours spent]. Our systems
of record are: [list tools]. Rank the evidence items by effort and risk and
propose how each could be collected automatically from a system of record,
what makes the evidence trustworthy (tamper resistance, completeness), and
what to confirm with auditors. Do not assume features of specific tools. List
your assumptions.
Проанализируйте повторные находки.
Here are findings from the last [number] audit cycles, with causes and fixes:
[paste, sanitized]. Group findings by underlying cause, identify repeats, and
suggest why earlier fixes did not hold. Propose a rule for matching findings
by cause and a verification step for closure. Do not speculate beyond the
information given. List your assumptions.
Подготовьте ранний разговор с аудиторами.
Draft an agenda for a meeting with internal audit about changing how we
produce evidence for [control or process]. Include what we plan to change, the
questions we need answered (acceptable evidence, sampling, materiality), what
we will not ask them to do to preserve independence, and how we will record
the outcome. Use plain language. List your assumptions and risks.
Навыки ИИ
- Service Management Metrics skill: используйте, чтобы найти парное ограждение для метрики соответствия или аудита.
- Service Management Metrics maintainer skill: используйте, чтобы проверить, что запись метрики соответствия несёт свой вектор манипуляции, ограждение и правило независимости.
Главные выводы
- Производите свидетельства как побочный продукт поставки, из конвейеров и учётных систем, и измеряйте, какая часть автоматическая.
- Сопоставляйте каждое обязательство с контролем, владельцем и источником свидетельств.
- Приглашайте аудиторов в проект свидетельств рано и защищайте их независимость.
- Закрывайте находки устранением причин, проверяйте закрытие независимо и следите за долей повторных находок.
- Избегайте целей вроде нуля находок и отслеживайте усилия рядом с результатами.
- Обеспечивайте разделение обязанностей в инструментах и держите журналы аудита защищёнными от подделки.
Источники и дополнительное чтение
- ISO/IEC 27001, Information security, cybersecurity and privacy protection: Information security management systems: Requirements, International Organization for Standardization.
- Institute of Internal Auditors, Global Internal Audit Standards, 2024.
- American Institute of Certified Public Accountants, Trust Services Criteria (used in SOC 2 examinations), latest version.
- Kim, G., Humble, J., Debois, P., and Willis, J., The DevOps Handbook, IT Revolution, 2016.
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- Beck, K., et al., Principles behind the Agile Manifesto, 2001, https://agilemanifesto.org/principles.html.
- Wikipedia, Соответствие регулированию.
- Wikipedia, Аудит информационных технологий.
- Wikipedia, Непрерывный аудит.
- Wikipedia, Журнал аудита.
- Wikipedia, ISO/IEC 27001.
- Wikipedia, Закон Сарбейнса-Оксли.
- Wikipedia, Общий регламент по защите данных.
- Wikipedia, SOC 2.
- Wikipedia, Закон Гудхарта.
- Wikipedia, Разделение обязанностей.
- Wikipedia, Внутренний аудит.