Rain Lag

종이 인시던트 스토리 회전 주방: 아날로그 레시피 벽으로 끓여내는 신뢰도 의식

은유적인 주방, 아날로그 레시피 벽, 그리고 의도적인 의식들이 어떻게 인시던트 관리와 신뢰도 업무를 더 탄탄하고, 인간적이며, 의미 있는 일로 바꿀 수 있는지에 대한 이야기입니다.

종이 인시던트 스토리 회전 주방: 아날로그 레시피 벽으로 끓여내는 신뢰도 의식

대시보드, 알림, 끝없이 열린 브라우저 탭들이 넘쳐나는 세상에서 인시던트 대응은 마치 모든 도구는 투명하고, 재료는 다 다른 방에 흩어져 있는 주방에서 요리하는 느낌에 가깝습니다. 어떻게든 요리는 할 수 있지만, 엄청나게 스트레스 받고, 실수도 많고, 누구도 그 공간에 오래 있고 싶어 하지 않게 됩니다.

이 글은 그런 주방 말고 다른 종류의 주방을 만드는 이야기입니다. 이름하여 “종이 인시던트 스토리 회전 주방(The Paper Incident Story Carousel Kitchen)”. 디지털 세상 속에서 의도적으로 아날로그의 즐거움에 기대는 신뢰도 실천 방식에 대한 은유입니다. 벽 가득 붙어 있는 레시피, 손글씨 메모, 체크리스트가 자동화, 관측 가능성(observability), Jira Service Management 같은 도구들과 나란히 공존하는 모습이죠.

목표는 하나입니다. 신뢰도(리라이어빌리티) 업무가 잘 운영되는 프로페셔널 주방처럼 느껴지게 만드는 것. 반복 가능하고, 창의적이면서도, 압박 속에서도 차분한 공간으로요.


진짜 주방이 주는 아날로그의 즐거움

당신이 가장 좋아하는 주방을 떠올려 보세요. 살짝 잘 안 열리는 서랍이 하나쯤 있고, 지나치게 오래 써서 까맣게 익은 팬이 하나 있고, 오래 전에 받았던 할머니 레시피가 적힌 얼룩진 카드가 어딘가에 꽂혀 있을 겁니다. 그 작은 불완전함들이 이 공간을 인간적인 장소로 만들고, 묘하게도 더 믿을 만한 곳으로 느끼게 합니다.

그 주방에서는:

  • 칼이 어디에 있는지 몸이 기억합니다.
  • 파스타를 삶거나 채소를 굽는 자기만의 검증된 방식이 있습니다.
  • 새로운 향신료를 써 볼 수는 있지만, 손님 10명이 오는 날 처음 시도하지는 않습니다.

이런 아날로그 흔적들—레시피 카드, 여백에 휘갈겨 쓴 메모, 도마가 항상 놓이는 자리를 표시한 테이프 자국—는 “오늘 뭐 먹지?”라는 혼돈을, “이건 우리가 만들 줄 알고, 항상 잘 되는 메뉴야”라는 리듬으로 바꿉니다.

신뢰도 작업도 여기서 배울 수 있습니다. 인시던트 한가운데에서, 튼튼한 종이 레시피들로 채워진 벽은 스트레스받는 팀에 딱 필요한 것일 수 있습니다.


아날로그 레시피 벽: 손으로 만질 수 있는 런북

전쟁터 같은 워 룸(war room)을 하나의 주방이라고 상상해 봅시다.

한쪽 벽에는 **인시던트 스토리 회전대(carousel)**가 걸려 있습니다. 코팅된 카드, 짧은 소책자(zine) 스타일의 스토리북, 인쇄된 체크리스트들이 빙글빙글 돌며 꽂혀 있습니다. 각각은 하나의 레시피입니다.

  • “결제 API에서 갑작스러운 지연(latency) 스파이크가 발생했을 때의 대응 방법”
  • “고객 지원에서 광범위한 로그인 장애를 보고했을 때 가장 먼저 해야 할 일”
  • “문제 있는 설정 변경을 안전하게 롤백하는 단계별 절차”

각 레시피는 이런 특징을 가집니다.

  • 촉각적이다 – 종이, 카드, 보드에 꽂혀 있거나, 링 바인더에 묶여 있거나, 테이블 위에 펼쳐져 있습니다.
  • 내구성이 있다 – 와이파이가 끊기거나, 브라우저가 죽거나, SSO 제공업체 자체가 인시던트의 일부가 되어도 여전히 쓸 수 있습니다.
  • 기억에 남는다 – 카드를 손에 들고 넘겨보며, 완료한 단계에 표시를 해 나가는 물리적인 행위 자체가 사람들의 기억을 도와줍니다.

이게 바로 **아날로그 런북(analog runbook)**입니다. 주방의 믿을 수 있는 레시피들처럼, 이들이 창의성을 없애는 건 아닙니다. 다만 정말 중요한 순간에 안전한 기준선을 제공할 뿐입니다.


주방의 의식, 신뢰도 작업의 의식

프로 주방은 **의식(ritual)**으로 돌아갑니다. 칼집(knife roll)을 풀어 놓고, 미장플라스(mise en place: 재료를 미리 손질해 정리해 두는 것)를 세팅하고, 항상 손 닿는 곳에 맛보기 숟가락을 두는 식입니다. 이런 습관은 인지 부하를 줄이고, 온전히 요리에 집중할 수 있게 해 줍니다.

신뢰도 작업도 마찬가지 의식이 필요합니다.

  • 인시던트 스탠드업 의식 – 누가 인시던트 커맨더인가? 누가 커뮤니케이션 담당인가? 현재 타임라인은 어떻게 되는가?
  • 인계(핸드오프) 의식 – 누군가의 근무 교대 시간이 되면, 어떻게 소유권을 넘길 것인가? 자리를 뜨기 전에 반드시 남겨야 할 기록은 무엇인가?
  • 포스트 인시던트 의식 – 무엇이 있었는지 비난 없는(blameless), 교육적이고 실행 가능한 방식으로 어떻게 이야기로 재구성할 것인가?

이 의식들을 물리적인 아티팩트로 설계하면—예를 들어 인쇄된 체크리스트, 인시던트 라이프사이클이 그려진 벽 포스터, 역할과 책임이 적힌 인덱스 카드—그것들은 “컨플루언스 어딘가에 있는 문서”가 아니라 실제로 쓰이게 되는 도구가 됩니다.

여기서 아날로그는 디지털과 경쟁하지 않습니다. 오히려 **디지털을 고정(anchor)**해 줍니다. 종이 체크리스트는 “Jira Service Management를 업데이트하라”라고 상기시켜 주는 역할을 할 뿐, 그걸 대신하려는 게 아닙니다.


실험과 신뢰도: 신규 메뉴와 하우스 시그니처의 균형

좋은 주방은 평생 같은 메뉴만 내놓지 않습니다. 스페셜 메뉴도 있고, 새로운 조합과 기술을 시도해 봅니다. 하지만 저녁 풀 서비스 전체를 지금 막 떠올린 레시피로 돌리지는 않습니다.

팀도 같은 긴장 관계 속에 있습니다.

  • **새 기능을 빠르게 배송(Ship)**해야 하는 요구 vs.
  • 시스템을 안정적으로 유지해야 하는 책임

주방을 떠올리면 이 균형을 설계하기 쉬워집니다.

  • 하우스 시그니처(대표 메뉴): 과금, 인증, 핵심 API 같은 코어 플로우들. 여기는 가장 정교하고, 전투를 거치며 다듬어진 런북이 필요합니다. 코팅되어 있고, 눈에 잘 띄고, 항상 최신 상태로 유지됩니다.
  • 신규 메뉴: 실험적인 서비스, 베타 기능, 리스크가 큰 마이그레이션 등. 이런 곳에서는:
    • 트래픽이 적은 시간대에 작은 실험을 돌리고,
    • 일부러 거칠게 만든 버전 0 레시피를 두고, 빠르게 고쳐 나가며,
    • 명시적인 세이프티 레일을 둡니다. 롤백 카드, 사전 점검(pre-flight) 체크리스트 같은 것들로요.

신뢰도 의식을 요리 의식처럼 다루면, 다음 두 가지 함정을 피할 수 있습니다.

  1. 레시피 하나 없이 그냥 배포해 버리는 상태(순도 100%의 혼돈)
  2. 메뉴를 꽁꽁 얼려 아무것도 바뀌지 않는 상태(정체)

그 대신, 실험 자체를 ‘위험을 인지한 레시피’의 언어로 설계하는 문화를 만들 수 있습니다.


디지털 스택 속에서 여전히 물리적 아티팩트가 중요한 이유

우리는 이미 훌륭한 디지털 도구들을 가지고 있습니다. 런북 저장소, 인시던트 타임라인, 실시간 대시보드, Slack 봇 등등. 그런데도 왜 굳이 아날로그를 신경 써야 할까요?

인시던트가 터졌을 때, 사람들이 손이 먼저 가는 것은 다음과 같기 때문입니다.

  • 검색 없이 눈에 보이는 것 – “컨플루언스 어느 스페이스더라?”보다 벽에 붙어 있는 포스터가 훨씬 빠릅니다.
  • 손에 쥘 수 있는 것 – “당신이 인시던트 커맨더입니다. 이게 당신의 스크립트예요.”라며 카드를 건넬 수 있습니다.
  • 현실감을 주는 것 – 아드레날린이 치솟는 순간, 손에 잡히는 무언가는 사람들을 안정시킵니다.

유용한 물리적 아티팩트의 예시는 이렇습니다.

  • 인시던트 역할 카드 – 각 카드에 Commander, Scribe, Comms, Tech Lead 같은 역할과 핵심 책임이 정리돼 있습니다.
  • 라이프사이클 포스터 – 인시던트의 단계가 한눈에 보이게 정리된 시각적 맵: Detect → Triage → Stabilize → Recover → Review.
  • 사전/종료 체크리스트 – 대형 릴리스, 위험도 높은 마이그레이션, 데이터 백필(backfill) 작업 전후에 사용하는 리스트.
  • 인시던트 스토리 카드 – 인시던트가 끝난 뒤, “무슨 일이 있었고, 무엇을 시도했고, 결국 무엇이 먹혔는지”를 간단한 레시피 카드 형식으로 다시 정리한 것.

잘 설계된 이 물리적 도구들은 결국 환경의 일부가 됩니다. 아무 생각 없이 손이 가는 향신료 선반처럼요.


디지털 가전제품: 자동화는 주방의 기계 장비

레시피가 아날로그 뼈대라면, 런북 자동화와 인시던트 관리 플랫폼은 주방의 가전제품입니다.

Jira Service Management, 자동화 스크립트, 관측/모니터링 플랫폼 같은 도구들은 다음과 같은 역할을 합니다.

  • 오븐과 가스레인지 – 워크플로를 시작하고, 인시던트 티켓을 만들고, 타임라인을 자동으로 첨부하는 등 반복 가능하고 믿을 만한 작업을 수행합니다.
  • 온도계와 타이머 – 어떤 것이 과열되고 있는지, 만료되었는지, 예상에서 벗어나고 있는지를 알려 줍니다.
  • 식기 세척기 – 알림 전파, 상태 페이지 업데이트, 후속 작업 생성 같은 뒷정리 업무를 담당합니다.

하지만 이 도구들 중 그 무엇도 “오늘 무슨 요리를 할지”, **“언제 즉흥적으로 대응해야 할지”**를 대신 결정해 주지는 않습니다. 그건 여전히 사람의 판단입니다.

건강한 신뢰도 문화는 이렇게 구성됩니다.

  • 아날로그 의식으로 일을 인간적이고, 이해하기 쉽고, 현실에 발 딛게 만들고,
  • 디지털 도구로 지루하고, 시간에 민감하고, 실수하기 쉬운 부분을 자동화합니다.

벽에 붙은 레시피 카드에는 이렇게 적혀 있을 수 있습니다.

“이제 Jira Service Management에서 runbook XYZ를 사용해 인시던트 워크플로를 트리거하라.”

종이는 **지도(map)**이고, 도구는 **자동차(car)**입니다. 둘 다 필요합니다.


당신만의 인시던트 스토리 회전 주방 만들기

주방 전체를 리모델링할 필요는 없습니다. 레시피를 다듬듯이, 작게 시작해서 점진적으로 키우면 됩니다.

  1. 당신 팀의 ‘명장면’부터 모으기

    • 최근 있었던, 기억에 남을 만한 인시던트 3–5개를 고릅니다.
    • 각 인시던트를 간단한 레시피로 정리합니다.
      • 상황(Situation)
      • 신호(Signals: 무엇을 보았는가)
      • 첫 체크(First checks)
      • 이미 검증된 완화(mitigation) 단계
  2. 프린트해서 일하는 공간에 붙이기

    • 인덱스 카드, A4 용지, 작은 링 바운드 책자 등 어떤 형태든 좋습니다.
    • 평소 인시던트 대응을 하는 공간—벽, 테이블, ‘고-백(go-bag)’—에 실제로 눈에 보이게 둡니다.
  3. 최소한의 의식부터 설계하기

    • 인시던트를 선언(declare)할 때 쓰는 체크리스트 1개.
    • 인시던트를 종료하고 리뷰를 예약할 때 쓰는 체크리스트 1개.
    • 인시던트를 “스토리 카드”로 바꾸는 템플릿 1개.
  4. 도구와 연결하기

    • 체크리스트에 명시적으로 적습니다: “템플릿 X를 사용해 Jira Service Management에 인시던트를 생성한다.”
    • 필요한 곳에 대시보드 링크나 자동화된 런북 링크를 추가합니다.
  5. 셰프처럼 계속 리팩터링하기

    • 인시던트가 끝난 뒤, 팀에게 물어봅니다:
      • 어떤 카드가 가장 도움이 되었는가?
      • 어떤 단계가 빠져 있었는가?
      • 다음에 코팅해서 벽에 걸어야 할 것은 무엇인가?

시간이 지나면, 당신은 믿고 찾게 되는 요리책 같은 인시던트 스토리 회전대를 갖게 될 겁니다. 모서리가 닳고, 메모가 빼곡히 적혀 있고, 모두가 신뢰하는 그런 책 말이죠.


결론: 더 탄탄한 시스템, 더 의미 있는 일

“종이 인시던트 스토리 회전 주방”은 단순히 귀여운 은유가 아닙니다. 신뢰도 작업에 아날로그의 즐거움을 다시 불러들이자는 제안입니다.

우리가 다음과 같이 할 때:

  • 지식을 손에 잡히는, 내구성 있는 레시피로 캡처하고,
  • 인시던트 대응을 계속 진화하는 주방 의식으로 다루고,
  • 실험을 믿을 수 있는 하우스 시그니처와 균형 있게 배치하고,
  • Jira Service Management 같은 도구를 인간의 판단을 대체하는 게 아니라 증폭하는 가전제품으로 사용할 때,

우리가 만드는 시스템은 단지 더 탄탄해질 뿐 아니라, 더 인간적이게 됩니다.

사람들은 이야기를 기억합니다. 손에 쥐었던 카드의 감촉, 벽에 붙어 있던 포스터, 인시던트가 시작될 때마다 반복하는 의식을 기억합니다. 이런 아날로그 의식과 디지털 도구를 섞는다고 해서 느려지는 게 아닙니다. 오히려 정말 중요한 순간에 더 빨라지고, 압박 속에서 더 차분해지며, 자기 일이 더 자랑스러워집니다.

결국 신뢰도란 완벽한 대시보드를 만드는 일이 아니라, 자신들이 믿는 주방에서, 자신들이 함께 만든 레시피를 가지고, 밤이 바빠질 때도 즉흥적으로 대응할 준비가 된 잘 먹고 잘 버티는 팀을 만드는 일에 가깝습니다.

종이 인시던트 스토리 회전 주방: 아날로그 레시피 벽으로 끓여내는 신뢰도 의식 | Rain Lag