성공 경로가 실패 경로보다 더 빨리 썩을 때
이것은 성숙한 시스템에서 놀라울 정도로 자주 발생하며, 토토사이트 보통 아플 때까지 보이지 않습니다.
왜 그런 일이 일어나는지
실패는 발휘되지만 성공은 그렇지 않습니다
오류 경로는 사고, 재시도, 혼돈 테스트, 부하 급증 중에 발생합니다.
성공 경로는 시간이 지남에 따라 드문 이상적인 조건에서만 실행될 수 있습니다.
장애물 주변에 가드레일이 쌓입니다
타임아웃, 폴백, 회로 차단기, 재시도, 알림.
한편, "행복한 길"은 지연 시간, 순서, 데이터 형태에 대한 가정을 침묵으로 유지합니다.
부분 마이그레이션으로 인한 트래픽 왜곡
새로운 코드는 엣지 케이스와 실패를 처리합니다.
오래된 성공 논리는 여전히 이주 전 세계(스킴, 불변량, 동기화 호출)를 가정합니다.
관찰 가능성 편향
오류는 로그, 메트릭 및 페이지를 방출합니다.
성공 경로는 종종 아무것도 내지 않거나 더 나쁜 것은 오해의 소지가 있는 "녹색" 신호를 방출합니다.
하위 호환성 압력
실패 경로는 클라이언트가 손상되지 않도록 신중하게 패치됩니다.
성공 경로는 부서지기 쉽고 암묵적일 때까지 "단 한 가지 더 조건"을 얻게 됩니다.
비대칭성 테스트
고장 모드는 단위 테스트와 혼돈 테스트를 거칩니다.
성공은 통합, 타이밍, 데이터 형태에 달려 있습니다. 시뮬레이션하기 어렵고 종종 건너뛰곤 합니다.
표시되는 방식
"재시도 시 작동, 첫 시도 시 실패"
수동 재생은 성공하지만 실시간 트래픽은 실패합니다
건강 점검 통과, 사용자가 파손을 확인합니다
오류율은 낮지만 사용자 성공률은 낮습니다
오류를 수정하면 결과가 예기치 않게 개선됩니다
위험한 이유
그것은 잘못된 자신감을 만듭니다
사건은 "비결정론적"으로 보입니다
팀은 정상적인 운영을 저하시키면서 장애 처리를 과도하게 최적화합니다
운영자는 대시보드와 런북에 대한 신뢰를 잃습니다
디자인 대응책
기기 성공 명시
오류율뿐만 아니라 성공률
성공적인 통화에 대한 지연 시간 분포
성공적인 흐름에 대한 불변 검사
성공 경로 연습
성공해야 하는 합성 트래픽
황금길 카나리아
실패뿐만 아니라 성공적인 제작 흔적 재생
성공 경로 실패
성공 가정이 위반될 때 충돌하는 주장 추가
조용한 부분 성공보다 큰 실패를 선호합니다
코드의 대칭성
성공과 실패 경로를 구조적으로 유사하게 유지
공유 검증, 공유 디코딩, 공유 타임아웃
성공 예산
오류가 적더라도 성능 저하를 SLO 위반으로 간주합니다
"성공했지만 잘못된" 신호에 대한 페이지
유용한 정신 모델
실패는 두려움에 의해 유지됩니다.
성공은 익숙함에 의해 무시됩니다.
원하시면 제가 해드릴 수 있습니다:
이것을 간결한 "실패 모드" 카드로 변환하세요
실제 사건(결제, 비동기 파이프라인, 마이그레이션)에 매핑합니다
또는 실제로 이를 파악할 수 있는 성공 경로 SLO를 작성하는 데 도움이 됩니다
