์ฐ๋ฆฌ๋ ๊ณ ๊ฐ์ subset๋ฅผ ์ํด ์์ ํ ์๋๋ก ์ ๋๋ค. ์ฐ๋ฆฌ๋ ๋ฌธ์ ๊ฐ ํฌ์ํ๊ณ , ๋ฐฐํฌ๋ฅผ ๋ค์ ๋กค๋งํฉ๋๋ค.
- investigating
์ฐ๋ฆฌ๋ ํ์ฌ์ด ๋ฌธ์ ๋ฅผ ์กฐ์ฌํ๊ณ ์์ต๋๋ค.
- investigating
์ด ๋ฌธ์ ๋ฅผ ์กฐ์ฌํ๊ณ ์์ต๋๋ค.
- investigating
๋กค๋ฐฑ์ ์์ ํ ์ค๋ฅ๋ฅผ ํด๊ฒฐํ๋ ๊ฒ ๊ฐ์ต๋๋ค. ์ฐ๋ฆฌ๋ ๋ฐ์ ํ๊ฒ ๊ฐ์ํ๊ณ , ๊ทธ๋ฌ๋ ์ฌ์ฉ์๋ Asana์ ๋ค์ ์ ๊ทผํ ์ ์์ด์ผ ํฉ๋๋ค.
- monitoring
์์ ์ด ๊ตฌํ๋์ด ๊ฒฐ๊ณผ๋ฅผ ๋ชจ๋ํฐ๋งํ๊ณ ์์ต๋๋ค.
- resolved
์ด ์ฌ๊ฑด์ ํด๊ฒฐ๋์์ต๋๋ค.
- postmortem
Incident: ์๋์ ์ผ๋ก ์ฐ๋ฆฌ์ compute ํด๋ฌ์คํฐ ์ค ํ๋์ ์๋ backend ์๋ฒ ์์ฉ๋์ ์ฌ๊ธฐ๋ฅผ ์ฑ ์์ง๋ ๋ด๋ถ ์ฒด๊ณ๋ ์ผ์์ ์ธ ์ ๋น ๋์ค ์ฃผ๊ธฐ๋ ์์ฉ๋์ ๋์ฒดํ์ต๋๋ค. ์ด ๋ช ์๊ฐ ๋์ ์ฌ์ฉ ๊ฐ๋ฅํ ์ฉ๋์ ์ ๋ฆฌํ ๊ฐ์๋ฅผ ๋ฐ์. ์ดํ์ ๋ฐฐํฌ๋ ์ถฉ๋ถํ ์ฉ๋์ผ๋ก ํ์ฑํ๋์์ผ๋ฉฐ, ๋ชจ๋ ์๋ก์ด ์์ฒญ์ ๋ฐ์์ํค๋ ํด๋ฌ์คํฐ๋ฅผ ์คํจํฉ๋๋ค. ์ถฉ๊ฒฉ์ ์ํํ๊ธฐ ์ํด, ์ฐ๋ฆฌ๋ ์ฌ์ ํ ์ถฉ๋ถํ ์ฉ๋์ ๊ฐ์ง๊ณ ์ด์ ๋ฆด๋ฆฌ์ค ๊ฐ์ ์ ํ์ . ์ถฉ๊ฒฉ: ๋๋ต 30 ๋ถ์ ์ํด, ์ด compute ์ก์ด ๊ฐ๋ ์ฐจ์๋ ๊ฐ๋๋ถ๋ฅ์๊ฐ์ ์ํด ์ทจ๊ธ๋ ๊ณ ๊ฐ; ๋ค๋ฅธ ๊ณ ๊ฐ์ unaffected. ๊ณ ๊ฐ ๋ฐ์ดํฐ๊ฐ ์์ค๋์ง ์์์ต๋๋ค. ์์ผ๋ก ์ด๋: ์ฐ๋ฆฌ๋ ์์ฉ๋ ํ์ฅ ์คํจ์ ์ด ์ ํ์ ๊ฒ์ถํ๊ธฐ ์ํ์ฌ ์ถ๊ฐํ ๊ฐ์๋ฅผ ๋งค์ฐ ์ผ์ฐ ์ถ๊ฐํ๊ณ , ์ถฉ๋ถํ ๊ฑด๊ฐํ ์์ฉ๋์ด ํ์ธ๋๊ธฐ ์ ์ ๊ตํต์์ ๋ฐฐ์น๋ฅผ ๋ฐฉ์งํ๊ธฐ ์ํ์ฌ ๋ ์์ ํ ๋ณดํธ๊ฐ ์ถ๊ฐํ์ต๋๋ค. Our ๋ฉํธ๋ฆญ์ ๊ฐ ๋ฐ์ดํฐ ์ผํฐ์์ ์ฌ์ฉ์ ๊ฒฝํํ ๊ฐ๋ ์๊ฐ์ ํ๊ท ์ ๊ณ ๋ คํฉ๋๋ค. ๊ฐ๋ ์๊ฐ์ ์๋ ์ด ๋ฌด๊ฒ๋ฅผ ๋ค๋ ํ๊ท ์ ๋ฐ์ํฉ๋๋ค.
๊ณต์ ์ธ์๋ํธ ์ ๋ฐ์ดํธ๋ฅผ ์๋ ๋ฒ์ญํ์ต๋๋ค.