버그가 0개인지 확인하는 도구는 아닙니다.
스타트업에서 실제 출시 직전에 더 중요한 건
회원가입이 되는지
로그인이 되는지
결제가 중복되지 않는지
사용자 권한이 섞이지 않는지
문제가 생겼을 때 알아챌 수 있는지
이전 버전으로 돌아갈 수 있는지
같은 핵심 위험을 먼저 줄이는 것입니다.
모든 QA 항목을 똑같이 보면 오히려 중요한 걸 놓칠 수 있습니다
출시 전 체크리스트를 만들다보면 항목이 금방 길어집니다.
모바일 확인.
브라우저 확인.
링크 확인.
결제 확인.
오타 확인.
하다보면 뭐가 진짜 중요한지 점점 흐려집니다.
그래서 이 체크리스트는 모든 항목을 같은 우선순위로 두지 않았습니다.
Critical은 하나라도 남아 있으면 다시 봅니다
| 우선순위 | 의미 | 예시 |
|---|---|---|
| Critical | 출시 자체를 막을 수 있는 문제 | 로그인 불가, 결제 오류, 사용자 데이터 노출 |
| High | 출시 후 문의와 불편이 크게 생길 수 있는 문제 | 모바일 깨짐, 이메일 미발송, API 실패 처리 없음 |
| Normal | 출시 후 수정 가능성이 비교적 높은 문제 | 사소한 문구, 미세한 간격 문제 |
정상 흐름만 확인하면 부족합니다
개발할 때는 자연스럽게 정상적인 사용 흐름으로 테스트하게 됩니다.
회원가입하고, 로그인하고, 기능을 사용하고, 결제합니다.
근데 실제 사용자는 꼭 그렇게만 쓰지 않습니다.
빈칸으로 제출하기도 하고, 결제 버튼을 두 번 누르기도 하고, 업로드 도중 창을 닫기도 하고, 네트워크가 끊기기도 합니다.
그래서 QA에서는 정상 흐름과 실패 흐름을 둘 다 보는 게 중요합니다.
결제가 있다면 성공보다 실패 상황까지 확인해야 합니다
| 상황 | 확인할 내용 |
|---|---|
| 결제 성공 | 주문, 결제내역, 완료화면이 모두 정상인지 |
| 결제 실패 | 돈은 안 빠졌는데 주문만 생성되지는 않는지 |
| 중복 클릭 | 같은 결제가 두 번 발생하지 않는지 |
| 중간 이탈 | 뒤로가기나 창 닫기 후 주문 상태가 정상인지 |
| 환불 | 실제 환불 흐름이 끝까지 정상인지 |
관리자 계정만 보면 권한 문제를 놓칠 수 있습니다
개발과 테스트를 관리자 계정으로 많이 하면 모든 기능이 정상처럼 보일 수 있습니다.
하지만 일반 사용자 계정에서 보이면 안 되는 메뉴가 보이거나 다른 사용자의 데이터를 볼 수 있다면 큰 문제입니다.
특히 SaaS나 기업용 서비스라면 사용자 A가 사용자 B의 데이터에 접근할 수 없는지 반드시 확인하는 게 좋습니다.
비밀번호 찾기도 처음부터 끝까지 한번 돌려보세요
로그인은 자주 테스트하는데 비밀번호 찾기는 의외로 덜 테스트하는 경우가 있습니다.
인증메일이 실제로 오는지, 링크가 제대로 열리는지, 새 비밀번호가 저장되는지, 그 비밀번호로 다시 로그인되는지 끝까지 한번 확인하는 게 좋습니다.
모바일은 브라우저 창만 줄여보면 부족할 수 있습니다
PC 브라우저 폭을 좁혀보는 것과 실제 스마트폰에서 사용해보는 느낌은 다를 수 있습니다.
특히 모바일 키보드가 올라왔을 때 입력창이나 버튼이 가려지는 문제, 터치 영역이 너무 작은 문제, 가로 스크롤이 생기는 문제는 실기기에서 확인하는 게 좋습니다.
출시 직전에는 롤백 방법도 확인해야 합니다
테스트가 다 끝났다고 바로 배포 버튼을 누르면 불안한 부분이 하나 남습니다.
문제가 생기면 어떻게 돌아올지입니다.
이전 버전으로 되돌릴 방법이 있는지
데이터베이스 변경을 되돌릴 수 있는지
백업이 실제로 생성돼 있는지
문제가 생겼을 때 누가 판단할지
오류 알림이 팀에 전달되는지
출시 성공 메시지가 떠도 바로 끝난 건 아닙니다
운영환경에서는 테스트환경에서 없던 문제가 생길 수 있습니다.
그래서 출시 직후에는 핵심 흐름을 다시 한번 짧게 확인하는 게 좋습니다.
| 시점 | 확인할 내용 |
|---|---|
| 출시 직후 | 홈, 로그인, 회원가입 정상 |
| 5분 이내 | 핵심 기능, 결제, 폼 제출 |
| 10분 이내 | 이메일, 외부 API, 웹훅 |
| 20분 이내 | 서버 오류, 로그, 모니터링 |
| 30분 이내 | 실사용자 이벤트와 이상 징후 확인 |
체크리스트가 있다고 완벽해지는 건 아닙니다
체크박스를 전부 채우면 왠지 서비스가 안전해진 것처럼 느껴질 수 있습니다.
근데 체크리스트가 모든 버그를 찾아주는 건 아닙니다.
예약 서비스라면 예약 흐름을 더 깊게 테스트해야 하고, 결제 중심 서비스라면 결제와 환불을 훨씬 더 깊게 봐야 합니다.
그래서 이 체크리스트는 출발점으로 쓰는 게 맞습니다.
버그를 남길 때는 재현방법까지 같이 적는 게 편합니다
| 항목 | 예시 |
|---|---|
| 제목 | 모바일 Safari에서 회원가입 버튼 반응 없음 |
| 재현방법 | 회원가입 화면 진입, 약관 체크, 가입 버튼 터치 |
| 예상결과 | 인증메일 안내 화면으로 이동 |
| 실제결과 | 화면 변화 없음 |
| 환경 | iPhone, Safari |
| 우선순위 | Critical |
자주 묻는 질문
스타트업 QA는 몇 개 항목을 확인해야 하나요?
정해진 숫자는 없습니다. 서비스 기능과 위험도에 따라 달라집니다. 회원가입, 결제, 권한, 사용자 데이터처럼 문제가 생겼을 때 영향이 큰 항목부터 보는 게 좋습니다.
QA 담당자가 없어도 할 수 있나요?
가능합니다. 초기 스타트업은 개발자, PM, 대표, 디자이너가 역할을 나눠 직접 확인하는 경우도 많습니다. 다만 기능을 만든 사람과 테스트하는 사람이 다르면 놓쳤던 문제를 발견하기 쉬울 수 있습니다.
모든 항목이 완료돼야 출시해야 하나요?
꼭 그렇지는 않습니다. 하지만 Critical 항목이 남아 있다면 출시 전에 다시 확인하는 게 좋습니다. 사소한 UI 문제와 결제 오류를 같은 수준으로 보면 안됩니다.
출시 후에도 QA가 필요한가요?
네. 실제 운영환경에서만 발생하는 오류도 있기 때문에 출시 직후 핵심 기능을 다시 확인하는 간단한 smoke test가 도움이 됩니다.
체크한 내용은 저장되나요?
네. 이 체크리스트는 브라우저 저장기능을 이용해 체크 상태를 자동으로 저장합니다. 같은 브라우저에서 다시 열면 체크 상태가 유지됩니다.
댓글 쓰기