바뀐 코드에 맞는 테스트를 만들어 돌리고, 실패하면 되돌린다
이런 상황입니다
코드를 고친 사람이 「테스트 통과했습니다」 라고 적으면 그 말이 곧 완료로 굳고, 실제로 돌려 본 사람은 없다. 시험이 없는 변경은 누군가 나중에 시험을 따로 쓰거나 그냥 넘어가고, 실패한 변경은 「실패」 로 남은 채 사람이 다시 볼 때까지 아무도 열지 않는다. 그 사이 다음 변경이 그 위에 쌓인다
고객 인터뷰 전의 추정입니다.
AI 팀이 붙으면 이렇게 흐릅니다
- AI
워커의 「끝냈다」 보고와 바뀐 파일 입력
- AI
코드가 먼저 판정(수용 명령을 «다시» 돌린 종료 코드 · 영향 범위 밖 파일 · 경계 위반)
- AI
시험이 없거나 깨졌고 코드가 바뀐 자리에만 AI QA(tester)가 저장소 관례대로 시험을 짓고 실제로 돌려 명령과 종료 코드째로 보고
- AI
AI QA(verifier)가 수용 기준 ↔ 증거 대조표를 내고 PASS · RETURN · NEEDS_USER 하나를 낸다
- AI
RETURN 이면 「무엇을 고쳐야 하나」 를 붙여 같은 워커에게 되돌리고 회차를 하나 올린다(이 순환을 반복)
- AI
되돌림이 3회차에 닿으면 NEEDS_USER 로 사람에게 올린다
- 사람
사람이 받은 편지함에서 계속할지 멈출지를 정한다
- AI
증거가 붙은 완료 또는 사람의 결정
사람은 여기서 정합니다
- 사람이 받은 편지함에서 계속할지 멈출지를 정한다
데모로 보여 줄 흐름
- 0~10초
워커 보고 하나가 「끝냈다」 로 들어오고 바뀐 파일 목록이 뜬다
- 10~25초
수용 명령이 이 자리에서 다시 돌아 종료 코드가 찍히고, 시험이 없어 tester 가 시험을 지어 돌린 결과(exit 1)가 나란히 보인다
- 25~40초
verifier 의 수용 기준 ↔ 증거 대조표에 RETURN 과 「고칠 것」 이 붙어 항목이 워커로 되돌아가고 회차 표시가 1 로 오른다
- 40~55초
고쳐진 변경이 같은 시험을 통과해 PASS 로 닫힌다
- 55~60초
「되돌림 회차 · 사람 개입 0회」 자막
이 시나리오의 데모 영상은 준비 중입니다.
무엇으로 효과를 재나
- 제작 시간(시험 세트 1건당 · 시간/건)측정 준비 중
- 사람 개입 횟수(변경 1건당 · 회)측정 준비 중
- 오류율(시험 없이 닫힌 변경 · %)측정 준비 중
이 일을 맡는 팀
같은 갈래의 다른 시나리오
내 업무와 비슷한가요?
이 시나리오로 상담하기 요금 계산하기