백시아 2회기 AI 미발화 · 재접속 반복 — 직행 전환 세션 수신 샘플 0 분석기존 미해결 버그 재발 · 수정 미적용

마지막 업데이트 2026-11-16

2026-11-16 (2차 교차검증 · 자동 복구 사각지대·개선안 추가) 사건 2026-11-14 10:00–10:21 KST userId 8e6e28d1-… · roomId …_2 · 아동 UA X11 Linux x86_64 Chrome 157

요약

신고: 진행자 이슈 기록에 소리 문제가 6건(02:55~20:20) 있고, 그중 5건(08:56 이후)에 "강제 퇴장 후 재접속"이 적혀 있다.

결론: AI(agent)는 응답을 만들고 음성 패킷을 보냈다. 이상 징후는 앞 세션 종료 직후 0.3~0.4초 만에 새 AI 세션을 시작한 경우(직행 전환)에 집중됐다. 직행 세션 8개 중 7개에서 아동 브라우저의 재생 측정 로그가 0건이었고, 진행자에게 넘기는 AI 음성 중계도 멈췄다. 페이지를 새로 연 직후 시작한 세션 6개는 모두 정상이었다. 진행자 소리 신고 6건 중 5건은 무음 세션 중이거나 직후 시각이다(3절).

재접속의 실체: 진행자가 소리를 못 듣고 강제 퇴장으로 아동 페이지를 재진입시켰다(진행자 기록 5회). 재진입 직후 세션은 정상이었다가 다음 직행 전환에서 다시 무음이 됐다. 김태민 3회기·변유나 6회기와 같은 패턴이다.

자동 복구 사각지대: 무음 7번 동안 PPI-1377 자동 감지·복구 로그가 0건이다. 데스크톱 모드 Android 태블릿이라 Android 판정에서 빠져 복구가 꺼졌을 가능성이 높다(7절). 개선안은 8절.

한계: 직행 8개 중 1개(uuiH)는 정상이었다. "직행 전환에서 이상 징후가 집중됐다"까지가 결론이며, 간격이 원인이라는 인과는 입증되지 않았다(6절).

1. 시간순 인과

// 2026-11-14 KST · 근거: 아동/진행자 S3 세션로그 + agent CloudWatch + 진행자 이슈 기록(경과시간)
// 간격 = 아동 로그 Stopping session 요청 → Starting session 진입
10:00:07  첫 페이지 첫 세션 b92w (taeyang_new01) 정상
10:02:28  b92w 발화 "아, 나 너랑 해보고 싶은거 있어~!" (TTS 완료·송출 정상)
10:02:33  직행 (0.29s) → v5Di 무음  ← 진행자 02:55(≈10:03:02) "위 문구는 떴는데 음성 X"
10:04:30  직행 (0.31s) → uuiH 정상 (직행 중 유일한 반례, 신고 없음)
10:08:50  직행 (0.29s) → sgaG 무음  ← 진행자 08:56(≈10:09:03)
10:09:33  진행자 같은 스텝 재전송(Step changed by host) → 직행 (0.44s) → e8og 무음
10:10:51~11:10  아동 도움 요청 "화면/친구가 멈췄어요" 3회
10:11:23  강제 퇴장 → 10:11:28 재진입 ① → RcJB 정상
10:12:38  영상 후 직행 (0.26s) → Lq3L 무음  ← 진행자 12:35(≈10:12:48) / 아동 "멈췄어요" 2회(10:13:10·16)
10:13:41  재진입 ② → d7oc 정상
10:14:26  영상 후 직행 (0.27s) → fh5N 무음  ← 진행자 14:24(≈10:14:42)
10:15:12  재진입 ③ (Re-entry loop detected, 5분 내 3회) → iBqK 정상
10:16:50  영상 후 직행 (0.29s) → Q68H 무음 (~10:17:49)  ← 진행자 17:27(≈10:17:50, 종료 직후)
10:17:53  재진입 ④ (Re-entry loop detected) → 8Fge 정상
10:20:19  직행 (0.26s) → kGn8 무음 (~10:20:44)  ← 진행자 20:20(≈10:20:48, 종료 직후)
10:20:43  재진입 ⑤ → 기존 페이지가 중복 연결로 종료(10:20:44) → BxeT 정상
10:21:39  수업 완료 퇴장
10:0010:0310:0610:0910:1210:1510:1810:21
AI 세션
페이지 로드
진행자 신고
정상무음 (drift 로그 0 · 중계 정지)▮ 페이지 로드 · 진행자 신고(추정 시각)

2. 세션별 판정 (14개 전체)

시작agent job시작 경로간격drift 로그ai-audio 중계진행자 수신판정
Playout drift sample 로그는 유효 측정이 5회 쌓일 때마다 한 번 기록된다(apps/web/lib/voice-agent/livekit-playout-drift-monitor.ts:452). 유효 측정은 주로 수신 트랙의 totalSamplesReceived가 늘어난 경우이고, 통계 미지원 단말에서는 다른 조건으로도 기록될 수 있다. 로그 건수는 샘플 수가 아니다. 0건은 "세션 동안 유효 측정이 5회도 안 쌓였다"는 뜻이며, 같은 페이지의 정상 세션은 수십 초 만에 기록이 생겼다. 진행자 수신의 null은 0바이트가 아니라 측정값 부재다.

3. 진행자 이슈 기록 대조

진행자 기록(경과)환산 시각그 시각의 세션판정
02:55 "아, 나 너랑 해보고 싶은거 있어~!" 로그는 떴는데 음성 X≈10:03:02v5Di 무음 구간문장 불일치 — 인용 문장은 직전 정상 세션 b92w의 10:02:28 발화(TTS 완료·송출 확인). v5Di의 10:02:56 발화는 "보고 싶어? 이제 보여줄 거야!…"
08:56 소리 X → 강제 퇴장 후 재개≈10:09:03sgaG 무음부합 (e8og는 10:09:34 시작이라 이 신고와 별개)
12:35 소리 X 2번째, 강제 퇴장≈10:12:48Lq3L 무음부합
14:24 소리 X 3번째, 강제 퇴장≈10:14:42fh5N 무음부합
17:27 소리 X 4번째, 강제 퇴장≈10:17:50Q68H 무음 종료(10:17:49) 직후직전 세션 증상 기록으로 추정
20:20 소리 X 5번째, 강제 퇴장≈10:20:48kGn8 무음 종료(10:20:44) 직후직전 세션 증상 기록으로 추정
환산은 아동 로그의 수업 누적 시간(SPARE_CONTENT_UTILS.cumulativeElapsedSeconds, 18건 — 예: 10:03:02.895=175초, 10:12:38.126=745초, 10:20:21.806=1,194초)을 기준으로 했다. 진행자가 기록을 남긴 시점이 증상 시점보다 늦을 수 있어 오차 범위는 정하지 않았다. 02:55 기록은 직전 발화를 뒤늦게 적었을 가능성이 있으나 확정할 수 없다. 따라서 "신고와 무음 세션이 전부 일치한다"고는 말할 수 없고, 신고 6건 중 5건이 무음 세션 중이거나 직후라는 데까지가 근거다.

4. 층별 증거

층관측의미
agent (CloudWatch)typecast_tts_synthesis completed 84건(문장 단위), tts_node_audio_output completed 57건(응답 단위), tts_audio_outbound_sample 57/57 ok(패킷·바이트 증가). 종료 11건 모두 CLIENT_INITIATED응답을 만들고 첫 1초 RTP를 보냈다. agent 오류로 끝난 세션 없음. 마지막 두 세션(10:20:20, 10:20:49)은 조회 범위(~10:19:55) 밖
아동 페이지무음 세션 7개 drift 로그 0건 / 나머지 7개 3~49건무음 세션에서만 재생 측정이 쌓이지 않음
아동 페이지무음 세션마다 Audio producer outbound stalled {type:"ai-audio"}, 정상 세션 0건진행자로 넘기는 AI 음성 복제본도 무음
진행자 모니터ai-audio consumer bytesReceivedDelta null · trackMuted true 9회 (무음 세션) / 3,920 · 3,711 · 3,800 bytes · trackMuted false (정상 세션)진행자도 AI 소리를 못 받음 → 신고·강제 퇴장
아동 페이지도움 요청 "화면/친구가 멈췄어요" 5회(10:10:51 ~ 10:13:16), 모두 무음 세션 중아동 쪽에서도 AI가 반응하지 않는다고 느낌
아동 페이지Re-entry loop detected 2건(10:15:12, 10:17:53), Playout stall detected·복구 로그 0건, drift monitor 14건 모두 mode:"off"PPI-1377 자동 감지·복구 흔적 없음(배포·활성 여부는 미확인)

5. 함께 보인 것

6. 주의사항 · 남은 질문

직행 = 무음은 결정적이지 않다. 이 회기 직행 8개 중 uuiH(10:04:31, 간격 0.31초)는 drift 49건·진행자 수신 3,920 bytes로 정상이었다. 변유나 6회기에도 직행 정상 사례가 있다. "직행 전환에서 이상 징후가 집중됐다"까지가 안전한 결론이다. 간격 길이별 비교 근거는 없고, 인과도 입증되지 않았다.

7. 자동 복구 사각지대

무음이 7번 났는데 감시·복구 로그가 한 건도 없다. 감시 장치 두 개가 모두 이 증상을 놓쳤다.

장치하는 일이번에 놓친 이유
Playout drift monitor
livekit-playout-drift-monitor.ts
1초마다 재생 밀림(벽시계 − 오디오 요소 재생시간)을 재고, 400ms 초과가 3회 연속이면 Playout drift suspected. 리셋은 기본 mode:"off"(기록만)수신 샘플이 늘지 않는 구간을 "AI 침묵(유휴)"으로 보고 측정에서 뺀다(isIdleInterval, 252줄). 재생이 아예 시작되지 않은 세션은 매초 유휴로 빠져 판정 자체가 안 된다. 밀림 감시용이라 무음은 대상이 아니다
Playout stall guard (PPI-1377)
livekit-playout-stall.ts
"패킷은 늘었는데 재생 샘플이 정지"가 2회 연속이면 감지 → reattach → 요소 교체로 자동 복구① Android에서만 기본 켜짐(48–53줄). 판정은 UA의 Android 문자열 또는 userAgentData.platform === "Android"(22–29줄)인데, 이 기기는 데스크톱 모드라 UA가 X11; Linux x86_64다. UA-CH 값까지 "Linux"면 꺼진다(추정, 값 미기록)
② 켜져 있었더라도 패킷도 안 늘면 감지 조건(deltaPackets > 0 && deltaSamples <= 0)에 걸리지 않는다
기기 정보(아동 콘솔 [LowPerf]): navigator.platform: "Linux armv81", CPU 10코어, 메모리 8GB, isLowPerformanceDevice: false. 고사양 Android 태블릿을 Chrome 데스크톱 모드로 쓴 것이다. navigator.platform은 stall guard 판정에 쓰이지 않는다. 같은 페이지에서 재진입 직후 세션은 모두 정상이었으므로 사양 부족은 원인이 아니다. 변유나 6회기도 같은 Linux armv81 데스크톱 모드 태블릿이었다.
집계 착시 가능성: 10/21 정체 집계의 "X11 UA 0건"은 Playout stall detected 로그 기준이다. 데스크톱 모드 태블릿에서 stall guard가 꺼져 있었다면 이 기기군은 처음부터 집계되지 않았을 수 있다.

확인 방법: 같은 태블릿의 Chrome 데스크톱 모드에서 콘솔에 navigator.userAgentData?.platform을 실행한다. "Android"면 ②(패킷 미도착) 쪽, "Linux"나 빈 값이면 ①(꺼짐) 확정이다.

8. 개선안 (제안 · 미적용)

순서방법효과비용
1복구 판정 결과를 로그로 남기기 — 세션 시작 때 stall guard 모드와 userAgentData.platform·navigator.platform 기록7절 ① 추정을 다음 회기에 바로 확인매우 작음
2데스크톱 모드 Android 포함 — navigator.platform이 Linux arm*이면 Android로 판정(또는 Chromium 전체 적용)이번 같은 사례에서 강제 퇴장 전에 자동 복구 시도작음
3"패킷도 안 오는" 무음 감지 — AI가 말하는 중(agent 상태·활성 화자)인데 패킷·재생 샘플이 모두 늘지 않으면 경고하고 복구 단계 진입7절 ② 사각지대 제거 + SFU 미전달 vs 브라우저 재생 미가동 판별중간
4진행자 알림·가벼운 복구 버튼 — AI 발화 중 진행자 쪽 ai-audio 수신이 없으면 경고, 강제 퇴장 대신 "AI 음성 재연결"수업 흐름 중단 감소중간
5직행 전환 지연 실험 — AI→AI 직행에만 약 3초 지연을 플래그로 켜고 끄며 drift 로그·중계 정지 비교발생 자체가 줄어드는지 검증 (근본 해결 아님)작음 · 아동 대기 증가
1·2가 효과 대비 비용이 가장 작다. 2가 들어가면 이 기기군에도 PPI-1377 자동 복구가 적용되고, 1로 그 효과를 다음 회기 로그에서 바로 확인할 수 있다. 원인 분석 단계라 코드는 수정하지 않았다.