2026-09-24. 사용자 요청: 디코딩 개선 이후에도 Parsec보다 Network가 느린 원인 분석. 운영 코드·DNS·Nginx·서비스는 변경하지 않았다.
결론과 확인 수준
현재 가장 중요한 차이는 항상 서버를 경유하는 TCP/WebSocket 영상 전송과 영상 소비가 막히면 RTT·입력도 함께 지연되는 구조다. 공개 도메인에는 Cloudflare 경유가 추가된다. 디코딩 후 GPU 직접 표시 개선은 이 전송 경로를 변경하지 않았다.
Network의 ms는 다운로드 속도(Mbps)가 아니라 왕복 지연이다. Parsec 공식 설명도 Network를 RTT로 정의하므로 왕복/편도 표기 차이로 생기는 단순 두 배 차이는 아니다. 다만 notParsec은 영상과 같은 스트림에서 왕복을 재므로 앱 대기열도 함께 포함한다. 사용자의 두 PC에서 어떤 원인이 몇 ms를 차지하는지는 현 시점에 수치·추적 로그가 없어 확정하지 않았다.
1. 실제 영상은 반드시 서버를 경유한다
notParsec 공개 기본 경로:
호스트 → Cloudflare → Ubuntu/Nginx/WSS 중계 → Cloudflare → 접속 PC
Parsec의 일반 직접 연결:
호스트 ↔ 접속 PC (BUD/UDP)
crates/device-client/src/remote.rs:122가 관리 API와 같은 origin의 /v1/remote/sessions/{id}/relay를 항상 연다. crates/session/src/remote.rs가 그 중계 연결 위에 종단 TLS를 올려 영상·입력을 보낸다. 직접 후보 탐색, STUN/hole punching과 직접 미디어 선택은 현재 영상 경로에 없다. 원래 Parsec도 환경에 따라 relay를 사용할 수 있으므로 사용자의 Parsec 세션이 직접 연결인지는 별도 확인이 필요하다.
공개 응답에서 Server: cloudflare, cf-cache-status: DYNAMIC, CF-RAY 접미사 PDX/SJC를 확인했다. 이 실행 환경의 요청이 통과한 edge 위치이며 두 사용자 PC가 같은 edge를 사용한다는 증거는 아니다. 기본 앱 주소는 https://remote.n3m.kr/; 이전에 저장된 사용자 프로필 주소는 여기서 열람하지 못했다.
같은 /health/ready에 인증서를 정상 검증하고 HTTPS 연결을 재사용해 각 8회 측정했다. TCP/TLS 연결 시간은 표에서 제외했다.
| 경로 | HTTP 요청 중앙값 | 관찰 |
|---|---|---|
127.0.0.1:443, SNI/Host remote.n3m.kr |
0.391ms | 로컬 Nginx → 운영 서버 |
공개 https://remote.n3m.kr |
308.889ms | Cloudflare 응답, 모두 HTTP 200 |
이 값은 이 실행 환경의 HTTP 왕복이다. 사용자 PC의 지속 WSS 영상 RTT, 각 회선의 단방향 지연이나 Cloudflare만의 처리 시간으로 치환할 수 없다. 네트워크 경로와 edge/origin 왕복이 포함되므로 308ms 전부 Cloudflare 처리 비용이라고 해석하지 않는다. 그래도 현재 공개 경로를 통한 왕복이 로컬 앱 응답보다 매우 크다는 직접 관찰이다.
2. 디코더가 밀리면 Network와 입력도 밀린다
다음 연결이 소스에서 확인된다.
- 클라이언트가 Probe를 입력 스트림으로 보낸다.
- 호스트는 Pong을 별도 capture/GPU 스레드 밖에서 생성하지만, 영상과 동일한 writer로 보낸다. 다음 이벤트 선택에서는 Pong이 우선이지만 이미 쓰는 프레임/TLS/TCP 데이터보다 앞서 갈 수 없다.
crates/session/src/remote.rs:662. - 클라이언트 수신 루프는 capacity 2인 디코더 큐에
frames.send(event).await한다. 큐가 차면 뒤의 Pong을 읽지 못한다.crates/session/src/remote.rs:181,:230;crates/desktop-ui/src/app/remote_ui.rs:236. - WebSocket bridge도 단일
select루프 안에서writer.write_all이나socket.send완료를 기다린다. 128KiB duplex 수신 버퍼가 막히면 같은 루프의 역방향 입력·Probe 송신도 정지할 수 있다.crates/device-client/src/remote.rs:148. - 서버 역시 peer 큐 전송/소켓 전송을 같은 루프에서 기다린다.
apps/control-server/src/api/remote.rs:371.
따라서 전송 계층만 양방향이라고 해서 앱 루프까지 서로 독립적으로 진행되는 구조는 아니다. TCP도 손실 시 뒤의 바이트를 순서대로 전달하기 위해 기다린다. 영상 전체 프레임을 읽어야 다음 Control/Pong에 접근할 수 있어 큰 IDR나 밀린 영상이 RTT를 증가시킬 수 있다.
실제 인증·TLS·WS 중계를 통한 재현
운영 서비스 대신 임시 DB·장치·loopback 포트를 사용했다. Linux에서 현재 세션 코드를 실행하고, 유효한 전송 Packet에 넣은 16KiB 합성 영상 데이터를 초당 약 60회 발생시켰다. GPU 디코더는 실행하지 않았다. 느린 경우만 소비자에 프레임당 50ms 대기를 넣었다. TCP_NODELAY는 양 끝과 테스트 서버에 켰다.
| 조건 | 측정 RTT | 추가 관찰 |
|---|---|---|
| 정지 상태 | 중앙값 1.38ms | 초기 프레임 한 개 |
| 60fps 데이터·즉시 소비 | 중앙값 1.30ms, 최대 2.34ms | 입력 해제 전달 약 2.30ms |
| 같은 발생률·50ms 소비 지연 | 첫 샘플 1.12ms, 이후 2,218ms / 3,985ms | decoder queue 최대 평균 51.13ms, 입력 해제 전달 약 241ms |
이것은 사용자가 실제로 4초 지연을 겪었다는 측정이 아니다. 외부 회선이 없는 동일 머신에서도 영상 소비 지연만으로 Network 수치가 수초로 증가하고 입력 전달도 느려짐을 증명하는 통제 시험이다. 지연이 커져도 Decoder queue는 이벤트당 평균 한 번의 대기라 51ms 정도만 보일 수 있다. TCP/duplex에 이미 쌓인 모든 데이터의 나이를 나타내는 값은 아니다.
테스트 소스는 relay_latency_diagnostic.rs, 출력은 relay_latency_diagnostic.log, 구조화한 수치와 소스 hash는 results.json에 보존했다. 임시 Cargo 시험 target은 실행 후 제거했다. 필요하면 고유한 crates/session/tests/ 파일 이름으로 복사한 뒤 해당 cargo test -p notparsec-session --test 이름 -- --nocapture만 실행한다.
3. 현재 자동 bitrate도 원인을 구별하지 못한다
crates/session/src/adaptive.rs는 1초 단위로 관측한 RTT가 최소값보다 max(30ms, 최소 RTT/2) 이상 커지거나 로컬 write 대기가 높으면 목표 bitrate를 20% 낮춘다. 이 RTT에는 디코더 대기도 섞여 있으므로 GPU 소비 병목을 회선 혼잡으로 해석할 수 있다. 낮은 bitrate로 일부 압력을 줄여도 우회 경로의 기본 왕복 지연은 제거되지 않는다.
RelayStream::poll_flush는 로컬 duplex의 flush다. 서버의 실제 수신/전달 ACK가 아니다. send_wait만으로 인터넷 전송 완료 시간을 알 수 없다. 현재 코드의 가변 bitrate를 Parsec BUD의 측정·혼잡 제어와 같다고 볼 근거는 없다.
별도의 불일치도 있다. UI/wire는 최대 50Mbps를 허용하지만 서버는 연결 한쪽당 1초 창에서 4MiB를 초과하면 종료한다(약 33.55Mbps, TLS/프레이밍과 burst 영향 별도). 이는 평상시 RTT가 항상 높은 이유와 구분해야 한다. 높은 bitrate/큰 burst에서 끊김·재연결 원인이 될 수 있는 정책 불일치다.
이미 확인한 사항과 남은 확인
- 게시 Windows 빌드는
1790270708. 운영 서버 SHA-256은 준비했던 GPU 개선 서버와 동일하다. TCP_NODELAY 적용 코드가 포함된 서버다. - 클라이언트
connect_async_with_config(..., true)는 TCP_NODELAY를 켠다. Nginx의proxy_buffering off도 적용돼 있다. 이를 새로 켜면 근본 해결된다고 볼 근거는 없다. - 서버의 50ms peer 대기는 두 연결이 처음 합쳐질 때만 실행된다. 프레임마다 고정으로 더하는 50ms가 아니다. 3초 heartbeat도 3초 고정 전송 지연을 뜻하지 않는다.
- 서버 inspection 시점에는 활성 relay TCP 세션이 없었다. 직전 두 relay의 101 응답과 종료 기록은 확인했지만, Nginx request_time의 약 169초는 WebSocket 유지 시간이며 패킷 지연이 아니다.
- 현재 작업 트리에는 별도 작업의 hosting 정책 변경이 있다. 세션 계측 코드는 게시 빌드 소스 hash와 같고, client/server relay hot path는 HEAD와 같다. 시험은 현재 작업 트리로 수행했다.
- 두 PC의 실제 Network 값, 각각의 서버 RTT, 직접 Parsec 연결 여부, 손실/재전송/Wi-Fi 상태, 실제 decode/present 속도는 미측정이다. 이들 없이 실제 원인의 기여율을 숫자로 나누지 않는다.
수정 우선순위
- 영상 송수신과 입력/제어 처리의 진행을 분리하고 bounded backpressure·정상 취소·기기 철회·키 프레임/형식 변경 순서를 함께 검증한다. 압축된 참조 프레임을 임의 폐기하는 방식으로 해결하지 않는다.
- 중계 통로 자체 RTT와 영상 대기열/소비 지연을 분리해 측정한다. 기존 수치를 임의 차감하거나 표시만 낮추지 않는다.
- 실제 두 PC에서 공개 proxy 경로와 origin 직결 경로를 비교한다. 개선 근거가 있으면 미디어 relay 경로를 분리한다. DNS/proxy를 이번 분석에서 임의 변경하지 않았다.
- 근본적으로 원본 근거에 따른 BUD/UDP 직접 전송·NAT traversal·필요 시 중계를 구현한다. 현재 E02 Ubuntu 서버는 연결 관리에 필요하지만 모든 영상이 반드시 서버를 지나야 한다는 요구는 아니다.
원본 기준과 출처
기준은 보관 Windows Parsec 150-104a, 코어 SHA-256 8c8c4299ddf503b2c25c0905b0a0820f3e8238c252e9ace37bf25964ef4a8f6f. 보관 분석의 BUD 경계와 FUN_18003beb0의 1200바이트 제한·암호화·WSASendMsg 경로를 대조했다. 전체 ACK/NAT/혼잡 제어 사양을 복원한 것은 아니며 F10/F31–F33 완료 근거로 세지 않는다.
- Parsec 기술 개요: P2P BUD/UDP, 네트워크 적응 설명. 현재 웹 문서로 기준 바이너리와 구분.
- Parsec 통계 설명: Network는 RTT, bitrate는 사용 대역폭.
- Cloudflare WebSockets: proxy된 지속 WebSocket과 edge/origin 경로. 이 문서 자체가 특정 PC의 지연을 증명하는 것은 아니다.