# Network 2,000ms 조사와 10-bit·4:4:4 선호 구현 2026-09-25 · F04/F08/F09/F12/F13/F14/F29/F35/F58 · **부분 구현 / 원본 대조 미완료** [문서 홈](/document) · [개발 계획과 구현 현황](/document/comparison) · [중계에서 직접 UDP까지의 이전 작업](/document/files/NETWORK_TRANSPORT_JOURNEY.ko.md.html) ## 1. 무엇을 확인했고 무엇이 아직 불명확한가 사용자가 본 Network 2,000ms 이상은 시간으로 표시한 왕복 지연(RTT)이다. Mbps로 표시하는 처리량과 다른 값이다. 해당 순간의 두 PC 빌드, Direct UDP/WSS 경로, GPU/회선별 계측을 이 서버에서 읽을 수 없으므로 **사용자 세션의 원인을 확정하지 않았다.** 서버 서비스는 실행 중이었고, 운영 로그에는 개별 영상 세션의 지연 내역이 없었다. 현재 코드에서 확인한 문제는 두 가지다. 1. **WSS 중계의 양방향 작업이 한 루프를 공유했다.** 영상 데이터를 앱에 넘기는 write가 막히면 반대 방향 입력·응답을 보내는 작업도 멈출 수 있었다. 이 구조가 PC의 RelayStream과 Ubuntu relay 양쪽에 있었다. 2. **가변 비트레이트가 처음부터 높은 RTT를 정상 기준으로 학습할 수 있었다.** 처음 관측한 값이 2,200ms이면 이후 같은 2,200ms는 “기준 대비 증가”로 잡히지 않는다. 전송 쓰기 대기도 짧으면 오히려 회복 조건으로 취급할 수 있었다. 직접 UDP의 RTT 응답은 영상 디코더 큐 밖에서 처리한다. **Direct UDP에서도 2,000ms라면 WSS 중계 문제로 단정할 수 없다.** 공유기/회선 큐, 손실·재전송, OS 소켓 및 실행 지연 등을 실제 세션에서 구분해야 한다. Cloudflare를 원인으로 확정한 것도 아니다. [이전 HTTP 측정](/document/files/NETWORK_TRANSPORT_JOURNEY.ko.md.html)은 Ubuntu 서버에서 측정한 비교 자료이며 사용자 PC 간 RTT가 아니다. ## 2. 변경 전·후 처리 구조 | 위치 | 변경 전 | 변경 후 | |---|---|---| | PC의 WSS 어댑터 | socket 수신 → 앱 pipe에 쓰기를 끝내야 다음 송신 처리 | WebSocket sink/stream을 분리해 송신·수신 future를 독립 실행 | | Ubuntu 중계 | 상대 socket 송신/peer queue 대기가 역방향 수신까지 지연 | 각 방향을 별도 future로 실행하고 취소·기기 폐기 감시는 유지 | | 연결 종료 | TLS 마지막 레코드를 먼저 전송하고 Close를 확인 | 동일 원칙 유지. FIFO Finish 확인 후 취소하고 close acknowledgement 처리 | | 자원 한도 | 메시지 64KiB, relay queue 4개, PC pipe 128KiB | 한도 유지. 쓰기 및 종료 제한 시간도 유지 | | 초당 중계 제한 | 4MiB: 약 33.55Mbps여서 UI의 50Mbps 선택과 불일치 | 최대 4개 화면과 VBR burst를 고려해 32MiB/s의 보호 한도. 대역폭 목표나 속도 보장은 아님 | | 첫 RTT부터 매우 높은 경우 | 높은 값을 baseline으로 삼을 수 있음 | 활동 트래픽에서 RTT ≥500ms도 감속 조건으로 사용. 초당 20% 감소, 하한 1Mbps | | UDP fallback 설명 | UDP unavailable만 표시 | 경로 hover에 bind 실패/후보 없음/2초 hole punch 시간 초과/상대 확인 실패 표시 | 500ms와 20% 등은 **notParsec의 현재 혼잡 대응 정책**이다. Parsec 원본 BUD의 혼잡 제어를 복원했다는 뜻이 아니다. 정적인 화면처럼 실제 영상 트래픽이 매우 적을 때는 낮은 처리량을 회선 부족으로 간주하지 않는다. 물리적인 긴 경로 지연을 비트레이트만으로 없앨 수도 없다. ### 분리해도 남는 대기 WSS 영상과 Pong은 여전히 같은 순서 보장 TCP/TLS 스트림에 있다. 송신·수신 루프 분리는 반대 방향 입력까지 묶이던 문제를 줄이지만, 이미 영상 뒤에 들어간 Pong이 앞질러 갈 수 있도록 만들지는 않는다. 디코더가 늦어지면 영상과 RTT 응답 모두 기다릴 수 있다. 별도 제어 통로나 참조 프레임 복구를 수반한 영상 폐기 정책은 이번 변경에 포함되지 않았다. 따라서 WSS의 Network 값을 “순수 회선 ping”이나 “단방향 지연”으로 표시하지 않는다. 서버까지의 ping으로 PC 사이의 RTT를 대신 표시하지도 않는다. Direct UDP의 암호화, 순서·ACK 및 재전송 방식은 유지했다. ## 3. 실제로 수행한 네트워크 검증 - PC adapter: 로컬 pipe 128KiB를 채운 뒤 영상 수신을 멈춰도 반대 방향 입력을 500ms 이내에 전달하는 회귀 시험. - 실제 기기 등록·서명·세션 API와 Ubuntu relay: 12MiB 영상 송신을 시작하고 수신 앱은 영상을 읽지 않는다. 이 상태에서 키 해제용 역방향 데이터를 전달하는 시험을 추가했다. 로컬 실행 기록은 **약 0.635ms**였다. 이는 한 번의 loopback 시험 결과이며 인터넷이나 GPU 성능 수치가 아니다. - 마지막 96KiB를 보낸 직후 앱 stream을 drop하는 경우, Close ACK 대기, 중복 shutdown, 데이터가 유실된 transport에서 성공으로 보고하지 않는 경우를 확인했다. - 실제 TLS 위의 GPU 초기화 실패 메시지와 close_notify 전달, 잘못된 비밀번호, 기기 폐기 시 세션 종료 회귀를 확인했다. - UDP 손실·순서 변경·재전송·잘못된 인증·decoder backpressure 및 RTT 독립 처리 시험을 유지했다. - 첫 RTT가 2,200ms인 상태에서도 가변 비트레이트가 10 → 8 → 6.4 → 5.12Mbps로 요청을 낮추는지 확인했다. 실제 encoder 적용 결과는 별도로 반영된다. 시험 코드·로그와 배포 검증은 [검증 기록](evidence/network-color-validation.json)에 연결한다. 실제 Windows 두 PC에서의 개선 비율은 아직 측정하지 않았다. ## 4. 4:4:4와 10-bit는 무엇이 다른가 **4:4:4**는 색차 샘플링이다. 4:2:0은 2×2 픽셀마다 색차 정보를 공유하지만, 4:4:4는 픽셀마다 색차 정보를 보존한다. 작은 색 글씨와 얇은 경계에서 유리할 수 있고, 같은 품질을 유지하려면 대역폭과 codec 지원 부담이 커질 수 있다. **10-bit**는 성분의 정밀도다. 8-bit의 256단계보다 세밀한 1,024단계를 표현한다. 이 설정만으로 HDR이 되는 것은 아니다. HDR에는 캡처 색 공간·전달 함수·메타데이터·디스플레이 출력 처리가 함께 필요하다. 이번 구현은 **SDR BT.709의 전송 색상 선호**다. 캡처 입력은 여전히 BGRA8이다. 10-bit YUV 변환·전송·디코딩·표시 경로를 추가했지만 원래 캡처에 없던 10-bit 정밀도나 HDR 정보를 되살리지 않는다. 완전한 고정밀 캡처와 HDR은 남은 작업이다. ## 5. 원본 근거와 설정 동작 기준은 Windows Parsec **150-104a**, core SHA-256 `8c8c4299ddf503b2c25c0905b0a0820f3e8238c252e9ace37bf25964ef4a8f6f`다. | 원본 근거 | 확인한 내용 | 구현 및 차이 | |---|---|---| | 설정 문자열 `client_decoder_444`, 주소 `0x18033c8a0` | 기본 false, 기본 슬롯과 `_1`, `_2` 참조 | 같은 이름의 선호 필드를 ui.json에 보존. 원본 슬롯별 영속 저장 전체는 미구현 | | `client_decoder_10bit`, 주소 `0x18033ca90` | 기본 false, stream별 참조와 retry 경로 | 10-bit 선호 저장·협상. 원본 전체 retry 정책과 동일하다고 판정하지 않음 | | 디컴파일 `FUN_1800241b0` | Prefer 4:4:4 / Prefer 10-Bit 선택과 stream 재설정 경로 | 연결 중 Video Settings에서 재협상. 성공 응답 이후 설정 저장 | | `FUN_180067050` 및 공개 NVENC API 11 header | HEVC 설정 분기와 NVENC 구조체 대응 근거 | 공개 API의 Main/Main10/FREXT, chroma IDC 및 bit depth를 Rust/C FFI에 연결. 원본 소스 복원이 아님 | [설정 원본 색인](../analysis/parsec/research/settings/settings-evidence.json)과 [코덱 대응 문서](PARSEC_CODEC_COMPARISON.ko.md)를 함께 본다. 최신 [Parsec 색 품질 안내](https://support.parsec.app/hc/en-us/articles/32381785123860-Improve-Stream-Quality-and-Color-Accuracy)는 선호 설정과 하드웨어 의존성을 보조 확인하는 자료다. 최신 웹 설명이 보관한 150-104a의 실행 결과를 대체하지 않는다. Settings → Client와 접속 화면 → Video Settings에 **Prefer 4:4:4 Color / Prefer 10-Bit Color**를 연결했다. 선호 옵션을 켜면 H.265 후보를 허용한다. 지원하지 않을 때 체크를 몰래 끄거나 미지원 형식으로 표시하지 않고, 가능한 형식으로 내려가며 안내를 남긴다. ## 6. 실제 색상 협상과 GPU 경로 클라이언트가 가능한 decoder profile·output format·GPU 색 변환을 확인하고 지원 목록을 보낸다. 호스트는 그 목록 순서대로 encoder와 GPU conversion을 초기화한다. 둘 다 사용할 수 있는 첫 후보를 선택한다. | 선택 | HEVC 후보 우선순위 | 하위 후보 | |---|---|---| | 둘 다 끔 | 4:2:0 8-bit | H.264 4:2:0 8-bit | | 4:4:4만 | 4:4:4 8-bit → 4:2:0 8-bit | H.264 4:2:0 8-bit | | 10-bit만 | 4:2:0 10-bit → 4:2:0 8-bit | H.264 4:2:0 8-bit | | 둘 다 켬 | 4:4:4 10-bit → 4:4:4 8-bit → 4:2:0 10-bit → 4:2:0 8-bit | H.264 4:2:0 8-bit | 각 목록은 실제 프로브에서 성공한 후보로만 구성한다. 이 우선순위는 현재 notParsec 구현이며 Parsec 전체 fallback 순서와의 실행 대조는 남아 있다. 둘 다 끈 상태에서 H.265도 끄면 H.264만 요청한다. | 전송 형식 | Windows decoder surface | NVENC 입력 / profile | |---|---|---| | 4:2:0 8-bit | NV12 | NV12 / HEVC Main | | 4:2:0 10-bit | P010 | P010 / Main10 | | 4:4:4 8-bit | AYUV | AYUV / FREXT | | 4:4:4 10-bit | Y410 | RGB10(ABGR10) / FREXT, bit depth 10 | NVENC API 11에는 packed Y410 입력 enum이 없어 4:4:4 10-bit 입력은 GPU RGB10을 사용한다. `nvEncGetEncodeCaps`와 input format 목록을 확인하며, 지원하지 않으면 다음 후보로 넘어간다. MFT도 해당 raw subtype과 HEVC profile을 실제 설정해야 선택된다. Decoder는 Windows SDK의 HEVC Main10/444/44410 GUID와 출력 subtype을 확인한다. 10-bit 영상은 R10G10B10A2 GPU texture와 swap chain으로 표시한다. 기본 8-bit 영상은 기존 BGRA8 변환 경로를 유지한다. 10-bit swap chain을 만들 수 없는 환경에서는 10-bit 후보를 광고하지 않는다. GPU→CPU readback은 추가하지 않았다. 모니터·Windows compositor의 최종 물리 출력 정밀도는 아직 실기기 검증 전이다. 화면 상단의 `4:2:0 8-bit` 고정 문자열을 제거하고 **협상된 chroma/bit depth**를 표시한다. Decoder 출력 surface가 협상과 다르면 오류로 처리한다. 단, 실제 GPU에서 출력 bitstream SPS를 덤프해 비교하는 검증은 아직 하지 못했으며, 설정·초기화 성공만으로 모든 driver의 영상 품질을 보증하지 않는다. ## 7. 적용과 남은 차이 게시한 Windows 빌드는 **1790325968**이다. Windows EXE·서버 설치 파일 해시와 공개 readiness 응답을 확인했다. 새 협상 schema의 ALPN은 **`notparsec-remote/8`**이다. **접속하는 PC와 접속받는 PC를 모두 새 빌드로 업데이트**해야 한다. 같은 Windows EXE가 양쪽 역할을 계속 제공한다. 서버 중계 변경은 기존 앱의 WSS에도 적용되지만 PC adapter 및 선호 설정은 앱 업데이트가 필요하다. 확인은 원격 화면의 Video Settings에서 선호 옵션을 바꾼 후 상단의 `H.265 / 4:4:4 또는 4:2:0 / 10-bit 또는 8-bit`를 보는 방식이다. 4:2:0 8-bit로 남는다면 현재 두 PC의 프로브 결과에서 상위 조합이 성립하지 않은 것이다. NVENC 인코딩 지원만으로 Windows DXVA/MFT 디코딩까지 지원된다고 볼 수 없다. NVIDIA 전용 NVDEC decoder 경로와 원본 software 4:4:4 fallback은 이번에 추가하지 않았다. Linux/macOS 초기 FFmpeg 경로는 현재 RGBA8 표시이므로 **baseline 4:2:0 8-bit만 광고**한다. 설정은 보존하지만 고정밀 처리를 했다고 표시하지 않는다. Unix 전체 색상 지원은 E05의 후속 작업이다. 현재 F58은 **partial / parity different**다. 남은 항목은 실제 Windows GPU 조합별 4가지 형식의 encoder bitstream·decoder surface·색 패턴·실시간 전환·성능 확인, 150-104a와 같은 조건의 화면 및 fallback 비교, stream별 설정 보존, 고정밀 캡처/HDR, 세부 QP/VBV/IDR/slices 설정이다. ## 8. 2,000ms가 계속되면 구분할 데이터 1. 양쪽 앱의 현재 빌드와 상단 `Direct UDP` / `WSS relay`를 확인한다. WSS라면 경로에 마우스를 올려 fallback 이유를 확인한다. 2. Metrics Graphs → Basic에서 Network RTT, Decoder queue, Send wait, Target bitrate, host/sent/received/decoded FPS를 같은 시간에 확인한다. UDP TX 재전송 수는 현재 client 송신 측 누적값이므로 host 영상 손실률로 해석하지 않는다. 3. WSS + Decoder queue 증가이면 회선과 앱 대기가 섞인 값이다. Direct UDP + 큰 RTT이면 decoder 속도만으로 설명하지 말고 연결 경로·회선 부하·OS 큐와 함께 측정한다. 4. 같은 장면·해상도·codec에서 대역폭 한도를 낮추었을 때 RTT가 줄어드는지 비교한다. 줄어들면 혼잡/큐 적체의 근거가 되지만 어느 장비의 큐인지까지 확정하지는 못한다. 수치가 없는 구간을 0ms로 채우거나 다른 PC/서버의 측정값으로 대신하지 않는다.