2026-09-24 · progress-14 · F05/F08/F09/F12/F13/F14/F68 · 소스 구현, Windows 실기 대조 전.
실제 변경
이전 빌드 1790248405는 GPU 디코딩 뒤 BGRA staging texture를 Map(READ)하여 CPU로 복사하고, egui 픽셀 배열을 만들어 OpenGL로 다시 올렸다. 새 Windows 앱은 같은 창의 원격 화면과 기존 플로팅 메뉴를 D3D11로 그린다. 사용자용 호스트/클라이언트 EXE를 분리하지 않는다.
호스트: DXGI → D3D11 색 변환 → NVENC / hardware MFT → 기존 TLS/WSS
클라이언트: TLS/WSS → D3D11/DXVA MFT → GPU NV12 surface
→ GPU NV12/BGRA 변환 → D3D11 화면·메뉴 합성 → DXGI Present
현재 표시 경로에는 영상용 CPU staging texture, Map(READ), BGRA 픽셀 배열, 픽셀별 CPU 색 변환, 영상 텍스처 재업로드가 없다. GPU 안의 색 변환과 렌더링은 남는다. UI 글꼴·도형 데이터의 정상적인 CPU 업로드까지 없다는 뜻은 아니다. Parsec의 모든 client_zero_copy 분기를 복원했다고 주장하지 않는다.
구현:
crates/platform-win/src/gpu_video.rs: 디코더가 만든 GPU surface와 sample 수명을 전달. 기존 H.264/HEVC 협상·복구 유지. 인코딩 입력 준비와 출력 대기 시간을 별도로 측정. 색 변환 입력 view는 최대 16개, 출력 view는 하나를 재사용한다.crates/platform-win/src/gpu_video/presenter.rs: D3D11 렌더러, bounded sample lease, GPU 완료 query, 같은 장치의 색 변환·UI 합성, flip-model swap chain. 디코더와 화면 표시 장치를 공유해 다른 GPU 사이의 복사를 피한다.crates/desktop-ui/src/app/native.rs: Windows 창·입력·DPI·전체 화면·업데이트 종료·접근성 이벤트를 기존 egui UI에 연결한다. 기존의 CPU 영상 텍스처 경로를 사용하지 않는다.apps/control-server/src/main.rs: 수락한 TCP 연결에TCP_NODELAY를 설정한다. Nginx 뒤 서버 소켓에서 작은 WebSocket 응답이 Nagle 정책으로 지연될 수 있는 경로를 줄인다. 실제 외부망 개선량은 미측정이다.
화면 수명과 동기화
단순히 texture 포인터만 넘기면 디코더가 같은 surface를 다음 프레임에 재사용할 수 있다. 최초 구현의 AgileReference<IMFSample>은 프록시 등록 오류 0x80040155가 보고되어 progress-21에서 private Arc<SampleLease>로 교정했다. 렌더러는 색 변환이 GPU에서 끝났다는 query를 확인한 뒤 sample을 반환한다. 아직 소비 중인 sample은 최대 세 개로 제한하고, 형식 변경·종료에서도 GPU 사용이 끝난 뒤 해제한다. 대기 한도 초과는 오류이며 성공한 것처럼 프레임을 덮어쓰지 않는다.
Windows UI의 STA와 디코더 worker의 MTA를 구별한다. 같은 D3D11 immediate context는 multithread protection을 켜고 UI 상태 설정·그리기·Present 구간을 보호한다. 새 lease는 in-process MFT 출력 sample의 참조 수명만 전달하는 제한된 Send/Sync 구현이며 인터페이스 메서드를 노출하지 않는다. 적용 조건·IUnknown 규칙·MFStartup 수명은 교정 근거에 기록했다. 실제 드라이버별 sample 반환·최소화·장치 제거·전체 화면 동작은 Windows 시험이 필요하다.
계측값 해석
| 항목 | 현재 의미 | 비교 주의 |
|---|---|---|
| Decode | 해당 압축 프레임 처리 시작 → MFT GPU 출력 surface 획득 | 이전 빌드는 색 변환·CPU readback까지 포함. 숫자만 낮아졌다고 같은 비율의 전체 지연 개선을 주장하지 않는다. GPU timestamp/모니터 표시 시각은 아니다. |
| CPU readback | 영상 픽셀의 CPU 복사 구간 | 새 경로는 복사가 없으므로 프레임이 있을 때 0. 미측정 구간은 —. |
| GPU prepare | 표시용 GPU 색 변환 제출과 이전 sample 반환 대기 | GPU 실행 전체를 타이머 query로 측정한 값이 아니다. |
| D3D11 draw/present | UI 그리기 제출과 DXGI Present 호출의 CPU 경과 시간 | 실제 scanout 완료 시각은 아니다. |
| Decoder queue | 수신 task가 디코더 큐에 넣으려고 기다린 이벤트당 평균 | 기존 스트림 안의 RTT 응답도 이 대기에 영향을 받는다. RTT에서 임의로 빼지 않는다. |
| Encode | 입력 준비·색 변환 → 압축 출력 획득 | 기존 wire 의미 유지. 로컬 video-probe는 encoder_prepare_ms와 encoder_output_ms로 나눠 보고한다. 후자는 API/비동기 출력 대기도 포함한다. |
| Network | 기존 서버 중계의 Probe/Pong RTT | P2P RTT로 표시하지 않는다. 회선·TCP 순서 대기·앱 큐가 포함된다. |
새 표시 경로와 큐 계측은 wire 필드를 추가하지 않는다. ALPN /5를 유지하며 기존 /5 앱과 호환된다. /3·/4와의 연결 불가 문제는 여전히 양쪽을 /5 지원 빌드로 갱신해야 해결된다. 새 렌더링 개선은 접속하는 PC를 갱신해야 적용되고, 색 변환 재사용은 호스트를 갱신해야 적용된다.
직접 연결을 완료했다고 표시하지 않는 이유
이번 코드의 실제 영상 경로는 여전히 서버 WSS/TCP 중계다. 서버 소켓 설정과 GPU 병목 제거는 직접 P2P 구현의 대체물이 아니다.
보관한 150-104a에서 확인한 원본 근거는 다음과 같다.
FUN_18009b410: BUD/SCTP 전송 구현 선택과 공통 callback 경계.FUN_18003d430: 7바이트 조각 헤더, 첫 조각의 4바이트 전체 길이, channel/sequence, 마지막 조각 비트, 4000개 ring.FUN_18003beb0: 최대 1200바이트 평문과 AES-GCM, 평문보다 29바이트 큰 UDP 송신.FUN_18003cc80: UDP 수신/타이머/제어 처리를 포함한 transport worker.
이 근거만으로 NAT 후보 선택·키 수명·재전송/ACK·혼잡 제어·단절 복구 전체를 동일하게 구현했다고 판정할 수 없다. 해당 함수와 호출부의 입출력·상태를 더 연결해야 한다. 기존 QUIC 인증 시험을 실시간 영상에 붙여 놓고 BUD 구현이라고 표시하지 않는다. F10/F31–F33은 미완료로 유지한다.
원본과 공개 API의 출처
기준은 Windows Parsec 150-104a, 코어 SHA-256 8c8c4299ddf503b2c25c0905b0a0820f3e8238c252e9ace37bf25964ef4a8f6f다. DLL 체크아웃은 LFS 포인터이며 여기서는 보관한 분석 산출물을 읽었다. 새 Windows 렌더러는 Rust 독립 구현이다.
- 구조·GPU 책임 분석, 검토 함수, 전체 디컴파일 의사 코드.
FUN_18005e060/FUN_18005eb30에 NVIDIA/D3D11 texture 연동,FUN_180088aa0/FUN_18008e6b0/FUN_1800915d0/FUN_180094b00에 렌더러 표기/선택 근거가 있다. 모든 renderer 구현/동기화 의미를 복원한 증거는 아니다. - Microsoft: D3D11 multithreading, Media Foundation과 COM, Media samples: 새 구현의 API·수명 근거. Parsec과의 실행 대조는 아니다.
검증과 두 PC 확인
빌드·자동 시험·게시 상태는 검증 기록을 확인한다. Linux 테스트와 Windows cross build는 실제 D3D11 창/드라이버 실행 시험을 대신하지 않는다. 원본 동작 일치와 실측 성능은 미검증이며 완료 수를 올리지 않는다.
양쪽 업데이트 후 동일 해상도·코덱·움직이는 장면으로 각각 30초 이상 비교한다. Parsec/notParsec을 동시에 스트리밍하면 GPU 자원을 경쟁하므로 번갈아 실행한다. 새 Basic Performance의 renderer 이름, CPU readback, GPU prepare, D3D11 draw/present, Decoder queue, 단계별 FPS와 RTT를 함께 기록한다. 해상도 변경·전체 화면·최소화/복원·접속 종료·업데이트 종료도 확인한다.