notParsec / 문서전체 문서

설명·설계 문서

D3D11 직접 표시와 남은 네트워크 차이

design/GPU_PRESENTATION.ko.md

출처: 현재 작업 폴더 · 원문 다운로드

이 문서의 목차

2026-09-24 · progress-14 · F05/F08/F09/F12/F13/F14/F68 · 소스 구현, Windows 실기 대조 전.

실제 변경

이전 빌드 1790248405는 GPU 디코딩 뒤 BGRA staging texture를 Map(READ)하여 CPU로 복사하고, egui 픽셀 배열을 만들어 OpenGL로 다시 올렸다. 새 Windows 앱은 같은 창의 원격 화면과 기존 플로팅 메뉴를 D3D11로 그린다. 사용자용 호스트/클라이언트 EXE를 분리하지 않는다.

호스트: DXGI → D3D11 색 변환 → NVENC / hardware MFT → 기존 TLS/WSS
클라이언트: TLS/WSS → D3D11/DXVA MFT → GPU NV12 surface
         → GPU NV12/BGRA 변환 → D3D11 화면·메뉴 합성 → DXGI Present

현재 표시 경로에는 영상용 CPU staging texture, Map(READ), BGRA 픽셀 배열, 픽셀별 CPU 색 변환, 영상 텍스처 재업로드가 없다. GPU 안의 색 변환과 렌더링은 남는다. UI 글꼴·도형 데이터의 정상적인 CPU 업로드까지 없다는 뜻은 아니다. Parsec의 모든 client_zero_copy 분기를 복원했다고 주장하지 않는다.

구현:

화면 수명과 동기화

단순히 texture 포인터만 넘기면 디코더가 같은 surface를 다음 프레임에 재사용할 수 있다. 최초 구현의 AgileReference<IMFSample>은 프록시 등록 오류 0x80040155가 보고되어 progress-21에서 private Arc<SampleLease>로 교정했다. 렌더러는 색 변환이 GPU에서 끝났다는 query를 확인한 뒤 sample을 반환한다. 아직 소비 중인 sample은 최대 세 개로 제한하고, 형식 변경·종료에서도 GPU 사용이 끝난 뒤 해제한다. 대기 한도 초과는 오류이며 성공한 것처럼 프레임을 덮어쓰지 않는다.

Windows UI의 STA와 디코더 worker의 MTA를 구별한다. 같은 D3D11 immediate context는 multithread protection을 켜고 UI 상태 설정·그리기·Present 구간을 보호한다. 새 lease는 in-process MFT 출력 sample의 참조 수명만 전달하는 제한된 Send/Sync 구현이며 인터페이스 메서드를 노출하지 않는다. 적용 조건·IUnknown 규칙·MFStartup 수명은 교정 근거에 기록했다. 실제 드라이버별 sample 반환·최소화·장치 제거·전체 화면 동작은 Windows 시험이 필요하다.

계측값 해석

항목 현재 의미 비교 주의
Decode 해당 압축 프레임 처리 시작 → MFT GPU 출력 surface 획득 이전 빌드는 색 변환·CPU readback까지 포함. 숫자만 낮아졌다고 같은 비율의 전체 지연 개선을 주장하지 않는다. GPU timestamp/모니터 표시 시각은 아니다.
CPU readback 영상 픽셀의 CPU 복사 구간 새 경로는 복사가 없으므로 프레임이 있을 때 0. 미측정 구간은 —.
GPU prepare 표시용 GPU 색 변환 제출과 이전 sample 반환 대기 GPU 실행 전체를 타이머 query로 측정한 값이 아니다.
D3D11 draw/present UI 그리기 제출과 DXGI Present 호출의 CPU 경과 시간 실제 scanout 완료 시각은 아니다.
Decoder queue 수신 task가 디코더 큐에 넣으려고 기다린 이벤트당 평균 기존 스트림 안의 RTT 응답도 이 대기에 영향을 받는다. RTT에서 임의로 빼지 않는다.
Encode 입력 준비·색 변환 → 압축 출력 획득 기존 wire 의미 유지. 로컬 video-probe는 encoder_prepare_ms와 encoder_output_ms로 나눠 보고한다. 후자는 API/비동기 출력 대기도 포함한다.
Network 기존 서버 중계의 Probe/Pong RTT P2P RTT로 표시하지 않는다. 회선·TCP 순서 대기·앱 큐가 포함된다.

새 표시 경로와 큐 계측은 wire 필드를 추가하지 않는다. ALPN /5를 유지하며 기존 /5 앱과 호환된다. /3·/4와의 연결 불가 문제는 여전히 양쪽을 /5 지원 빌드로 갱신해야 해결된다. 새 렌더링 개선은 접속하는 PC를 갱신해야 적용되고, 색 변환 재사용은 호스트를 갱신해야 적용된다.

직접 연결을 완료했다고 표시하지 않는 이유

이번 코드의 실제 영상 경로는 여전히 서버 WSS/TCP 중계다. 서버 소켓 설정과 GPU 병목 제거는 직접 P2P 구현의 대체물이 아니다.

보관한 150-104a에서 확인한 원본 근거는 다음과 같다.

이 근거만으로 NAT 후보 선택·키 수명·재전송/ACK·혼잡 제어·단절 복구 전체를 동일하게 구현했다고 판정할 수 없다. 해당 함수와 호출부의 입출력·상태를 더 연결해야 한다. 기존 QUIC 인증 시험을 실시간 영상에 붙여 놓고 BUD 구현이라고 표시하지 않는다. F10/F31–F33은 미완료로 유지한다.

원본과 공개 API의 출처

기준은 Windows Parsec 150-104a, 코어 SHA-256 8c8c4299ddf503b2c25c0905b0a0820f3e8238c252e9ace37bf25964ef4a8f6f다. DLL 체크아웃은 LFS 포인터이며 여기서는 보관한 분석 산출물을 읽었다. 새 Windows 렌더러는 Rust 독립 구현이다.

검증과 두 PC 확인

빌드·자동 시험·게시 상태는 검증 기록을 확인한다. Linux 테스트와 Windows cross build는 실제 D3D11 창/드라이버 실행 시험을 대신하지 않는다. 원본 동작 일치와 실측 성능은 미검증이며 완료 수를 올리지 않는다.

양쪽 업데이트 후 동일 해상도·코덱·움직이는 장면으로 각각 30초 이상 비교한다. Parsec/notParsec을 동시에 스트리밍하면 GPU 자원을 경쟁하므로 번갈아 실행한다. 새 Basic Performance의 renderer 이름, CPU readback, GPU prepare, D3D11 draw/present, Decoder queue, 단계별 FPS와 RTT를 함께 기록한다. 해상도 변경·전체 화면·최소화/복원·접속 종료·업데이트 종료도 확인한다.