arXiv:2611.16534v1 cs.CV

얼굴 제시 공격 탐지를 위한 문맥 예측 저순위 적응

Context-Predictive Low-Rank Adaptation for Face Presentation Attack Detection

Aminu Yusuf, Shakeel Muhammad Ibrahim, Sulaimon Oyeniyi Adebayo, Muhammad Sohail Ibrahim, Muhammad Shahid Jabbar, Shujaat Khan

제출 2026-11-12

저자 비고

arXiv Comments

This work has been submitted to the IEEE for possible publication. Copyright may be transferred without notice, after which this version may no longer be accessible

한국어 초록

얼굴 제시 공격 탐지에는 획득 장치, 대상자, 공격 매체의 변화에도 물리적 스푸핑 단서를 구별하는 표현이 필요하다. 대형 시각 인코더는 전이 가능한 표현을 제공하지만, 기존의 이진 미세 조정은 부분 관측 상황에서 국소 얼굴 증거가 어떻게 표현되는지를 명시적으로 제약하지 않은 채 최종 결정만을 지도한다. 우리는 사전 학습된 CLIP 이미지 인코더의 저순위 조정과 결합 임베딩 예측 목적 함수를 결합한 문맥 예측 적응 프레임워크인 CP-JEPA를 제시한다. 학생 모델은 마스킹된 공간 위치에서 전체 이미지 교사 특징을 예측하며, 마스킹되지 않은 분류, 마스킹된 분류, 예측 일관성이 실제/스푸프 과제와의 연결을 유지한다. 지수 이동 평균 교사는 진화하는 잠재 목표를 제공한다. 보조 구성 요소는 학습 중에만 사용되며, 추론에는 LoRA로 적응된 CLIP 시각 인코더와 이진 분류기만 필요하다. {우리는 CP-JEPA를 단일 소스 및 다중 소스 OCIM 전이, CelebA-Spoof 추가 학습, CelebA-Spoof로의 전이, 두 소스 학습, SiW-Mv2에서의 미확인 공격 평가에서 평가한다.} 표준 OCIM 벤치마크에서 CP-JEPA는 평균 HTER 3.74%와 평균 AUC 98.73%를 달성한다. {단일 소스 평가는 열두 개의 소스-타깃 조합에서 평균 HTER 11.36%를 달성한다.} 세 개의 OCIM 학습 소스에 CelebA-Spoof를 추가하면 CP-JEPA는 평균 HTER를 3.45%에서 2.35%로 낮추고 평균 AUC를 98.68%에서 99.32%로 높인다. SiW-Mv2에서는 제외된 공격 범주 전반에서 평균 HTER 3.36%를 달성한다. 통제된 손실 제거 실험은 잠재 예측, 마스킹된 분류, 예측 일관성의 기여를 검토한다. 결과는 문맥 예측 적응이 데이터셋 간 PAD 성능을 향상시킬 수 있음을 보여 주지만, 그 이득은 학습 소스와 평가 설정에 따라 달라진다.

원문 초록

Face presentation attack detection requires representations that distinguish physical spoofing cues across changes in acquisition devices, subjects, and attack media. Large visual encoders offer transferable representations, but conventional binary fine-tuning supervises their final decisions without explicitly constraining how local facial evidence is represented under partial observation. We present CP-JEPA, a context-predictive adaptation framework that combines low-rank tuning of a pretrained CLIP image encoder with a joint-embedding predictive objective. A student predicts complete-image teacher features at masked spatial locations, while unmasked classification, masked classification, and prediction consistency retain the connection to the live/spoof task. An exponential-moving-average teacher supplies evolving latent targets. The auxiliary components are used only during training; inference requires only the LoRA-adapted CLIP visual encoder and binary classifier. {We evaluate CP-JEPA under single-source and multi-source OCIM transfer, additional CelebA-Spoof training, transfer to CelebA-Spoof, two-source training, and unseen-attack evaluation on SiW-Mv2.} On the standard OCIM benchmark, CP-JEPA achieves 3.74\% mean HTER and 98.73\% mean AUC. {Single-source evaluation achieves 11.36\% mean HTER across twelve source--target combinations.} With CelebA-Spoof added to the three OCIM training sources, CP-JEPA reduces mean HTER from 3.45\% to 2.35\% and increases mean AUC from 98.68\% to 99.32\%. On SiW-Mv2, it achieves 3.36\% mean HTER across the held-out attack categories. Controlled loss ablations examine the contributions of latent prediction, masked classification, and prediction consistency. The results show that context-predictive adaptation can improve cross-dataset PAD performance, although the gains vary with the training sources and evaluation setting.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.16534v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.