PyTorchKR Papers

최신 논문

총 2편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2511.02496v3cs.LG

Geometry as a Missing Axis of Representation Quality: The Variational Geometric Information Bottleneck under Data Scarcity

We study latent geometry as an explicit component of representation quality in data-scarce learning. For an encoder (\phi), we define (Q_{\beta,\gamma}(\phi)=I(\phi(X);Y)-\beta\mathcal C(\phi)-\gamma d_{\mathrm{int}}(\phi)), combining task-relevant information with penalties for curvature and intrinsic latent dimension. Thus geometry becomes part of the bottleneck criterion, not only a post hoc diagnostic. Under smooth-manifold, loss-transfer, and estimator-concentration assumptions, we derive non-asymptotic low-label generalization bounds where intrinsic dimension and covering complexity enter explicitly. We characterize the information--geometry frontier and prove empirical-surrogate consistency. The analysis links encoder geometry to learning through latent covering numbers, loss-class entropy, and uniform deviation. We instantiate the theory as \texttt{V-GIB}, adding curvature and dimension penalties to variational bottleneck training. Real low-label benchmarks compare \texttt{V-GIB} with ERM, VIB, and ablations across (1%)--(20%) label fractions. Results show improved performance and reduced geometric complexity in several regimes, especially FashionMNIST and CIFAR-10, while confirming that no fixed regularizer is universally dominant.

arXiv:2609.26959v2cs.LG

순환단전으로 인한 데이터 희소성 환경에서 태양광 발전을 예측하기 위한 컨포멀 분위수 회귀 결합 전이학습

Transfer Learning with Conformalized Quantile Regression for Solar PV Forecasting Under Load-Shedding-Driven Data Scarcity

순환단전(load shedding)의 영향을 받는 지역에서의 태양광(PV) 발전 예측은 신뢰할 수 있는 과거 관측 데이터가 부족하여 난도가 높습니다. 본 연구에서는 심각한 데이터 희소성 환경에서 태양광 발전 예측 성능을 향상시키고 신뢰성 있는 불확실성 추정치를 제공하기 위해 컨포멀 분위수 회귀(Conformalized Quantile Regression, CQR)와 결합된 전이학습(transfer learning) 프레임워크를 제안합니다. 호주 앨리스스프링스(Alice Springs)의 소스 도메인 태양광 데이터셋을 활용해 시계열 예측 모델을 사전학습(pre-training)한 후, 다양한 수준의 과거 데이터 가용성을 모사한 방글라데시 시뮬레이션 태양광 데이터에 이를 적응시킵니다. 실험 결과에 따르면, 전이학습은 타깃 도메인 데이터가 1개월치만 가용할 때 RMSE를 최대 23.7% 감소시켰으며, 3개월치의 데이터가 있을 때는 13.7% 감소시켰습니다. 제안된 전이학습 및 CQR 프레임워크는 3개월의 타깃 데이터로 94.3%의 경험적 커버리지(empirical coverage)를 달성하는 동시에, 전이학습을 적용하지 않은 경우보다 14% 더 좁은 예측 구간을 생성했습니다. 이러한 결과는 타깃 도메인의 태양광 데이터가 극히 제한적인 상황에서 전이학습과 컨포멀 불확실성 정량화의 결합이 점 예측 정확도와 불확실성 신뢰도를 모두 향상시킬 수 있음을 입증합니다.