idsia.ch

이 이메일 도메인이 관측된 논문 2건

arXiv:2607.06145v1cs.CL

프롬프팅 복잡도: LLM에서 텍스트와 행동을 위한 최단 프롬프트

Prompting Complexity: Shortest Prompts for Texts and Behaviors in LLMs

고정된 인스트럭션 튜닝 대규모 언어 모델(LLM)에서 목표 텍스트를 생성하는 가장 짧은 그럴듯한 프롬프트의 길이를 측정하는 프롬프팅 복잡도(prompting complexity)를 자원 제한 콜모고로프 복잡도(Kolmogorov complexity)의 언어 모델 상대적 유사체로 형식화하였다. 근사 출력을 위한 소프트 프롬프팅 복잡도, 프롬프팅 거리, 행동적 프롬프팅 복잡도로 개념을 확장하며, 어떤 텍스트와 행동이 짧은 프롬프트로 접근 가능한지를 실증적으로 연구하기 위한 연구 의제를 제안한다.

arXiv:2606.24966v1cs.LG

Learning Dynamical Systems from Multiple Sparse Datasets: A Hierarchical Bayesian Modeling Approach

희소하고 불규칙하게 샘플링된 복수의 데이터셋에서 동역학 시스템(dynamical systems) 파라미터를 추정하는 문제를 다루며, 데이터셋별 파라미터를 공유 모집단 분포에서의 샘플로 모델링하는 계층적 베이지안(Hierarchical Bayesian) 메타학습 프레임워크를 제안한다. 미분방정식(ODE) 수치 솔버를 그래디언트 기반 MCMC(No-U-Turn Sampler)에 내장하여 효율적인 사후 추론을 가능하게 하였으며, Lotka-Volterra 벤치마크 실험에서 비풀링(unpooled) 방법 대비 예측 성능이 크게 향상됨을 보였다.