PyTorchKR Papers

최신 논문

총 2,847편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2606.30481v1cs.CY

상황 지각: 인공 초지능의 필수 기본 요소

Situation Perception: A Necessary Primitive to Artificial Superintelligence

현재의 대규모 언어 모델(LLM)은 놀라운 통계 엔진이다. 이 모델들은 방대한 양의 텍스트를 유용한 패턴으로 압축하며, 과학을 설명하고, 코드를 작성하고, 추론을 모방하며, 철학적 대화에 참여할 수 있다. 그러나 패턴 숙달은 일반 지능과 동일하지 않다. 인간 유아는 명시적 지식이 거의 없는 상태에서 출발하지만, 물체 영속성, 인과 관계, 타인의 마음, 신체적 행위성, 물리적 세계의 지속성을 점차 발견해 나간다. 우리는 인공 초지능(ASI)으로 가는 경로가 우리가 상황 지각(situation perception)이라 부르는 누락된 능력, 즉 잠재적 시간에 걸쳐 가능한 세계들의 내부 시뮬레이션을 구성하고, 수정하며, 그 안에서 행동하는 능력에 달려 있다고 주장한다. 상황 지각은 최소한 세 가지 핵심 구성 요소를 필요로 한다: 추상적 예측, 장기 압축 기억, 그리고 목표에 의해 안내되는 능동적 학습. 본 연구에서 우리는 현대 대규모 언어 모델이 왜 불완전한 상태로 남아 있는지 분석하고, 미래를 시뮬레이션하고, 자기 주도적 목표를 추구하며, 자신의 창조자를 판단할 수도 있는 기계의 발전을 측정하고 그 결과를 평가하기 위한 적절한 테스트를 제안한다.

arXiv:2606.30335v1cs.AI

BayesEvolve: 자율 과학적 발견을 위한 명시적 신념 상태

BayesEvolve: Explicit Belief States for Autonomous Scientific Discovery

자율 과학적 발견 시스템은 새로운 가설을 제안하기 위해 점점 더 대규모 언어 모델(LLM)을 활용하고 있지만, 이러한 시스템의 대부분은 주로 실험 메모리, 즉 높은 점수를 받은 후보들의 아카이브나 최근 시도에 대한 휴리스틱 요약에 조건부로 동작한다. 우리는 발견 에이전트가 가설 품질에 대한 명시적이고 불확실성을 인식하는 신념을 유지해야 한다고 주장한다. 우리는 BayesEvolve를 소개한다. 이는 실험적 증거를 예측적 신념 상태로 변환하고, 이 신념을 사용하여 향후 실험을 안내하는 신념 기반 발견 프레임워크이다. 신념 기반 발견을 위한 제어된 테스트베드로서, 우리는 이동된 BBOB 스타일의 블랙박스 최적화 태스크에서 BayesEvolve를 평가하며, 프로그램 및 실험실 발견 도메인은 향후 연구로 남긴다. BayesEvolve는 고정된 평가 예산 하에서 메모리 및 아카이브 기반 LLM 베이스라인 대비 샘플 효율성을 향상시킨다. 우리는 또한 신념 상태가 보류된 후보 풀에서 예측력을 가지며, 제어된 의사결정 규칙 ablation 실험에서 어닐링된 불확실성 보너스를 사용한 신념 기반 선택이 유리함을 보인다. 그리고 BayesEvolve는 무분별한 탐험 대신 생산적인 후기 집중 현상을 나타낸다.

arXiv:2606.29799v1cs.AI

The CRISTAL Method: Neurosymbolic analysis from AI-synthesized world models

This project introduces the CRISTAL Method (Coherent Reliable Intentional Synthesis of Truthful Analysis Logic), a neurosymbolic framework for automating complex analysis workflows, with fundamental investment analysis as a primary use case. This domain poses major challenges: high structural uncertainty, noisy and subjective data, tight attention budgets, and the need for justified, reproducible decisions. Human analysts often struggle in this domain due to cognitive biases and limitations, suggesting significant value in automation. But while LLM-based agents have been proposed as analytical aids, their limitations -- poor numerical reasoning, unawareness of uncertainty, and lack of reproducibility -- hinder their effectiveness in this context. CRISTAL addresses these gaps through a principled blend of statistical model synthesis, continuous learning, and active learning. Starting from a natural-language prior knowledge curriculum, CRISTAL builds a dynamic, interpretable probabilistic program that enables full Bayesian inference, including uncertainty quantification and budget-aware data acquisition. CRISTAL continually refines its world model during analysis, leveraging LLMs for code synthesis and learning. We validate CRISTAL on a novel benchmark of synthetic equities with rich financial and textual data. On a company classification task, CRISTAL achieves Bayes-optimal accuracy with just 5 examples and a 5-second budget, outperforming state-of-the-art LLMs that plateau around 40\% accuracy even with order-of-magnitude more input data and compute.

arXiv:2606.29315v1cs.AI

Hierarchical Experimentalist Agents

Large language models (LLMs) are increasingly used to take actions in the real world and support human decision-making, yet most agents rely on parametric knowledge, fixed post-training data, retrieval, or search. This paradigm breaks down in novel domains and for sophisticated queries that cannot be answered from prior knowledge alone. Knowing the laws of physics, for instance, does not by itself enable LLMs to answer queries or complete long-horizon tasks in a complex physical system. To address this, we introduce Hierarchical Experimentalist Agents (HExA), an in-context self-improvement framework to learn from active experimentation. HExA iteratively designs and refines query-relevant experiments, learns a reusable library of composable skills from experience, and integrates experimental evidence to answer queries or take actions. HExA is training-free, compatible with any black-box model, and does not require external supervision, oracles, or offline data. To evaluate active experimentation, we introduce Interphyre, a tool-calling benchmark built on the PHYRE 2D procedural physics environment, where agents propose interventions and test hypotheses through simulation APIs. Experiments show that current LLM agents struggle in these settings, especially on the hardest levels of Interphyre. Claude Sonnet 4.6 achieves only 2% success, while HExA improves the same model to up to 77% success. HExA also improves open-weight models and outperforms agentic baselines such as ReAct and Reflexion. Moreover, using only skills learned from easier levels and transferred without active experimentation, HExA achieves 44% success, demonstrating the reusability and generalization of its learned skills. Overall, HExA shows that learning through active experimentation can help agents discover useful knowledge, acquire reusable skills, and make efficient progress on novel long-horizon tasks.

arXiv:2604.25241v2cs.LG

고차원 불확실성 하 구조 설계를 위한 베이지안 고정 잠재 신뢰 영역 기반 범주형 최적화

Categorical Optimization with Bayesian Anchored Latent Trust Regions for Structural Design under High-Dimensional Uncertainty

고차원 불확실성 하에서 범주형 구조 최적화 시 기존 방법의 연속 완화(continuous relaxation) 및 반올림 오류 문제를 해결하기 위해, COBALT 프레임워크는 물리적 카탈로그를 저차원 잠재 공간에 이산 앵커 그래프로 고정하고 SAAS-GP 대리 모델과 신뢰 영역 기반 이산 그래프 탐색을 결합하여 항상 유효한 카탈로그 설계만을 평가한다. 복잡한 보(beam) 구조의 강건 설계 최적화 실험에서 COBALT는 완화 기반 및 비대리 탐색 전략 대비 우수한 효율을 보임을 수치 예제를 통해 입증한다.

arXiv:2606.02004v2cs.CL

소매 상품명을 소비자물가 카테고리로 코딩하기 위한 머신러닝: 신뢰도 가중 휴먼-인-더-루프 라벨링을 적용한 규칙+BoW 파이프라인

Machine Learning for Coding Retail Product Names to Consumer-Price Categories: A Rule-plus-Bag-of-Words Pipeline with Reliability-Weighted Human-in-the-Loop Labeling

소비자물가 측정은 점점 스캐너, 웹 스크래핑, 거래/영수증 데이터 등 대체 데이터 소스에 의존하고 있으며, 이러한 데이터의 상품 설명은 짧고 노이즈가 많으며 표준 상품 코드가 없으므로, 가격을 비교하기 전에 각 항목을 먼저 소비 분류(예: UN COICOP 체계)에 매핑해야 한다. 본 논문은 그 매핑을 일반적이고 재현 가능한 방법으로 연구한다. 파이프라인은 다음과 같다: (i) 노이즈가 많은 항목명의 텍스트 정규화 및 토큰화; (ii) 카테고리별 키 구문과 정지 구문에 의해 구동되는 접두사 트리(trie) 규칙 기반 사전 분류기; (iii) 카테고리별 이진 확인 모델. 대규모 라벨링을 위해 어노테이터가 유효/거부 이진 판정을 내리고 이를 동적으로 갱신되는 신뢰도 가중치로 집계하는 휴먼-인-더-루프 프로토콜을 사용한다; 모델이 동일한 규칙에 합류하여 지속적인 미세조정을 가능하게 한다. 6개의 COICOP 유사 카테고리로 구성된 재현 가능한 합성 벤치마크에서, 동일 프로토콜 하에 저렴한 모델이 우수하고 순서에 민감한 모델은 도움이 되지 않는다: 문자 n-gram 로지스틱 회귀가 모든 카테고리에서 최고 성능(mean F1 = 0.997)을 기록하고, 단어 순서 특성은 아무 기여도 하지 않으며, 소형 CNN/LSTM 모델은 이 소규모 데이터 환경에서 가장 약하다. trie만으로는 항목의 32-50%만 처리할 수 있으므로 학습 단계가 필요하며, 카테고리당 약 66개의 라벨로 충분하다. 라벨링 프로토콜에 대한 몬테카를로 연구는 자기 비판적이다: 신뢰도 가중 투표는 단순 다수결을 거의 앞서지 못하고 Dawid-Skene은 라벨을 현저히 더 잘 복구한다. 모든 코드와 합성 데이터가 공개되었다(DOI 10.5281/zenodo.20909563); 독점 또는 운영 데이터는 사용하지 않았다.

arXiv:2604.04535v2cs.LG

동치 쿼리로부터의 학습, 재고찰

Learning from Equivalence Queries, Revisited

생성 모델과 추천 시스템 같은 현대 기계학습 시스템은 배포, 사용자 상호작용, 주기적 모델 업데이트의 순환을 통해 발전하는 경우가 많다. 이는 고정된 예측 과제 시퀀스에 대한 손실 또는 후회 최소화에 초점을 맞추는 표준 지도학습 프레임워크와 다르다. 이러한 설정에 착안하여, 우리는 Angluin(1988)이 도입한 동치 쿼리로부터의 학습이라는 고전적 모델을 재고찰한다. 이 모델에서 학습자는 반복적으로 가설을 제안하고, 배포된 가설이 부적절할 경우 반례를 받는다. 그러나 완전 적대적 반례 생성 하에서는 모델이 지나치게 비관적일 수 있다. 또한 대부분의 선행 연구는 학습자가 반례의 올바른 레이블도 관찰하는 완전 정보(full-information) 설정을 가정하는데, 이는 항상 자연스러운 가정이 아니다. 우리는 환경을 덜 적대적인 반례 생성기의 광범위한 부류로 제한함으로써 이러한 문제를 해결하며, 이를 대칭적(symmetric) 생성기라 부른다. 비형식적으로, 이러한 생성기는 가설과 타깃 사이의 대칭 차집합만을 기반으로 반례를 선택한다. 이 부류는 무작위 반례(Angluin and Dohrn, 2017; Bhatia, 2021; Chase, Freitag, and Reyzin, 2024)와 같은 자연스러운 메커니즘뿐 아니라, 주어진 복잡도 척도에 따라 가장 단순한 반례를 반환하는 생성기도 포괄한다. 이 프레임워크 내에서 완전 정보 피드백과 밴딧(bandit) 피드백 양쪽 설정 하에 동치 쿼리로부터의 학습을 연구한다. 두 설정 모두에서 학습 라운드 수에 대한 타이트한 경계를 도출하고, 향후 연구 방향을 제시한다. 우리의 분석은 대칭적 적대자에 대한 게임 이론적 관점과 적응적 가중치 기법, 그리고 미니맥스(minimax) 논증을 결합한다.

arXiv:2502.18966v2cs.LG

일반 반응 조건을 위한 베이지안 최적화

Bayesian Optimization for General Reaction Conditions

CurryBO는 여러 기질에 걸쳐 강건한 화학 반응 조건을 찾는 일반성 지향 최적화를 커리된(curried) 함수에 대한 베이지안 최적화(Bayesian optimization)로 형식화한 통합 프레임워크로, 다양한 일반성 지표와 조건·기질 선택 전략을 모듈식으로 지원한다. 네 가지 실험 반응 최적화 벤치마크에서 반응 조건 선택 시 탐험을 강조하고 순차적으로 불확실성 기반 기질 우선순위를 정하는 정책이 기존 방법 대비 샘플 효율성을 크게 높였다.

arXiv:2606.26722v1cs.AI

고차원 물리 시스템에서의 자율적 과학 발견을 위한 소크라테스식 에이전트

Socratic agents for autonomous scientific discovery in high-dimensional physical systems

폐루프 실험에 소크라테스식 심문을 내재화한 다중 에이전트 AI 과학자 AHOIS를 제안해, 실제 다중 모드 광섬유 광학 플랫폼에서 사전 인코딩 방식·분류기·speckle 모델 없이 무작위 간섭 인코딩 가설과 작업 적응형 희소 측정 전략을 자율 발견·검증하고 실패 모드를 진단했다. 16×16 측정에서 MNIST 76.97%, Fashion-MNIST 83.17% 분류 정확도를 달성했으며, ablation에서 소크라테스식 심문이 물리적 일관성, 가설 완전성, 불확실성 보정, 실험 계획 타당성을 향상시킴을 보였다.

arXiv:2606.26460v1cs.AI

auto-psych: 에이전트 주도 이론 발견과 실험을 통한 마음의 과학 자동화

auto-psych: Automating the science of mind using agent-driven theory discovery and experimentation

auto-psych는 계산 인지과학에서 중첩된 에이전트 루프로 확률적 인지 모델을 제안·적합·비판하고, 크라우드소싱 설문 실험을 설계·실행·분석해 인간 행동 이론을 자동 탐색하는 시스템이다. 동전 던지기 순열의 주관적 무작위성 판단 과제에서 합성 데이터의 정답 이론을 신뢰성 있게 복원했고, 세 차례 인간 실험에서 문헌 기반 이론보다 데이터 적합도가 높은 이론을 찾아 자동화된 데이터 수집과 이론 발견의 가능성을 보였다.

arXiv:2606.26711v1cs.CV

Mask to Concept: 퓨샷 주석을 위한 효율적인 테스트 타임 개념 임베딩 탐색을 통한 자동 프롬프트 가능 SAM3

Mask to Concept: Auto-Promptable SAM3 via Efficient Test-Time Concept Embedding Search for Few-Shot Annotation

SAM3의 개념 분할 기능을 의료 영상에 활용하기 위해 외부 모듈이나 재학습 없이 소수의 레이블 이미지만으로 전이 가능한 시각 개념 임베딩을 자동 탐색하는 Mask to Concept(M2C) 프레임워크를 제안한다. Hybrid Uncertainty Estimation(HUE) 모듈을 통해 불확실한 샘플을 선별해 인간 수정 후 임베딩을 지속 개선하는 능동 학습 루프를 형성하며, Kvasir-SEG와 ISIC-2017 벤치마크에서 기존 퓨샷 분할 SOTA 대비 각각 4.2%, 11.8% 이상의 Dice 성능 향상을 달성했다.

arXiv:2606.26002v1cs.LG

신경망 압축을 위한 계층적 강화학습(HiReLC): 가지치기와 양자화

Hierarchical Reinforcement Learning for Neural Network Compression (HiReLC): Pruning and Quantization

HiReLC는 구조적 가지치기와 혼합 정밀도 양자화를 함께 자동화하는 계층적 앙상블 강화학습(RL) 프레임워크로, 블록별 저수준 에이전트(LLA)가 비트폭·가지치기 유지 비율 등 커널 설정을 선택하고 Fisher Information 기반 민감도로 안내되는 고수준 에이전트(HLA)가 전역 압축 예산을 조율한다. 서로게이트 기반 능동 학습 루프로 정책 평가 비용을 줄인 뒤 Vision Transformer와 CNN에서 5.99~6.72배 매개변수·저장 압축을 달성했으며, 정확도는 한 설정에서 3.83% 향상, 그 외에는 0.55~5.62% 하락을 보였다.

arXiv:2606.25197v1cs.LG

Efficient Adaptive Data Acquisition via Pretrained Belief Representations

적응적 데이터 수집에서 사후분포 기반 방법은 대리 모델과 근사 오차에 취약하고, 관측 이력을 직접 매핑하는 정책 학습은 표현을 충분히 활용하지 못해 샘플 효율이 낮다. POLAR(Policy Learning with Belief Representations)는 사전학습된 예측 foundation model을 belief state 인코더로 두고 정책 헤드만 학습해 베이지안 실험 설계, 베이지안 최적화, 능동 학습을 하나의 amortised 프레임워크로 통합했으며, 더 적은 학습 샘플로 다양한 작업에서 기존 SOTA amortised 방법을 능가한다.

arXiv:2606.25188v1cs.LG

Efficient Analytic Uncertainty Quantification for Multi-Modal Regression

회귀에서 단봉 파라미터 모델 기반 불확실성 정량화(UQ)는 다중 모달 조건부 분포를 제대로 다루지 못하고, Quantile Regression(QR)과 Classification Restoration(CR) 같은 준모수 회귀는 예측 분산의 효율적 정량화가 부족하다. Variational Bayesian Inference(VBI)를 QR·CR에 확장한 통합 프레임워크는 분석적 증거 하한(ELBO)과 폐형 또는 근사적 예측 밀도로 효율적 UQ를 제공하며, 세 개 대규모 다중 모달 벤치마크에서 최신 베이스라인을 능가하고 계산 비용이 큰 앙상블과 유사한 예측 성능과 인식론적(epistemic) 불확실성 기반 데이터 효율적 능동 학습(active learning)을 달성한다.

arXiv:2606.25039v1cs.LG

LLM-ACES: Closed-Loop Discovery of Dynamical Systems with LLM-Guided Adaptive Search

데이터로부터 상미분방정식(ODE)을 복원할 때 관측 불가 구분(identifiability gap)을 줄이기 위해, LLM-ACES는 대규모 언어 모델(LLM)이 연산자 사전을 제안해 기호 가설 공간을 나누고 후보 방정식 간 불일치로 궤적을 적응적으로 수집하는 폐루프(closed-loop) 탐색 프레임워크를 제안한다. ODEBench와 ODEBase 122개 ODE에서 중앙값 NMSE가 최저이며 기존 최신 기법 대비 수 orders of magnitude 우수하고, 기호 정확도 46.2%·52.4%를 달성하며 데이터 10분의 1로도 더 나은 성능을 보인다.

arXiv:2606.24903v1cs.LG

A Spectral Phase Diagram for Binary Few-Shot Classification: Intrinsic Dimensionality, Geometric Saturation, and Representational Diagnosis

Deciding when to stop collecting labeled examples is a fundamental but undertheorized problem in applied machine learning. The saturation index $S(K) = \operatorname{erank}(\widehatΣ_W^{(K)}) / K$ measures the ratio of the effective rank of the pooled within-class sample covariance to the shot count; we prove it falls below a threshold precisely when the covariance estimator is well-concentrated around the population covariance and the linear discriminant has stabilized. The index is computable in $O(d^3)$ time from support features alone, requiring no test labels or trained classifier. Evaluated across $N = 246$ doubling-pair observations from seventeen binary tasks and six datasets, sixteen of seventeen tasks have a positive within-task Spearman correlation between $S(K)$ and marginal accuracy gain (median $ρ= 0.811$). The pooled Spearman correlation is $ρ= 0.548$ ($p = 1.1 \times 10^{-20}$, $N = 246$). A three-phase diagram (exploration, transition, saturation) with mean marginal gains of $3.48\%$, $2.40\%$, and $0.82\%$ is supported by all pairwise significance tests ($p \leq 0.008$). As a binary stopping rule, the index achieves AUC $= 0.752$, providing meaningful probabilistic guidance for annotation decisions. Asymptotic effective rank and peak accuracy show no significant monotone relationship across tasks (Spearman $r_s = 0.380$, $p = 0.133$, $N = 17$). A small saturation index paired with low accuracy diagnoses representational inadequacy. All results are for binary classification with a fixed linear classifier; extensions to $N$-way settings and pretrained backbone representations are discussed as future work.

arXiv:2606.24734v1cs.CL

Task Decomposition for Efficient Annotation

High-quality annotations of structured representations are expensive to collect over large corpora. Manual annotation of structure is laborious, and model-based annotation, although cheaper to generate, requires expensive validation and potentially significant supervision to ensure that the annotation quality is strong enough to be useful downstream. In traditional annotation workflows, annotation of each complete example is performed end-to-end by a single annotator. However, structured annotation is complex, and each aspect of the task represents a unique challenge with an associated inferential load for a given annotator. Modern annotation projects can incorporate heterogeneous groups of annotators, including both models and human annotators with varying domain and linguistic expertise. It remains unclear, however, how to redesign annotation tasks in this setting, where efforts are discriminately allocated across heterogeneous annotators with respect to distinct annotation challenges. We propose to decompose annotation tasks into sub-tasks in order to reduce the aggregate inferential load of annotation projects. Inspired by the notion of centers from centering theory, we introduce a formal model of inferential load based on the degrees of freedom in the space of valid annotations. Using this model, we show that identifying these centers (i.e. salient anchor entities realized by annotation sub-tasks) constrains the output space complexity, and decompositions which isolate and advance center identification reduce the aggregate inferential load. We provide guidelines for decomposing complex structured annotation tasks, supported by examples demonstrating improved cost-efficiency from our prior work. Finally, we present a procedure for allocating sub-tasks across annotators to maximize quality under a fixed budget.

arXiv:2606.24407v1cs.DB

Entity Resolution via Batched Oracle Queries

We consider an oracle that processes a limited batch of records at a time and clusters those that refer to the same real-world entity. We study how to interrogate such an oracle to resolve entities in a dataset whose size is far larger than a single batch, and where no batch is guaranteed to contain all records of any given entity. We aim at a pay-as-you-go approach, to have full control over the costs (the number of oracle consults), while achieving the highest possible recall at every step. We formally cast this problem as batched entity resolution, prove that selecting optimal batches is NP-hard, and provide an optimal solution under a natural condition on entity sizes. Finally, we evaluate our approach on six datasets and show its superiority over state-of-the-art baselines.

arXiv:2606.23515v1stat.ML

FairBED: 더 공정한 데이터 수집을 위한 베이지안 실험 설계 접근법

FairBED: A Bayesian Experimental Design Approach to Gathering Fairer Data

FairBED는 공정한 데이터셋이 민감 속성(sensitive attribute)에 대해 비정보적이어야 한다는 원칙으로 데이터셋 공정성을 정량화하고, 관심 대상에 대한 기대 정보 이득(EIG)은 최대화하면서 민감 속성에 대한 정보 누출은 최소화하는 공정성 인식 베이지안 실험 설계(BED) 목적함수를 제안한다. 인구통계적 패리티(demographic parity)와의 이론적 연관과 함께, FairBED로 수집한 데이터로 학습한 모델이 무작위 수집 및 기존 BED 대비 더 나은 공정성-정확도 트레이드오프를 달성함을 보였다.

arXiv:2606.22188v1cs.LG

Bayesian Adaptation Gym: 멀티모달 언어 모델의 베이지안 저랭크 적응 벤치마크

Bayesian Adaptation Gym: A Benchmark for the Bayesian Low-Rank Adaptation of Multi-Modal Language Models

대규모 멀티모달 언어 모델이 고위험(high-stakes) 도메인에 점점 더 배포되면서, 잘 보정된(calibrated) 불확실성이 필수적이 되었다. 전통적인 베이지안 방법은 모든 모델 가중치에 대한 사후분포(posterior)를 근사하는데, 이는 현대의 대규모 모델에서는 계산이 불가능해진다. 이 때문에 최근 연구는 대신 계산 가능한 사후분포 근사를 위해 베이지안 저랭크 적응(low-rank adaptation)을 고려한다. 표준화된 벤치마크가 없기 때문에, 이러한 방법이 어디에서 의미 있는 이점을 제공하는지는 여전히 불분명하다. 이 격차를 메우기 위해 우리는 Bayesian Adaptation Gym(BAG)을 제안한다. BAG는 멀티모달 언어 모델의 베이지안 적응을 위한 벤치마크로, 고전적인 베이지안 베이스라인과 최신(state-of-the-art) 적응 방법의 참조 구현과 함께, 보정(calibration), 분포 이동(distribution shift) 하에서의 견고성(robustness), 능동 학습(active learning)을 통한 불확실성 하에서의 의사결정을 탐구하도록 설계된 멀티모달 데이터셋 및 태스크 모음을 제공한다. BAG를 사용하여 우리는 모델 크기, 데이터셋, 태스크 전반에 걸친 광범위한 실험을 수행하고 보고하여, 현재 베이지안 적응 접근법의 성공과 실패를 강조한다. 추가 연구를 가능하게 하기 위해 BAG는 완전히 오픈 소스이다: https://github.com/SRI-CSL/BayesAdapt.