토큰 통신 기반의 협력적 체화 인공지능: 개념, 프레임워크 및 기회
Token Communication-Assisted Collaborative Embodied Artificial Intelligence: Concepts, Framework, and Opportunities
한국어 초록
협력적 체화 인공지능(CEAI)은 다수의 물리적 에이전트(agent)가 동적 환경에서 협력적으로 인지하고 추론(inference)하며 행동할 수 있도록 한다. 효과적인 통신은 CEAI에 필수적이지만, CEAI 에이전트는 대규모 다중모달(multimodal) 관측값뿐만 아니라 장기적인 관점에서 태스크 관련 통찰, 의도 및 상호작용 정보를 교환해야 한다. 본 논문에서는 토큰(token)이 통신을 위한 컴팩트한 의미 전달체이자 생성형 파운데이션 모델(GFM)의 기본 추론 단위 역할을 동시에 수행하는 CEAI용 네이티브 지능 인터페이스로서 토큰 통신(TokCom)을 연구한다. 먼저 TokCom이 체화 에이전트 간의 통찰 공유, 의도 정렬(alignment), 상호작용 제어를 어떻게 지원하는지 논의한다. 이어서 태스크 적응형 통신 프로토콜로 구동되는 TokCom 지원 CEAI 프레임워크를 제안한다. 컴팩트한 코드북, 구문 규칙, 맥락별 예시로 구성된 이 프로토콜은 GFM 기반 트랜시버가 메시지를 컴팩트한 토큰으로 증류하고 무선 전송 후 이를 재구성하도록 안내한다. 협력적 객체 운반에 대한 사례 연구를 통해 제안된 TokCom 프레임워크가 태스크 효율성을 유지하고 잡음이 있는 채널 환경에서도 견고성을 보이면서 소스 페이로드 비트 소비를 크게 줄임을 입증한다. 마지막으로 향후 연구 방향을 제시한다.
원문 초록
Collaborative embodied artificial intelligence (CEAI) enables multiple physical agents to perceive, reason, and act cooperatively in dynamic environments. Effective communication is essential for CEAI, yet CEAI agents must exchange not only large multimodal observations but also task-relevant insights, intents, and interactive information over long horizons. This article investigates token communication (TokCom) as a native intelligence interface for CEAI, in which tokens serve jointly as compact semantic carriers for communication and fundamental inference units for generative foundation models (GFMs). We first discuss how TokCom supports insight sharing, intent alignment, and interactive control among embodied agents. We then propose a TokCom-assisted CEAI framework driven by a task-adaptive communication protocol. Comprising a compact codebook, syntax rules, and contextual examples, this protocol guides GFM-based transceivers to distill messages into compact tokens and reconstruct them after wireless transmission. A case study on collaborative object transport demonstrates that the proposed TokCom framework substantially reduces the source payload bit consumption while preserving task efficiency and showing robustness under noisy channels. Finally, we outline future research directions.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
Adaptive Semantic Token Communication for Transformer-based Edge Inference
SCU: An Efficient Machine Unlearning Scheme for Deep Learning Enabled Semantic Communications
SpikACom: A Neuromorphic Computing Framework for Green Communications
GenSC-6G: A Prototype Testbed for Integrated Generative AI, Quantum, and Semantic Communication
Large Model Empowered Streaming Speech Semantic Communications
Semantic-Aware Resource Management for C-V2X Platooning via Multi-Agent Reinforcement Learning
토론
이 논문과 연결된 포럼 글이 아직 없습니다.
저자 비고
arXiv Comments
10 pages, 4 figures. Submitted to the IEEE for possible publication