arXiv:2212.06908

Enabling the Wireless Metaverse via Semantic Multiverse Communication

Jihong Park, Jinho Choi, Seong-Lyun Kim, Mehdi Bennis

제출 2022-12-13

원문 초록

Metaverse over wireless networks is an emerging use case of the sixth generation (6G) wireless systems, posing unprecedented challenges in terms of its multi-modal data transmissions with stringent latency and reliability requirements. Towards enabling this wireless metaverse, in this article we propose a novel semantic communication (SC) framework by decomposing the metaverse into human/machine agent-specific semantic multiverses (SMs). An SM stored at each agent comprises a semantic encoder and a generator, leveraging recent advances in generative artificial intelligence (AI). To improve communication efficiency, the encoder learns the semantic representations (SRs) of multi-modal data, while the generator learns how to manipulate them for locally rendering scenes and interactions in the metaverse. Since these learned SMs are biased towards local environments, their success hinges on synchronizing heterogeneous SMs in the background while communicating SRs in the foreground, turning the wireless metaverse problem into the problem of semantic multiverse communication (SMC). Based on this SMC architecture, we propose several promising algorithmic and analytic tools for modeling and designing SMC, ranging from distributed learning and multi-agent reinforcement learning (MARL) to signaling games and symbolic AI.

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

arXiv:2606.11249v1cs.RO공통 태그 Multi-agent Reinforcement Learning, Semantic Communication

MASK: 위험 민감 6G 로봇공학을 위한 다중 에이전트 시맨틱 K-스케줄링

MASK: Multi-Agent Semantic K-Scheduling for Risk-Sensitive 6G Robotics

6G 연결형 로봇공학의 비전을 실현하려면 고성능 협업 제어와 물리적 무선 채널의 엄격한 스펙트럼 제한을 조화시켜야 합니다. 현실적인 협업 감지 시나리오에서 스펙트럼 자원은 유한한 물리적 자원 블록이나 직교 부반송파로 양자화되어, 모든 에이전트의 동시 전송을 불가능하게 만듭니다. 이를 해결하기 위해 우리는 엄격한 순간 대역폭 상한 하에서 강건하고 위험 인지 협조를 유지하도록 설계된 제어 아키텍처인 다중 에이전트 시맨틱 K-스케줄링(MASK)을 제안합니다. 우리는 로컬에서 계산된 시맨틱 중요도 점수를 기반으로 상위 K개 에이전트만 스케줄링하여 엄격한 접근 제약을 시행하는 경량화된 협조 메커니즘인 중재자 보조 시맨틱 정보 게이팅(A-SIG)을 도입합니다. 우선순위가 부여된 이러한 관찰들을 압축된 잠재 상태로 집계함으로써, 자기지도 학습 글로벌 인코더는 데이터 희소성(sparsity)에도 불구하고 꼬리 위험을 완화할 수 있는 분포적 정책을 가능하게 합니다. 우리는 다양한 벤치마크에서 MASK를 평가하여, 채널 접근이 군집 크기의 작은 비율로 제한되는 경우에도 통신 제약이 없는 베이스라인의 성능과 일치함을 입증했습니다. 또한, 이 프레임워크는 패킷 소실에 대한 내재적 복원력을 보여주어, 자원 제약이 있는 6G 시스템을 위한 핵심 요소로서 시맨틱 스케줄링의 유효성을 검증합니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.