EnergAIze: Multi Agent Deep Deterministic Policy Gradient for Vehicle to Grid Energy Management
원문 초록
This paper investigates the increasing roles of Renewable Energy Sources (RES) and Electric Vehicles (EVs). While indicating a new era of sustainable energy, these also introduce complex challenges, including the need to balance supply and demand and smooth peak consumptions amidst rising EV adoption rates. Addressing these challenges requires innovative solutions such as Demand Response (DR), energy flexibility management, Renewable Energy Communities (RECs), and more specifically for EVs, Vehicle-to-Grid (V2G). However, existing V2G approaches often fall short in real-world adaptability, global REC optimization with other flexible assets, scalability, and user engagement. To bridge this gap, this paper introduces EnergAIze, a Multi-Agent Reinforcement Learning (MARL) energy management framework, leveraging the Multi-Agent Deep Deterministic Policy Gradient (MADDPG) algorithm. EnergAIze enables user-centric and multi-objective energy management by allowing each prosumer to select from a range of personal management objectives, thus encouraging engagement. Additionally, it architects' data protection and ownership through decentralized computing, where each prosumer can situate an energy management optimization node directly at their own dwelling. The local node not only manages local energy assets but also fosters REC wide optimization. The efficacy of EnergAIze was evaluated through case studies employing the CityLearn simulation framework. These simulations were instrumental in demonstrating EnergAIze's adeptness at implementing V2G technology within a REC and other energy assets. The results show reduction in peak loads, ramping, carbon emissions, and electricity costs at the REC level while optimizing for individual prosumers objectives.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
낙농장에서의 다목적 배터리 관리를 위한 다중 에이전트 심층 강화학습
Multi-Agent Deep Reinforcement Learning for Multi Objective Battery Management in Dairy Farms
아일랜드 낙농 산업은 재생에너지 통합 및 탄소 배출 감소 측면에서 큰 잠재력을 지니고 있다. 그러나 분산 발전 제어 연구는 주로 주거 및 상업 분야에 집중되어 있다. 낙농 분야에서의 효과적인 재생에너지 통합에 기여하기 위해, 본 논문은 차등 진화(differential evolution)와 다중 에이전트 심층 강화학습에 기반한 다목적 최적화 제어 시스템을 제안한다. 제안된 제어 시스템은 두 개의 층으로 구성된다: 상위 층은 동적 가격 책정을 활용하고, 하위 층은 배터리 관리를 위한 다중 에이전트 강화학습에 기반한다. 또한 본 논문은 농촌 배전 회로에서 제안된 제어 시스템의 전기적 응답을 시뮬레이션한다. 시뮬레이션 결과, 제안된 제어 프레임워크는 규칙 기반 모델 대비 에너지 차익거래(energy arbitrage) 수익을 최대 18%까지 향상시키고, 비용을 크게 증가시키지 않으면서 분산 발전 활용도를 높이며, 전압 변동 측면에서 아일랜드 전력망 규정을 준수함을 보인다.
Smart charging of large fleets of Electric Vehicles: Independent Multi-Agent Reinforcement Learning approaches
6G SD-RAN에서 동적 VR 슬라이스 관리를 위한 프라이버시 인식 에이전트 협업
Privacy-Aware Agent Collaboration for Dynamic VR Slice Management in 6G SD-RAN
6G 네트워크에서 가상현실(VR) 서비스에는 초저지연과 높은 처리량이 필요하며, 이는 소프트웨어 정의 무선 액세스 네트워크(Software-Defined Radio Access Network, SD-RAN)의 동적 자원 관리에 중대한 과제를 제기한다. 본 연구는 VR 슬라이스 관리를 위한 이동성 기반, 프라이버시 인식 다중 에이전트 강화학습(Multi-Agent Reinforcement Learning, MARL) 프레임워크를 제안하며, 협력적 에이전트들이 사용자 데이터의 프라이버시를 보호하면서 end-to-end VR 링크 전반에 걸친 자원 분배를 최대화한다. 우리 접근법은 효과적이고 안전한 에이전트 협업을 촉진하기 위해 이동성 예측과 정보 병목(information bottleneck) 인코더를 통합한다. 시뮬레이션에서 전통적 방법과의 비교를 수행한 결과, 처리량이 최대 34% 향상되고, 자원 사용이 28% 감소하며, 프라이버시 유출이 85% 줄어들어, 미래 6G 환경에서 신뢰할 수 있는 몰입형 VR 경험을 보장한다.
Real-Time Detection of False Readings in Smart Grid AMI Using Deep and Ensemble Learning research model code github
Evaluation of Transportation Systems and Novel UV-Oriented Solution for Integration, Resilience, Inclusiveness and Sustainability
Multi-Agent Reinforcement Learning Based Resource Management in MEC- and UAV-Assisted Vehicular Networks
토론
이 논문과 연결된 포럼 글이 아직 없습니다.