FitzHugh-Nagumo 모델을 위한 신경 연산자의 평행이동 불변성
Translation Invariance of Neural Operators for the FitzHugh-Nagumo Model
한국어 초록
신경 연산자(Neural operator, NO)는 편미분방정식의 해 연산자(solution operator)를 학습하도록 설계된 강력한 심층 학습 프레임워크이다. 본 연구는 NO가 FitzHugh-Nagumo 모델의 stiff한 시공간(spatio-temporal) 역학을 포착하는 능력을 평가한다. 본 연구의 핵심 기여는 새로운 학습 전략을 이용한 평행이동 불변성(translation invariance) 평가이다. 모델은 고정된 시각에서 공간적 위치와 강도가 서로 다른 인가 전류(applied current)로 학습되며, 테스트 데이터셋은 전류가 시간과 공간 모두에서 평행이동된 도전적인 분포 밖(out-of-distribution) 시나리오를 제시한다. 이 접근법은 데이터셋 생성 비용을 크게 줄인다. 우리는 일곱 가지 NO 아키텍처를 벤치마크한다: Convolutional Neural Operators(CNO), Deep Operator Networks(DeepONet), CNN 인코더를 갖춘 DeepONet, Proper Orthogonal Decomposition DeepONet, Fourier Neural Operators(FNO), Tucker Tensorized FNO, Local Neural Operators. 이 모델들을 정확도, 효율성, 추론 속도를 기준으로 평가했다. 결과는 CNO가 평행이동된 테스트 역학에 잘 일반화하는 반면, 다른 아키텍처는 잘 일반화하지 못함을 보여준다. 학습 데이터셋에서는 모든 아키텍처가 비슷한 정확도를 달성하며, FNO가 가장 높은 정밀도를 보였다. 그러나 이러한 더 높은 정확도는 계산 비용 증가라는 대가를 동반한다. 한편 DeepONet과 그 변형들은 학습 및 추론 효율이 우수하다. 이러한 결과는 복잡한 이온 역학(ionic dynamics)을 모델링할 때 NO의 능력과 한계를 부각하며, 평행이동된 역학이 관여하는 시나리오에 대한 포괄적인 벤치마크를 제공한다.
원문 초록
Neural operators (NOs) are powerful deep learning frameworks designed to learn solution operators of partial differential equations. This study evaluates the ability of NOs' to capture the stiff spatio-temporal dynamics of the FitzHugh-Nagumo model. A key contribution of this study is the assessment of the translation invariance using a novel training strategy. Models are trained using an applied current with varying spatial locations and intensities at a fixed time, while the test set presents a challenging out-of-distribution scenario where the current is translated in both time and space. This approach significantly reduces dataset generation costs. We benchmark seven NO architectures: Convolutional Neural Operators (CNOs), Deep Operator Networks (DeepONets), DeepONets with CNN encoders, Proper Orthogonal Decomposition DeepONets, Fourier Neural Operators (FNOs), Tucker Tensorized FNOs, and Local Neural Operators. We evaluated these models based on their accuracy, efficiency, and inference speed. These results demonstrate that CNOs generalize well to translated test dynamics, whereas other architectures do not generalize well. On the training set, all architectures achieve comparable accuracy, with FNOs achieving the highest precision. However, this higher accuracy comes at an elevated computational cost. Meanwhile, DeepONets and their variants exhibit superior training and inference efficiency. These findings highlight the capabilities and limitations of NOs in modeling complex ionic dynamics and provide a comprehensive benchmark for scenarios involving translated dynamics.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2603.17523v2제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.