arXiv:2403.15485

MOGAM: A Multimodal Object-oriented Graph Attention Model for Depression Detection

Junyeop Cha, Seoyun Kim, Dongjae Kim, Eunil Park

제출 2024-03-21

원문 초록

Early detection plays a crucial role in the treatment of depression. Therefore, numerous studies have focused on social media platforms, where individuals express their emotions, aiming to achieve early detection of depression. However, the majority of existing approaches often rely on specific features, leading to limited scalability across different types of social media datasets, such as text, images, or videos. To overcome this limitation, we introduce a Multimodal Object-Oriented Graph Attention Model (MOGAM), which can be applied to diverse types of data, offering a more scalable and versatile solution. Furthermore, to ensure that our model can capture authentic symptoms of depression, we only include vlogs from users with a clinical diagnosis. To leverage the diverse features of vlogs, we adopt a multimodal approach and collect additional metadata such as the title, description, and duration of the vlogs. To effectively aggregate these multimodal features, we employed a cross-attention mechanism. MOGAM achieved an accuracy of 0.871 and an F1-score of 0.888. Moreover, to validate the scalability of MOGAM, we evaluated its performance with a benchmark dataset and achieved comparable results with prior studies (0.61 F1-score). In conclusion, we believe that the proposed model, MOGAM, is an effective solution for detecting depression in social media, offering potential benefits in the early detection and treatment of this mental health condition.

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

arXiv:2408.02845v2cs.LG공통 태그 Graph Attention공식 코드 · Papers with Code

암 멀티오믹스 통합을 위한 멀티모달 특징 선택 기반 이종 그래프 어텐션 네트워크

Heterogeneous Graph Attention Network With Multimodal Feature Selection for Cancer Multiomics Integration

고차원 멀티오믹스 데이터가 증가함에 따라 인간 질환의 복잡성을 포착할 수 있는 고급 통합 모델이 요구된다. 그래프 기반 딥러닝 통합 모델은 유망함에도 불구하고 소규모 환자 코호트와 고차원 특징에 어려움을 겪으며, 오믹스 간 관계를 모델링하지 않은 채 독립적인 특징 선택을 적용하는 경우가 많다. 또한 기존의 그래프 기반 오믹스 모델은 동종 그래프에 초점을 맞추어, 다양한 구조를 포착하기 위한 여러 유형의 노드와 에지가 부족하다. 우리는 암 진단을 개선하기 위한 오믹스 통합용 이종 그래프 어텐션 네트워크(HeteroGATomics)를 제안한다. HeteroGATomics는 멀티 에이전트 시스템을 통해 멀티모달 특징 선택을 수행하여 각 오믹스 모달리티별로 특징 및 환자 유사도의 전용 네트워크를 생성한다. 이후 이 네트워크들을 하나의 이종 그래프로 결합하여 오믹스별 전체론적 표현을 학습하고 모달리티 간 예측을 통합한다. 세 가지 암 멀티오믹스 데이터셋에 대한 실험에서 HeteroGATomics는 암 진단의 대부분의 평가 지표에서 기준 방법들을 능가한다. 독립적인 유방암 코호트에 대한 외부 검증은 이 방법의 일반화 가능성을 추가로 보여 주며, 여기서 HeteroGATomics는 모든 평가 지표에서 그래프 기반 멀티오믹스 통합 방법들을 능가한다. 더욱이 HeteroGATomics는 진단 결과에 기여하는 중요한 바이오마커를 식별함으로써 해석 가능성을 높인다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.