AI-Augmented Surveys: Leveraging Large Language Models and Surveys for Opinion Prediction
원문 초록
Large language models (LLMs) that produce human-like responses have begun to revolutionize research practices in the social sciences. We develop a novel methodological framework that fine-tunes LLMs with repeated cross-sectional surveys to incorporate the meaning of survey questions, individual beliefs, and temporal contexts for opinion prediction. We introduce two new emerging applications of the AI-augmented survey: retrodiction (i.e., predict year-level missing responses) and unasked opinion prediction (i.e., predict entirely missing responses). Among 3,110 binarized opinions from 68,846 Americans in the General Social Survey from 1972 to 2021, our models based on Alpaca-7b excel in retrodiction (AUC = 0.86 for personal opinion prediction, $\rho$ = 0.98 for public opinion prediction). These remarkable prediction capabilities allow us to fill in missing trends with high confidence and pinpoint when public attitudes changed, such as the rising support for same-sex marriage. On the other hand, our fine-tuned Alpaca-7b models show modest success in unasked opinion prediction (AUC = 0.73, $\rho$ = 0.67). We discuss practical constraints and ethical concerns regarding individual autonomy and privacy when using LLMs for opinion prediction. Our study demonstrates that LLMs and surveys can mutually enhance each other's capabilities: LLMs can broaden survey potential, while surveys can improve the alignment of LLMs.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
LLM 사회 시뮬레이터 감사를 위한 이유 매개 행동 모델
Reason-Mediated Behavioral Models for Auditing LLM Social Simulators
대규모 언어 모델(LLM)은 합성 설문 응답자를 포함하여 사회 시뮬레이터로 점점 더 많이 사용되고 있다. 대부분의 평가는 시뮬레이션 결과가 인간의 결과와 유사한지를 묻는다. 우리는 이것이 필요하지만 너무 약하다고 주장한다. 시뮬레이터는 잘못된 근거 유래 이유 패턴을 사용하면서도 최종 답변은 일치시킬 수 있기 때문이다. 우리는 각 응답자가 세 가지 제품 컨셉을 평가하고 서술형 근거를 작성한 94명 규모의 선크림 컨셉 테스트를 통해 이 문제를 연구한다. 우리는 이러한 근거를 부호가 있는 이유 상태 $Z$로 매핑하며, 양의 부호는 채택을 지지하고 음의 부호는 이를 막는다. 이는 실용적인 감사를 제공한다. 응답자 기술자 $D$, 카테고리 맥락 $K$, 컨셉 처치 $X$를 고정한 채, 인간의 근거 유래 이유가 행동 $Y$ 예측에 도움이 되는지, 그리고 LLM이 인간의 근거나 결과를 보지 않고도 동일한 이유 상태를 시뮬레이션할 수 있는지를 묻는다. 인간의 근거 유래 이유는 구매 의향의 홀드아웃 예측을 상당히 개선한다. LLM이 시뮬레이션한 이유는 더 취약하다. 종종 그럴듯하게 들리지만, 응답자의 수용 또는 거부 경로를 복원하기보다는 컨셉 보드(concept board)를 반복하는 경우가 많다. 본 논문은 사회 시뮬레이터를 위한 평가 프레임워크를 기여한다. 이유 상태는 그 자체로 자연적 인과 효과를 식별하지는 않지만, 시뮬레이터가 진술한 이유가 인간의 증거와 일치하는지에 대한 해석 가능한 검증을 제공한다.
컬러 안저 사진 분석: 멀티모달 AI를 향한 데이터, 전처리, 모델링의 공진화
Color Fundus Photography Analysis: Co-evolution of Data, Preprocessing, and Modeling toward Multimodal AI
컬러 안저 사진(Color Fundus Photography, CFP)은 안과 및 전신 질환의 대규모 스크리닝을 위한 주요 비침습적 영상 방식이다. 기존 서베이는 주로 과제별 알고리즘, 데이터셋, 또는 전처리 기법을 각각 독립적으로 요약하며, 현대 인공지능과의 공진화에 대한 통합적 관점이 부족하다. 본 리뷰는 데이터셋 진화, 전처리 패러다임, 모델링 프레임워크의 상호작용을 통해 CFP AI에 대한 통합적 개관을 제공한다. CFP 데이터셋이 과제별 라벨을 갖춘 소규모 단일 기관 수집물에서 멀티모달 페어링과 종단 임상 기록을 특징으로 하는 대규모 다기관 자원으로 진화해 왔음을 보인다. 전처리는 기존의 이미지 향상에서 신경망 기반 데이터 엔지니어링 파이프라인, 하드웨어 인식 토큰 최적화, 불완전한 전자 건강 기록(EHR)에 대한 자기지도 보간(self-supervised imputation)으로 발전해 왔다. 한편, 모델링은 합성곱 신경망(CNN)에서 비전 기반 모델(vision foundation models), 상태 공간 모델(SSM), 멀티모달 전문가 아키텍처로 발전해 왔다. 멀티모달 최전선에서 CFP는 EHR 및 종단 환자 정보와 점점 더 통합되어, 고립된 이미지 분석을 넘어 더 포괄적인 임상 추론을 가능하게 한다. 향후 발전은 데이터셋, 전처리, 멀티모달 모델링의 협력적 최적화에 달려 있으며, 이는 견고한 임상 배포, 향상된 교차 도메인 일반화, 자원 효율적인 엣지 지능을 향한 로드맵을 제공한다.
근시 예방 및 관리 3.0: 인공지능 기반 위험 계층화, 선제적 모니터링 및 개인 맞춤형 개입
Myopia Prevention and Control 3.0: Artificial Intelligence--Driven Risk Stratification, Proactive Monitoring, and Personalized Intervention
인공지능(AI), 디지털 센싱, 유비쿼터스 컴퓨팅의 수렴은 근시 예방을 반응적이고 인구 기반 모델에서 선제적이고 정밀 지향적 모델로 전환할 전례 없는 기회를 만들었다. 2050년까지 전 세계 인구의 절반이 근시가 될 것이라는 증거에도 불구하고, 기존 접근법—학교 기반 시력 검사(1.0 단계)와 근거 기반 위험 요인 관리(2.0 단계)—는 불충분한 것으로 입증되었다. 우리는 세 가지 상호 연결된 영역에 걸친 AI 통합으로 정의되며 폐쇄 루프 파이프라인을 형성하는 근시 예방 및 관리 3.0의 등장을 검토한다: (1) 다중모달 데이터에 대한 머신러닝을 통해 개인 수준의 위험을 예측하는 AI 기반 위험 계층화; (2) 웨어러블, 스마트폰, 학교 검사 네트워크를 통한 AI 기반 선제적 모니터링; (3) 폐쇄 루프 피드백을 갖춘 AI 기반 개인 맞춤형 개입. 우리는 각 단계에 걸친 증거를 비판적으로 평가하고, 데이터 품질, 모델 검증, 윤리, 형평성의 과제를 논의하며, 다중모달 파운데이션 모델, 디지털 트윈, 인과 머신러닝을 포함한 향후 방향을 개괄한다.
예측 유지보수를 위한 다중 에이전트 시스템 기반 디지털 트윈: 아키텍처, 기술 및 미해결 연구 과제
Multi-Agent System-driven Digital Twins for predictive maintenance: architectures, technologies and open research challenges
디지털 트윈은 Industry 4.0 맥락에서 기초 기술로 부상했으며, 물리 시스템의 실시간 가상 표현을 위한 패러다임을 제공한다. 그러나 특히 분산 산업 환경에서 점점 커지는 복잡성을 관리하려면 자율적 의사결정, 동적 적응성, 에이전트 간 조율이 가능한 지능형 아키텍처가 필요하다. 본 체계적 문헌 고찰은 다중 에이전트 시스템과 디지털 트윈의 교차점을 탐구하며, 특히 자원 제약 환경에서의 예측 유지보수 적용에 중점을 둔다. IEEE Transactions, Nature, Elsevier, MDPI 등 고영향력 저널에 게재된 547편 이상의 논문에 대한 비판적 분석을 통해, 기존 하이브리드 아키텍처의 분류 체계를 수립하고, 지속적인 기술적 병목을 식별하며, 다음과 관련된 세 가지 미해결 연구 질문을 제시한다: (i) 자원 제약 마이크로컨트롤러에서의 인공지능(AI) 배포, (ii) 경량 통신 프로토콜을 통한 분산 다중 노드 조율, (iii) 잔여 수명 추정과 설명 가능한 인공지능(explainable AI)을 통합한 스마트 공장 제어를 향한 디지털 트윈의 계층적 오케스트레이션. 분석 결과, 상당한 진전에도 불구하고 Industry 5.0의 요구사항을 동시에 충족하는 통합 임베디드-분산 계층적 솔루션을 제공하는 기존 시스템은 없음을 보여준다.
AI 증강 인적 자원 관리? 독일 기업으로부터의 통찰
AI-Augmented Human Resource Management? Insights from German companies
본 연구는 독일 기업에서 인적 자원 관리(Human Resource Management)에 AI를 통합하는 과정을 조사한다. AI 기반 기술이 인적 자원 관리를 실제로 어떻게, 그리고 '증강(augmenting)'하고 있는지를 묻는다. 조직은 생성형 AI(generative AI) 또는 예측 분석(predictive analytics)을 활용해 전통적인 인적 자원 기능을 변화시키고, 일상 업무를 간소화하며, 자원을 전략적이고 사람 중심의 활동으로 재배치한다. 인터뷰, 집단 토론, 설문조사(N=410)를 통해 얻은 결과는 AI 도구가 HR 분석 역량을 강화하는 한편, 도입은 주로 효율성 및 합리화(rationalising) 목표를 위해 이루어진다는 점을 보여준다. AI 도구의 도입은 디지털 인프라, 공동결정(co-determination) 체계, 윤리적 함의와 같은 조직 변혁 요인에 의해 형성된다. 본 연구는 인재 개발 개선을 위한 전략적 잠재력과 데이터 거버넌스(data governance) 및 알고리즘 투명성(algorithmic transparency)이 제기하는 과제를 모두 조명한다. 전반적으로, 이 연구는 HR에서 기술 변화의 모호한 역할을 이해하는 데 기여하며, 예측 역량을 증강할 것을 약속하면서도 효율성과 합리화(rationalisation)의 목적에 기여한다는 점을 보여준다.
만성 신장질환 조기 예측을 위한 머신러닝 모델의 신뢰성 평가: 데이터 누출 및 예측 변수 안정성에 대한 체계적 문헌고찰
Evaluating Reliability in Machine Learning Models for Early Chronic Kidney Disease Prediction: A Systematic Review of Data Leakage and Predictor Stability
머신러닝을 이용한 만성 신장질환(Chronic Kidney Disease) 조기 진단은 의료 관련 컴퓨터 과학 분야에서 상당한 관심을 받아왔다. 이 분야가 빠르게 발전했음에도 불구하고, 보고된 많은 연구는 일관성이 없고 잠재적으로 오해를 불러일으킬 수 있다. 중요한 한계는 방법론적 우려에 대한 체계적인 평가가 부족하다는 점이다. 핵심 이슈로는 데이터 누출(data leakage), 시간적 환자 기록에 대한 제한적 접근, 보고된 임상 지표의 불일치가 포함된다. 본 연구는 해석 가능한(interpretable) 머신러닝 기법을 사용한 기존 CKD 예측 연구에 대한 체계적 문헌고찰을 제공하며, 주요 학술 데이터베이스에 대한 체계적 검색을 통해 19편의 관련 연구를 선정했다. 방법론적 신뢰성을 평가하기 위해, 본 연구는 정보 누출에 대한 구조화된 분류 체계와 정량적 누출 점수 프레임워크를 도입하여 CKD 예측 연구 전반의 신뢰성을 체계적으로 평가한다. 분석 결과 누출과 부풀려진 성능 사이에 강한 관계가 나타났다. 여기서 높은 누출 연구는 평균 정확도 95.48%를 보고한 반면, 누출이 없는 연구는 80.2%로, 약 15.28%의 증가를 반영한다. 또한 교차 연구 특징 안정성 분석은 일관되게 재현 가능한 예측 변수가 극히 일부에 불과하며, 80% 이상이 신뢰성을 결여하고 있음을 보여준다. 전반적으로, 이러한 결과는 보고된 많은 성능 향상이 실제 예측 능력이라기보다 방법론적 한계에서 비롯된 것임을 시사한다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.