PyTorchKR Papers

최신 논문

총 4편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2606.24337v2cs.CL

Meet UD_Czech-PDTC: A Large and Genre-Rich Treebank in Universal Dependencies

Czech has been part of Universal Dependencies since its first release in 2015. It has also been one of the best represented languages, with the Prague Dependency Treebank being order of magnitude larger than most other UD treebanks. More recently, three other datasets from the Prague family were added and the annotations thoroughly revisited, forming the "Prague Dependency Treebank-Consolidated" (PDT-C). In comparison to the original PDT, PDT-C is more than twice as large, but it is also much more diverse in terms of genres and domains. In this paper, we describe the conversion of the new resource to Universal Dependencies. While the two annotation schemes are relatively similar at the first sight, there are numerous small differences in topology of the dependency structures and in granularity of the POS and relation type inventories. We demonstrate a selection of such differences on examples, discuss the diverging motivations, as well as ways to overcome the differences during conversion. We argue that while PDT is less "universal" and more tightly bound to one language, its multi-layer annotation is rich and provides all information needed for basic UD trees, and much more.

arXiv:2609.27558v1cs.CL

ThaiTrees: 도메인을 아우르는 태국어 구문 의존 트리

ThaiTrees: Thai Syntactic Dependency Trees Across Domains

자연어에서 나타나는 구문 패턴을 연구하려면 대규모 구문 분석 코퍼스가 필요하지만, 수작업 어노테이션은 비용이 크고 확장하기 어렵다. 태국어는 구문 분석기(parser) 학습 및 평가를 위한 수작업 의존 트리뱅크가 있으나, 정량적 구문 연구를 위한 대규모 자동 구문 분석 코퍼스는 부족하다. 우리는 뉴스, 위키피디아, 구어 전사, 소셜 미디어에서 수집한 342M 토큰 규모의 코퍼스 ThaiTrees를 제시한다. Universal Dependencies 프레임워크 하에서 태국어 텍스트를 정제·처리·구문 분석하는 재현 가능한 파이프라인을 개발한다. 이로 얻은 코퍼스는 문법적 관계를 검색 가능하게 하며 구문 분포 연구를 지원한다. AI 지원 분석과 기존 프로그램 기반 분석 모두에 적합한 기계 가독형 형식으로 빈도 어휘집과 CoNLL-U 구문 분석 결과를 공개한다.

arXiv:2607.04895v2cs.CL

Ossetic-COT: 오세트어 형태소 주석 말뭉치 및 형태소 분석기 설계

Ossetic-COT: Designing a morphologically annotated corpus and morphological analyzer for Ossetic

Universal Dependencies 스키마를 따르는 최초의 Iron 오세트어(Iron Ossetic) 형태소 주석 말뭉치 Ossetic-COT를 구축하고, 이를 활용해 BERT 기반 형태소 분석기를 학습한 결과 95.60%의 태그 정확도를 달성했다. 말뭉치는 구어 텍스트에서 수작업으로 주석된 5,454개 문장(74,032 토큰)으로 구성되며, 오세트어 고유의 형태통사적 특성을 반영한 언어별 UD 확장 주석 지침도 함께 제안했다.

arXiv:2605.19718v2cs.CL

CAIT: 아동-성인 상호작용을 위한 구문 분석 툴킷

CAIT: A Syntactic Parsing Toolkit for Child-Adult InTeractions

CHILDES는 언어 습득 연구에서 핵심적인 자료원이지만, 그 구문 구조를 분석하는 계산 도구는 여전히 부족하다. 최근 공개된 금표준 Universal Dependencies(UD) 주석이 포함된 UD-English-CHILDES 트리뱅크를 활용하여, 우리는 CHILDES에 특화된 최신 의존 구문 분석기를 학습시켰다. 이 분석기는 아동-성인 상호작용의 구문 패턴을 더 정확하게 포착하며, SpaCy와 Stanza를 포함한 널리 사용되는 기성 영어 분석기들을 능가한다. 분석기와 함께, 품사 태거(Part-of-Speech tagger)와 발화 수준 구문 구조 태거(utterance-level construction tagger)도 함께 공개하며, 이들이 결합되어 아동-성인 상호작용을 위한 오픈소스 구문 분석 툴킷인 CAIT를 구성한다. 상세한 오류 분석과 CHILDES의 발달 시기별 구문 구조 분포를 추적하는 사례 연구를 통해, 언어 습득에 관한 대규모의 재현 가능한 연구에 대한 이 툴킷의 실용적 유용성을 입증한다.