PyTorchKR Papers

최신 논문

총 4편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2606.24337v2cs.CL

Meet UD_Czech-PDTC: A Large and Genre-Rich Treebank in Universal Dependencies

Czech has been part of Universal Dependencies since its first release in 2015. It has also been one of the best represented languages, with the Prague Dependency Treebank being order of magnitude larger than most other UD treebanks. More recently, three other datasets from the Prague family were added and the annotations thoroughly revisited, forming the "Prague Dependency Treebank-Consolidated" (PDT-C). In comparison to the original PDT, PDT-C is more than twice as large, but it is also much more diverse in terms of genres and domains. In this paper, we describe the conversion of the new resource to Universal Dependencies. While the two annotation schemes are relatively similar at the first sight, there are numerous small differences in topology of the dependency structures and in granularity of the POS and relation type inventories. We demonstrate a selection of such differences on examples, discuss the diverging motivations, as well as ways to overcome the differences during conversion. We argue that while PDT is less "universal" and more tightly bound to one language, its multi-layer annotation is rich and provides all information needed for basic UD trees, and much more.

arXiv:2606.24324v2cs.CL

Prague Dependency Treebank -- Consolidated 2.0: Enriching a Complex Annotation Scheme

Prague Dependency Treebank의 통합 2.0(PDT-C 2.0)은 형태·표층·심층 구문과 공동지시·담화 관계 등 다층 언어 표기를 일관되게 연결한 체코어 코퍼스로, 약 30년간 축적된 수기 주석을 바탕으로 서면·번역·구어·사용자 생성 등 장르를 아우르는 약 400만 토큰 규모의 자원과 호환 어휘집을 CC BY-NC-SA로 공개한다. 1.0 대비 표층 구문·공동지시·담화 주석이 전 데이터셋에 수기로 보강·통합되어, 전통적·신규 NLP 도구 비교와 다른 형식 변환 연구에 활용된다.

arXiv:2609.27558v1cs.CL

ThaiTrees: 도메인을 아우르는 태국어 구문 의존 트리

ThaiTrees: Thai Syntactic Dependency Trees Across Domains

자연어에서 나타나는 구문 패턴을 연구하려면 대규모 구문 분석 코퍼스가 필요하지만, 수작업 어노테이션은 비용이 크고 확장하기 어렵다. 태국어는 구문 분석기(parser) 학습 및 평가를 위한 수작업 의존 트리뱅크가 있으나, 정량적 구문 연구를 위한 대규모 자동 구문 분석 코퍼스는 부족하다. 우리는 뉴스, 위키피디아, 구어 전사, 소셜 미디어에서 수집한 342M 토큰 규모의 코퍼스 ThaiTrees를 제시한다. Universal Dependencies 프레임워크 하에서 태국어 텍스트를 정제·처리·구문 분석하는 재현 가능한 파이프라인을 개발한다. 이로 얻은 코퍼스는 문법적 관계를 검색 가능하게 하며 구문 분포 연구를 지원한다. AI 지원 분석과 기존 프로그램 기반 분석 모두에 적합한 기계 가독형 형식으로 빈도 어휘집과 CoNLL-U 구문 분석 결과를 공개한다.

arXiv:2606.15510v2cs.CL

AthDGC: An Open Diachronic Greek Treebank with Indo-European Parallels

AthDGC(Athens-PROIEL)는 고대 아르카익 그리스어부터 현대 그리스어까지 8개 시대를 아우르는 최초의 공개 라이선스 의존 구문 트리뱅크(treebank)로, Stanford Stanza와 LaBSE, multilingual-BERT 기반 AwesomeAlign을 활용해 신약성서를 라틴어·고트어·고대 교회 슬라브어·고전 아르메니아어와 구절 수준으로 교차 정렬한 오픈소스 말뭉치 구축 워크플로우를 제공한다.