arXiv:2006.00114

Design and Implementation of a Virtual 3D Educational Environment to improve Deaf Education

Abdelaziz Lakhfif

제출 2020-05-29

원문 초록

Advances in NLP, knowledge representation and computer graphic technologies can provide us insights into the development of educational tool for Deaf people. Actual education materials and tools for deaf pupils present several problems, since textbooks are designed to support normal students in the classroom and most of them are not suitable for people with hearing disabilities. Virtual Reality (VR) technologies appear to be a good tool and a promising framework in the education of pupils with hearing disabilities. In this paper, we present a current research tasks surrounding the design and implementation of a virtual 3D educational environment based on X3D and H-Anim standards. The system generates and animates automatically Sign language sentence from a semantic representation that encode the whole meaning of the Arabic input text. Some aspects and issues in Sign language generation will be discussed, including the model of Sign representation that facilitate reuse and reduces the time of Sign generation, conversion of semantic components to sign features representation with regard to Sign language linguistics characteristics and how to generate realistic smooth gestural sequences using X3D content to performs transition between signs for natural-looking of animated avatar. Sign language sentences were evaluated by Algerian native Deaf people. The goal of the project is the development of a machine translation system from Arabic to Algerian Sign Language that can be used as educational tool for Deaf children in algerian primary schools.

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

arXiv:2609.26100v1cs.CL공통 태그 Machine Translation, Text Generation

TSS: 도메인 특화 대규모 언어 모델의 추측 디코딩을 위한 타깃 측 희소화

TSS: Target-Side Sparsification for Speculative Decoding in Domain-Specific Large Language Models

추측 디코딩(speculative decoding)은 경량 드래프트 모델과 타깃 검증기(target verifier)의 협업을 통해 대규모 언어 모델 추론을 가속한다. 기존 방법은 주로 드래프트 측을 개선하며, 타깃 모델은 일반적으로 밀집(dense) 상태 그대로 변경 없이 유지된다. 본 논문은 도메인 특화 추론에서 전체 깊이의 타깃 검증이 항상 최적의 선택은 아님을 보인다. 직관과 반대로, 선택된 타깃 층을 건너뛰면 검증 비용을 줄이는 동시에 드래프트 수용률을 높일 수 있으며, 하위 작업 성능도 유지하거나 오히려 향상시킬 수 있다. 이러한 관찰에 기반하여 추측 디코딩을 위한 타깃 측 희소화 프레임워크인 TSS를 제안한다. TSS는 수용률(acceptance)과 지표(metric)를 모두 고려하는 너비 탐색(breadth search)을 사용해, 두 목표 사이에 고정된 우선순위를 부과하지 않고 다중 층 건너뛰기 구성을 탐색한다. 선택된 구성은 도메인-구성 매핑에 저장되고 경량 스킵 컨트롤러(skip controller)에 의해 적용되므로, 재학습이나 영구적인 매개변수 가지치기 없이 하나의 완전한 타깃 모델이 여러 희소 검증 경로를 지원할 수 있다. 여러 도메인, 모델 규모, 추측 디코딩 방법에 걸친 Spec-Bench 실험에서 드래프트 수용률과 하위 작업 성능이 일관되게 향상됨을 확인했다. 번역(Translation) 설정에서 TSS는 평균 수용 길이(average accept length)를 2.70에서 4.53으로(+67.8%) 늘리고, BLEU를 0.131에서 0.237로(+80.9%) 향상시켰으며, 종단 간(end-to-end) 처리량을 75.6에서 127.3 tokens/s로 높여 1.68배의 속도 향상을 달성했다.

arXiv:2609.26634v1cs.CL공통 태그 Machine Translation, Text Generation

지속적 문서 작성을 위한 지식 풀 리퀘스트(Knowledge Pull Requests)

Knowledge Pull Requests for Continual Document Authoring

우리는 각 변경 사항을 해석 가능하게 만드는 지속적 문서 작성(continual document authoring) 프레임워크인 지식 풀 리퀘스트(Knowledge Pull Requests, KPR)를 소개한다. 문서는 다른 출처, 언어 또는 시점에서 새로운 지식이 나타남에 따라 지속적인 수정이 필요하지만, 기존 접근법은 어떤 지식이 바뀌었는지에 대한 설명 없이 편집하거나 처음부터 다시 생성한다. KPR은 주장(claim)을 추출하고, 이를 필터링하여 각 섹션으로 라우팅하며, 기존 내용과의 충돌을 표시함으로써 새로운 지식을 문서에 통합한다. 그 결과 어떤 지식이 바뀌는지(주장 제안)와 텍스트가 어떻게 바뀌는지(문서 diff)를 분리하는 ChangeLog를 생성한다. 우리는 언어 간 위키백과(Wikipedia) 수정과 RAGTIME에서의 쿼리 기반 보고서 업데이트를 통해 KPR을 평가한다. KPR은 출처로부터 다시 작성하거나 처음부터 다시 생성하는 방식보다 더 많은 정보를 통합하고 기존 내용을 더 잘 보존하며, 생성된 토큰당 추가되는 정보량은 가장 많다. 또한 KPR로 수정된 문서는 검색을 사용하는 최첨단 모델(frontier model)보다 질의응답의 그라운딩(grounding)을 더 잘 수행하는데, 검색을 사용하는 최첨단 모델은 다른 언어로만 기록된 지식을 찾아내지 못한다.

arXiv:2607.22376v2cs.CL공통 태그 Machine Translation, Text Generation

문법서를 활용한 저자원 기계 번역용 합성 데이터 생성의 요인 실험 연구

A Factorial Study of Synthetic Data Generation for Low-Resource Machine Translation using Grammar Books

대부분의 위기 언어는 기술 문법서가 존재함에도 불구하고 기계 번역에 필요한 병렬 데이터가 부족하다. 본 연구는 대규모 언어 모델(LLM)을 사용하여 문법서에서 문법 규칙, 예문, 어휘집을 추출하고 미세조정용 합성 병렬 코퍼스를 생성하는 파이프라인을 제안한다. 이는 기존 연구처럼 추론 시점에 문법 내용을 프롬프트에 제공하는 방식과는 다르다. 유형론적으로 다양한 세 저자원 언어—Kalamang(파푸아어), Tuatschin(로망스어), Mandan(수어)—에서 검증한 결과, 합성 데이터 미세조정은 Kalamang에서 75%, Tuatschin에서 59%의 설정에서 시드 데이터 기준선 대비 개선을 보였으며, 최적의 경우 ChrF++는 각각 +8.8, +5.3, +3.3만큼 향상되었다. 목표 품사, 검색 세분성, 샘플 규모를 달리한 96개 설정에 대한 체계적인 요인 실험을 통해, 어떤 요인 조합이 성능 향상을 이끌고 어디에서 효과가 한계에 이르는지 밝혔다. 이 결과는 정적 언어학 문헌을 기계 번역 미세조정에 재활용할 수 있음을 보여 주며, 극도로 자원이 부족한 언어를 위한 번역 도구 구축이라는 실용적 경로를 제시한다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.