Hội thảo Quốc gia lần thứ 4 về Ngôn ngữ học Tính toán (VCL2026)

ViCap: A Vietnamese Image Dataset for Assistive Vision for People with Visual Impairments

Not scheduled

20m

Hội trường lầu 6 (Trường Đại học Ngoại ngữ - Tin học TP.HCM)

Tiểu ban 3: Ngôn ngữ, Công nghệ và Trách nhiệm xã hội

Description

People with visual impairments in Vietnam face significant challenges in accessing visual information from printed text, public signs, transportation systems, and everyday environments. Despite rapid advances in vision–language models, research on Vietnamese assistive vision remains limited by the lack of publicly available datasets that reflect authentic local scenarios. This paper presents ViCap, a manually curated Vietnamese image dataset designed for assistive vision research. ViCap contains approximately 20,000 images collected from diverse real-world environments, including streets, buses, metro stations, restaurants, educational materials, and public-service facilities in Ho Chi Minh City. Each image is annotated with rich multimodal information, including scene categories, object labels, OCR text, image captions, navigation-oriented descriptions, obstacle warnings, safety guidance, location cues, and visual question–answer pairs. The annotations are designed to support practical assistive tasks such as reading public signs, understanding surrounding environments, recognizing obstacles, and answering scene-related questions. Preliminary baseline experiments using representative vision–language models demonstrate the applicability of ViCap for image captioning and visual question answering. The proposed dataset provides a valuable benchmark for developing and evaluating Vietnamese vision–language systems that improve accessibility for people with visual impairments.

Từ khóa

Vietnamese image dataset, assistive vision, visual impairment, image captioning, visual question answering, optical character recognition (OCR).

Thông tin các tác giả

1. Nguyễn Thị Lan Anh: Học viên thạc sĩ, đang học tập tại Trường Đại học Khoa học tự nhiên, Đại học Quốc gia Thành phố Hồ Chí Minh, 227 Nguyễn Văn Cừ, Phường Chợ Quán, TP. Hồ Chí Minh, email: 24C11002@student.hcmus.edu.vn
2. Nguyễn Hải Minh: TS,. đang công tác tại Trường Đại học Khoa học tự nhiên, Đại học Quốc gia Thành phố Hồ Chí Minh, 227 Nguyễn Văn Cừ, Phường Chợ Quán, TP. Hồ Chí Minh, email: nhminh@fit.hcmus.edu.vn
3. Đinh Điền: PGS.TS,. đang công tác tại Trường Đại học Khoa học tự nhiên, Đại học Quốc gia Thành phố Hồ Chí Minh, 227 Nguyễn Văn Cừ, Phường Chợ Quán, TP. Hồ Chí Minh, email: ddien@fit.hcmus.edu.vn