포커스

본교 지능정보보호학부 오준형 교수 연구팀(지능정보보호학부 김지호 학생, 김에스더 학생, 김효주 학생 등)이 시각장애인의 일상 속 문제를 인공지능 기술로 해결하는 국제 컴퓨터 비전 경진대회인 VizWiz Challenge에서 2등상을 수상했습니다. VizWiz Challenge는 인공지능 및 컴퓨터 비전 분야 최고 권위 학술대회인 CVPR(Computer Vision and Pattern Recognition)에서 개최하는 대회로, 전 세계 연구진이 참여해 기술력을 겨루는 국제 경진대회입니다.

오준형 교수 연구팀은 기존 개방형 어휘 검출기(Open-Vocabulary Detector, OVD)가 정해진 카테고리 명칭 외의 객체를 탐지할 때 성능이 저하되는 한계를 새로운 방식으로 극복했습니다. 연구팀은 모델을 타깃 도메인에 맞춰 미세조정(fine-tuning)하는 대신, 기존 탐지기를 그대로 활용하면서 비전-언어 모델(Vision-Language Model, VLM)의 의미론적 프롬프트를 적용하는 방법을 제안해 우수성을 인정받았습니다.

이번 연구는 복잡한 탐지 모델을 수정하거나 추가 학습시키지 않고도 VLM이 생성한 텍스트 기반 의미 단서와 전체 맥락 기반의 재매칭 과정을 활용해 개인정보 보호를 위한 객체 탐지 성능을 향상시켰다는 점에서 의미가 있습니다. 특히 시각장애인의 실생활 환경에서 개인정보와 관련된 객체를 보다 정확하게 탐지할 수 있는 가능성을 제시하며, 사회적 취약계층의 디지털 정보 접근성과 프라이버시 보호를 지원하는 인공지능 기술의 활용 가치를 보여주었습니다.

오준형 교수는 “이번 연구 성과는 시각장애인뿐만 아니라 아동, 노인 등 사회적 취약계층의 디지털 정보 접근성 향상과 실질적인 프라이버시 보호에 도움이 될 것으로 기대합니다”며 “앞으로도 인공지능 기술을 활용해 사회적 문제를 해결하는 연구를 지속해 나가겠습니다”고 포부를 밝혔습니다. 

논문(첨부) : VLM-Guided Detection and Rematching for Private Object Localization

관련링크: https://vizwiz.org/workshops/2026-vizwiz-grand-challenge-workshop/

                    https://sites.google.com/view/aipl-swu(인공지능 개인정보보호 연구실)