본문 바로가기
AI / 컴퓨터비전

SSAFY AI Challenge - Korean VQA

VLM 기반 4지선다 VQA

2025.10SSAFY전체
S

AI / 컴퓨터비전

프로젝트 개요

한국어 이미지 기반 4지선다 VQA 챌린지. VLM 미세조정, API 추론, 모델 라우팅과 번역 보조 경로를 탐색.

주요 구현

  • Qwen2.5-VL-3B LoRA Fine-tuning (4-bit 양자화)
  • BLIP-2 LoRA (Answer-only loss, Early Stopping)
  • GPT-4o-mini API (JSON structured output)
  • Qwen3-VL + InternVL2 Routing Ensemble
  • 영 번역 파이프라인 (OPUS-MT)

본인 담당 업무

  • 전체 역할 수행