디지털평등연구센터

홈 바로가기

디지털평등연구센터

음성 기반 개인화 서비스를 통한 시각장애 대학생의 독립적 학습 지원 기술 개발

『한국연구재단 기초연구실지원사업』 2018.08~2021.05

    • 기계학습 기반 이미지 캡셔닝 : Microsoft Common Objects in Context (COCO) 데이터셋 기반의 캡션 생성 알고리즘
      이미지
    • 소리펜 타입의 음성 설명 연동
      • 유아 교육 컨텐츠 업체에서 사용하는 소리펜, 혹은 세이펜에서 이미 상용화되어 있는 기술을 적용
    • 텍스트 및 음성 서비스 제공
      • 이미지 개체 인식 및 캡셔닝 API를 바탕으로 이미지 캡션 텍스트 및 음성 제공
    이미지
    • 게임패드 리모콘을 이용한 웹 페이지 내 표 콘텐츠 탐색 인터페이스 설계
      • 일반 모드 : 읽기 모드로 표 콘텐츠의 재생
      • 인터랙티브 모드 : 표 콘텐츠의 탐색 모드로 3단계의 레벨로 제공
    • 표 콘텐츠 탐색 인터페이스 구현
      • 안드로이드 기반 어플리케이션 형태로 구현
    이미지
    • Phython 기반의 수학 수식의 시각적 컨텐츠 (도표 및 그래프) 자동 변환 개발
      • 수학 수식을 자동으로 시각화하는 프로그램 개발
      • 최대 두 개의 수학 수식을 입력받을 수 있고 시각화할 수 있도록 구현
    • 이미지
    • 그래프 음성 해설 생성기 개발
      • 그래프 모양새에 대한 이해를 돕기 위한 설명을 자동으로 추출
    • 이미지