[A-17] 오늘내일 - 시각장애인을 위한 스마트 옷장
- 이태호
- 인천대학교
- 작품구분일반형
- 공개여부비공개
- 카테고리기계, 생활
- 등록일2019-09-11
- 팀원(공동개발자)이태호, 이윤직, 황영준, 강한별
- 출품 경진대회제15회 인천대학교 창의적종합설계경진대회 참가팀 모집
- 0
- 0
- 1,249
상세설명
. 수행배경
시각적인 문제로 세상을 바라보지 못하는 시각장애인들은 매번 외출할 때 많은 어려움을 겪습니다. 이들은 현관을 나가기 전부터 많은 어려움을 겪으며 그중 하나는 ‘오늘은 어떤 옷을 입고 나가야 하나?’입니다. 일반인도 동일한 경험을 할 수 있습니다만 시각장애인이 고민하는 부분은 우리가 생각하는 범주를 벗어납니다. 그들은 시각적인 문제로 자신이 입는 옷이 어떤 옷인지 모르고, 의류를 구분할 수 있는 최대한의 방법은 촉각적(Haptic) 방법으로 구분합니다. 자신이 선택한 의류의 질감은 촉각적으로 정보를 얻을 수 있지만 시각적 정보인 색, 무늬, 의류의 형태 등은 동행인이 없이는 알 수 없습니다.
저희 팀원 중 황영준은 부평에 있는 시각장애인 사회복지관 ‘광명원’에서 2년간 사회복무요원으로 근무하면서 시각장애인이 일상생활에서 겪고 있는 어려움을 직접 보고 체험했습니다. 광명원에는 전맹과 약시 연령 불문 남녀 약 70명이 여러 사회복지 선생님의 도움을 받아 생활하고 있습니다. 일반인이 생각하기에 시각장애인은 눈이 보이지 않으니까 의류에는 관심이 없어 보일 수 있으나, 시각장애인들은 의외로 패션에 대한 욕구가 있습니다. 시각장애인들은 외출 전 준비 시간이 일반인의 2배 이상은 걸리는데 가장 큰 시간을 차지하는 부분은 옷을 고르고 입는 시간입니다.
또한 사회에서는 시각장애인들의 패션 생활을 도와줄 수 있는 아이템들을 내놓고 있습니다. 우리도 역시 이러한 시각장애인들의 기본적인 패션 생활들을 도와주고, 더 나아가 시각장애인의 자립화의 자그마한 한 발자국을 남기고 싶습니다.
2. 수행기간
작품 제작
내용
추진일정
비 고
5월
6월
7월
8월
9월
소프트웨어 공학 설계를 이용한 설계 및 분석
웹 크롤링을 이용한 의류 및 제스쳐 데이터셋 구축
Threshold 기반
손가락 색 탐지
OpenCV 기반 손 끝 탐지
OpenCV 기반 손가락 개수 탐지
유클라디안 거리
함수를 사용한
옷의 색 탐지
Inception-V3를 이용한 인공지능 학습
카메라 모듈을 이용한 이미지 분류
카메라 모듈을 이용한 실시간 이미지 분류
실시간 이미지 분류 정확성 보완
분류된 데이터를 스피커를 통해 출력
시각장애인 대상으로
시제품 실사용 태스트
피드백을 바탕으로 기술 보완 및 발표자료 준비
3. 개발작품 설명
개발하고자는 스마트 옷장 시스템은 소형 임베디드시스템기반 실시간 손가락 포인팅 인식 기술, 포인팅된 의류 객체 추정기술, 딥러닝기반 의류정보 추출기술, 시각정보 음성제공 기술 등으로 이루어집니다. 시각장애인의 손끝탐지를 통해 손가락의 개수를 파악하고 손가락이 1개일 때, 포인팅 된 의류의 색을 음성을 통해 알려주고 2개일 때, 옷의 종류,패턴을 실시간 분석 하여 음성으로 알려주게 됩니다.
4. 활용방안
색과 옷의 종류를 구분할 수 없는 시각장애인이 외출을 하기 위해 옷을 선택하는 과정에는 옆에서 옷을 골라주는 사람이 꼭 필요하고 많은 시간이 필요합니다. 하지만 저희가 만든 ‘시각장애인을 위한 스마트 옷장’을 활용한다면 시각장애인이 있는 가정이나 시각장애인 생활 시설 등에 큰 도움을 줄 수 있습니다. 시각장애인이 외출을 하기 위해 소비하는 많은 시간과 옆에서 도와주는 사람이 없이 스스로 옷을 고르게 함으로 인해 자립심 향상에 도움을 줄 수 있습니다.
그리고 앞으로 같이 생활하는 사람들의 이름을 딥 러닝을 통해 학습시켜 옷의 구분을 할 수 있게 하고 시각장애인 분이 선택한 옷과 어울리는 옷을 알려 주는 방법, 또한 생활 환경에서 벗어나 온라인이나 오프라인에서 옷 쇼핑을 할 때도 옷의 색과 종류를 판별하는 기능을 추가하여 이 프로젝트를 더 유용하게 활용하고 싶습니다.
소개 영상
소개 슬라이드
slide share에 자료가 올라가지 않아 pdf파일을 첨부합니다.