본문 바로가기

[04] 딥러닝을 활용한 시각적 드럼 가이드

  • 김나연
  • 인천대학교
  • 작품구분일반형
  • 공개여부비공개
  • 카테고리정보, 웹/앱, 생활
  • 등록일2023-06-21
  • 팀원(공동개발자)정보통신공학과 오승엽, 김나연, 이유림, 소비자아동학과 장진이
  • 출품 경진대회2023년 산학 캡스톤디자인 경진대회 학생팀 & 멘토 모집

상세설명

1. 수행배경

  • 드럼의 공간적, 비용적 제약으로 인한 드럼 학습의 어려움을 해소하고자 하였음.
  • 기존 유사 제품과의 차별성을 통한 활용 범위 확대 도모

2. 수행기간

  • 3월 - 악보 분석 알고리즘 설계, OpenCV를 사용한 악보 이미지 전처리
  • 4월 - 딥러닝을 통한 음표 이미지 학습, 안드로이드 개발
  • 5월 - 딥러닝을 통한 음표 이미지 학습, 안드로이드 개발, 매드매퍼를 이용한 프로젝션 맵핑, 알고리즘 테스트
  • 6월 - 알고리즘 테스트, 프로젝트 베타테스트 및 버그 수정, 프로젝트 완성

3. 개발작품 설명

  • 빔 프로젝트를 활용한 시각적 드럼 가이드 제공 서비스
  • 이미지 전처리로 음표를 출력하고, 딥러닝으로 학습하여 만든 악보인식 알고리즘으로 악보를 분석해 드럼 위로 빛 신호를 보냄으로써 드럼을 연주할 수 있음.
  • 음악에 맞춰 드럼 위로 빔 프로젝터에서 빛을 보내주기 때문에 악보를 확인하여 치는 번거로움이 줄어 드럼을 학습하기 수월함

4. 활용방안

  • 드럼이 어려워 포기하려는 초보자들도 부담없이 연습할 수 있는 서비스로서, 취미생활을 도모할 수 있음
  • 음악 학원과 연계하여 드럼 교육 플랫폼 사업화를 통해 드럼 교육의 새로운 커리큘럼 제시
  • 악보 분석 알고리즘을 응용하여 다른 악기에도 적용 가능

소개 영상

정보가 없습니다.

소개 슬라이드

정보가 없습니다.

기타자료

비공개 자료입니다.

댓글