[A-22] 악봇 - 악보를 다루는 특별한 방법
- 이창주
- 인천대학교
- 작품구분일반형
- 공개여부비공개
- 카테고리웹/앱, 생활
- 등록일2018-09-10
- 팀원(공동개발자)정민석,이윤석,임재혁
- 출품 경진대회제14회 인천대학교 창의적종합설계경진대회
- 0
- 0
- 1,667
상세설명
1. 수행배경
- 인공지능 스피커를 특정 음악 분야에 활용 가능성
- 스마트 스피커를 통해 악보를 제어할 수 있는 음성 인식 기술의 성숙
- 다양한 디스플레이 장치(스마트폰, 테블릿 피씨)를 스피커와 연동하여 악보 표시
- 디지털 악보 진보 방안 및 연주하며 악보를 넘기기 힘든 환경 개선
2. 수행기간
작품 제작 내용 | 추진일정 | 비 고 | ||||
5월 | 6월 | 7월 | 8월 | 9월 | ||
자료 및 라이브러리 조사 기기 사용 방법 화면 설계서 작성 구성도 작성 | | | | | | 화면 설계서 시스템 구성도 |
앱과 음성 인식 기기 연동 | | | | | | 프로그램 명세서 작성 개발환경구축 매뉴얼 |
악봇 프로그램 개발 개발자 매뉴얼 악봇 데이터 서버구축 스마트스피커 3D 모델링 | | | | | | ERD(논리, 물리) 테이블 정의서 |
자연어처리 고도화 아이템 테스트 스마트 스피커 3D프린팅 및 가공 화면에 악보 표시 | | | | | | 악봇 출력 모델 |
최종 보고서 작성 및 PPT 제작 시스템 검증 개선작업 진행 최종 보고서 작성 | | | | | | 시연 동영상 및 PPT |
- 초기 음악인들 및 취미 연주자들을 대상으로 인터뷰 및 설문 조사 진행하여 얻은 결과 반영
3. 개발작품 설명
- 국내 최초의 음성을 통한 악보 제어
- 악봇은 음악용 스마트 스피커로써 음성을 통해 악보를 제어
- 악보 제어, 반주 재생, 녹음, 연주 데이터 전송
- 다이얼로그플로우를 통한 음성 인식
|
|
디지털 악보 |
동적 악보 |
악봇 |
|
적용 기술 |
•PDF,
JPG, PNG
등의 그림파일 및 문서 포맷
|
•애플리케이션
형태
|
•연주용
인공지능 스피커
•MusicXML 웹 렌더링
•IoT
센서
•웹 앱
원격 컨트롤 기술
|
|
평가 |
•단순한
환경에서도 표시 가능
•악보의
정보에 대한 처리와 연주 보조 기능이 없음
|
•악보
재생에 맞추어 자동 페이지 넘기기 가능
•악보의
소리를 듣는 웹 미디 플레이 기능
|
•동정
악보 기능
•인공지능
스피커를 사용해서 웹 앱 컨트롤 가능
|
<기존 악보를 악봇을 통해 보완 및 기술 활용>
4. 활용방안
- 음악 교육 기술로 발전 가능
- 연주자에게 피드백 해줄 수 있는 선생님과 같은 역할
- 현 시스템을 활용, 다수의 스마트 스피커를 배치하고 교육생과 교사를 다대일로
원격 연동하면 음악 교육도 인터넷 강의를 구현할 수 있어 잠재력이 높은 기술 
- 자신의 연주를 기록할 수 있는 매체 역할
- 연주 데이터 분석
- 연주 데이터를 분석하여 연주자들 취향 및 기호 파악
- 곡,시간,날짜,부분,악기,가수 등과 같은 음악 데이터 수집
- 연주자들의 음악적 역량 향상 및 관심 증대
음악 진입 장벽을 낮춤으로써 음악 인구 증가
악기 시장 규모 확대
삶의 질 향상 행복 증대
소개 영상
소개 슬라이드
Score street from HongCheolgi