학술논문
YOLO 기반의 광학 음악 인식 기술 및 가상현실 콘텐츠 제작 방법
이용수 59
- 영문명
- YOLO based Optical Music Recognition and Virtual Reality Content Creation Method
- 발행기관
- 한국스마트미디어학회
- 저자명
- 오경민(Kyeongmin Oh) 홍요섭(Yoseop Hong) 백건영(Geongyeong Baek) 전찬준(Chanjun Chun)
- 간행물 정보
- 『스마트미디어저널』Vol10, No.4, 80~90쪽, 전체 11쪽
- 주제분류
- 공학 > 컴퓨터학
- 파일형태
- 발행일자
- 2021.12.31
4,120원
구매일시로부터 72시간 이내에 다운로드 가능합니다.
이 학술논문 정보는 (주)교보문고와 각 발행기관 사이에 저작물 이용 계약이 체결된 것으로, 교보문고를 통해 제공되고 있습니다.
국문 초록
딥러닝에 기반한 광학 음악 인식 기술(Optical Music Recognition, OMR)을 사용하여 도출된 결과를 가상현실 (Virtual Reality, VR) 게임에 적용시킨 것을 제안한다. 딥러닝 모델은 YOLO v5를 사용했으며 검출되지 않은 객체를 검출하기 위해 Hough transform 사용, 보표 크기 수정 등을 수행한다. 출력된 결과 파일을 사용하여 VR 게임에서 BPM, 최대 콤보 수, 음정과 박자를 분석하여 사용하고 리소스 관리를 위한 Object Pooling 기술을 통해 노트가 밀리는 현상을 방지한다. 광학 음악 인식 기술을 통해 나온 음악 요소로 VR 게임을 제작하여 VR 콘텐츠 제공과 함께 광학 음악 인식의 활용성을 넓히는 것을 확인하였다.
영문 초록
Using optical music recognition technology based on deep learning, we propose to apply the results derived to VR games. To detect the music objects in the music sheet, the deep learning model used YOLO v5, and Hough transform was employed to detect undetected objects, modifying the size of the staff. It analyzes and uses BPM, maximum number of combos, and musical notes in VR games using output result files, and prevents the backlog of notes through Object Pooling technology for resource management. In this paper, VR games can be produced with music elements derived from optical music recognition technology to expand the utilization of optical music recognition along with providing VR contents.
목차
Ⅰ. 서론
Ⅱ. 본론
Ⅲ. 결론
해당간행물 수록 논문
- WebRTC를 이용한 현장 적응형 다자간 원격협업 시스템 개발
- 이모티콘에 적용된 환유 유형과 현저성 속성
- 공예품 이커머스 데이터베이스 구축을 위한 공예품 조형 디자인 분류체계 개발
- 분산 트리거 계수 문제를 위한 효율적인 트리 기반 알고리즘
- 가상현실 기반 발파소음 및 진동 시뮬레이션 UI 설계
- 주행 공공 안내표지판의 맥락적 시인성 향상을 위한 표지판 디자인 연구
- YOLO 기반의 광학 음악 인식 기술 및 가상현실 콘텐츠 제작 방법
- 건설신기술에 대한 토픽 모델링 및 토픽 변화추이 분석
- 스마트미디어저널 Vol10, No.4 목차
- 섬유 드레이프 이미지를 활용한 드레이프 생성 모델 구현에 관한 연구
- 디지털 문화유산의 메타버스 활용방안 연구
- Deep Metric Learning을 활용한 합성곱 신경망 기반의 피부질환 분류 기술
- 악성댓글 판별의 성능 향상을 위한 품사 자질에 대한 분석 연구
- 상담 챗봇의 다차원 감정 인식 모델
참고문헌
관련논문
공학 > 컴퓨터학분야 BEST
- 청소년들의 스마트폰 중독예방을 위한 이야기치료 집단상담 프로그램 개발
- 지도서비스를 이용한 위치 기반 관광 빅데이터의 시각화
- 틱톡의 숏폼 콘텐츠 특성이 관광지 이미지 및 방문의도에 미치는 영향
공학 > 컴퓨터학분야 NEW
더보기최근 이용한 논문
교보eBook 첫 방문을 환영 합니다!
신규가입 혜택 지급이 완료 되었습니다.
바로 사용 가능한 교보e캐시 1,000원 (유효기간 7일)
지금 바로 교보eBook의 다양한 콘텐츠를 이용해 보세요!