고속 메모리 스토리지를 이용한 빅데이터 처리 동향

• 영문명: Trend of big data analysis using Solid State Drive
• 발행기관: 한국IT서비스학회
• 저자명: 이설(Sul Lee) 김승완(Seung Wan Kim) 윤희용(Hee Yong Youn)
• 간행물 정보: 『한국IT서비스학회 학술대회 논문집』2014추계학술대회, 193~196쪽, 전체 4쪽
• 주제분류: 공학 > 전자/정보통신공학
• 파일형태: PDF
• 발행일자: 2014.11.05

국문 초록

소셜 미디어의 성장과 디지털 기기가 삶의 전반에 배치되면서 대규모의 다양한 데이터가 기하 급수적으로 생성, 유통 및 저장되고 있다. 이는 디지털로 축적된 다양한 데이터의 분석을 통해 기존에 볼 수 없었던 의미 있는 정보들이 발견되고 새로운 가치가 체계적으로 도출되고 있기 때문이다. 빅 데이터를 본격적으로 활용하기 위해 다양한 기술들이 개발되어 활용되고 있다. 그 중 오픈 소스 소프트웨어 프레임워크인 하둡(Hadoop)은 최근 빅데이터 처리를 위한 핵심 기술로 주목받고 있다. 하둡 프레임워크는 페타바이트 이상의 대용량 데이터를 클러스터 환경에서 저장하기 위한 하둡 분산 파일 시스템(HDFS)과 이를 기반으로 병렬 처리를 지원하기 위한 맵리듀스(MapReduce) 프레임워크로 구성된다. 하둡 프레임워크는 많은 분야에서 대용량 데이터 처리를 위한 핵심 기술로 급부상하고 있으며, 단순하면서도 확장이 용이하다. 또한 하둡 프레임워크는 높은 활용성으로 인해 많은 주목을 받고 있으며, 추가적인 성능 향상을 위한 연구 및 응용이 활발 하게 진행되고 있다. 빅데이터의 빠른 처리와 다양한 응용을 지원하기 위한 기반 기술로써 최근 하둡과 SSD를 접목한 빅데이터 처리 기술도 활발히 연구되고 있다. 본 논문에서는 고속 메모리 스토리지를 이용한 빅데이터 처리기법에 대해 기술한다. 어떠한 방법이 활용되고 있고, 얼마나 더 효율적인 방법인지 최근 동향을 통해 알아보고자 한다.

목차

Ⅰ. 서론

Ⅱ. 빅데이터 처리 기술

Ⅲ. SDD를 활용한 빅데이터 처리 동향

Ⅳ. 결론