학술논문
비용 효율적 맵리듀스 처리를 위한 클러스터 규모 설정
이용수 24
- 영문명
- Scaling of Hadoop Cluster for Cost-Effective Processing of MapReduce Applications
- 발행기관
- 한국전자통신학회
- 저자명
- 류우석(Woo-Seok Ryu)
- 간행물 정보
- 『한국전자통신학회 논문지』제15권 제1호, 107~113쪽, 전체 7쪽
- 주제분류
- 공학 > 전자/정보통신공학
- 파일형태
- 발행일자
- 2020.02.29
4,000원
구매일시로부터 72시간 이내에 다운로드 가능합니다.
이 학술논문 정보는 (주)교보문고와 각 발행기관 사이에 저작물 이용 계약이 체결된 것으로, 교보문고를 통해 제공되고 있습니다.
국문 초록
본 논문에서는 하둡 플랫폼에서 비용 효율적 빅데이터 분석을 수행하기 위한 클러스터 규모의 설정 방안을 연구한다. 의료기관의 경우 진료기록의 병원 외부 저장이 가능해짐에 따라 클라우드 기반 빅데이터 분석 요구가 증가하고 있다. 본 논문에서는 대중적으로 많이 사용되고 있는 클라우드 서비스인 아마존 EMR 프레임워크를 분석하고, 비용 효율적으로 하둡을 운용하기 위해 클러스터의 규모를 산정하기 위한 모델을 제시한다. 그리고, 다양한 조건에서의 실험을 통해 맵리듀스의 실행에 영향을 미치는 요인을 분석한다. 이를 통해 비용 대비 처리시간이 가장 효율적인 클러스터를 설정함으로써 빅데이터 분석시 효율성을 증대시킬 수 있다.
영문 초록
This paper studies a method for estimating the scale of a Hadoop cluster to process big data as a cost-effective manner. In the case of medical institutions, demands for cloud-based big data analysis are increasing as medical records can be stored outside the hospital. This paper first analyze the Amazon EMR framework, which is one of the popular cloud-based big data framework. Then, this paper presents a efficiency model for scaling the Hadoop cluster to execute a Mapreduce application more cost-effectively. This paper also analyzes the factors that influence the execution of the Mapreduce application by performing several experiments under various conditions. The cost efficiency of the analysis of the big data can be increased by setting the scale of cluster with the most efficient processing time compared to the operational cost.
목차
Ⅰ. 서 론
Ⅱ. 아마존 EMR 아키텍쳐
Ⅲ. 맵리듀스 실행의 효율성 모델
Ⅳ. 실 험
Ⅴ. 결 론
References
해당간행물 수록 논문
- 통합 베이즈 티코노프 정규화 방법의 확장과 영상복원에 대한 응용
- 비접촉 생체신호 측정 기반 헬스케어 시스템 설계 및 구현
- DGS를 적용한 4중대역 안테나의 설계 및 제작
- AR/VR 서비스 향상을 위한 심박 변이도 연구
- 3 GHz, 6 GHz 실내 환경의 지연 확산 측정 및 분석
- 삼중 보안 기능을 가지는 스마트 도어락 개발
- 폴링에 의한 비정질 BaTiO₃ 박막의 광학적 특성 조사 및 녹색광 발생
- PID 제어 UAV를 이용한 발화 감지 시스템의 구현
- 미세먼지 수집 드론의 구조 제안 및 검증
- 무인기용 탑재 데이터링크 안테나 시스템에 관한 연구
- 헤어 스타일링을 위한 스마트 미러 시스템 개발
- SHA-256 기반의 캡슐화된 전자의무기록 문서 저장 시스템
- 손가락 인식을 기반으로 한 로봇청소기 제어기술
- Key-Value Solid State Device 기반의 저장 및 검색 아키텍처
- CA기반의 수축생성기를 이용한 영상 암호
- 경사면을 갖는 반-협곡 구조에서 다중-광선 모델을 사용한 전파 모델 해석
- 사물인터넷 기반 사무환경개선방안
- 얼굴 표정 인식을 위한 유전자 알고리즘 기반 심층학습 모델 최적화
- RGB-csb를 활용한 제한된 CNN에서의 정확도 분석 및 비교
- 전자입찰에서 딥러닝을 이용한 입찰 가격예측
- ITU 모델을 이용한 공용데이터링크 기반의 공중중계 시스템의 커버리지 예측
- ESS 최적화 및 안정적인 운영을 위한 배터리 잔량 산출 및 고장 예측 알고리즘
- 용접크랙검사용 비파괴 초음파탐상 자동화검사장비 개발
- 큰 규모 소프트웨어의 개발을 위한 모델링 기법의 방향성에 대한 연구
- 우적 크기 탐지기 신호로 산출한 정량적 운동에너지
- 비콘 기술을 적용한 유아 위치관리 실시간 알림 서비스
- 차량과 홈 IoT 기기 연동 서비스 사례를 통한 차량 측면에서의 IoT 기술 방향성 분석 및 고찰
- 비용 효율적 맵리듀스 처리를 위한 클러스터 규모 설정
- 최적 효율 무선 전력 전송을 위한 Magnetic Beam 형성
참고문헌
교보eBook 첫 방문을 환영 합니다!
신규가입 혜택 지급이 완료 되었습니다.
바로 사용 가능한 교보e캐시 1,000원 (유효기간 7일)
지금 바로 교보eBook의 다양한 콘텐츠를 이용해 보세요!