지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
이용수
초록· 키워드
오류제보하기
맵리듀스는 하둡의 필수 핵심 기술로 하둡 분산 파일 시스템을 기반으로 빅데이터를 처리하는 가장 보편화되어 사용되고 있다. 그러나 기존 맵리듀스 기반 빅데이터 처리 기법은 하둡 분산 파일 시스템에 정해진 블록의 크기대로 파일 나눠 저장되는 특징으로 인해 인프라 자원의 낭비가 극심하다. 이에 본 논문에서는 효율적인 맵리듀스 기반 빅데이터 처리 기법을 제안한다. 제안하는 기법은 처리할 데이터를 사전에 맵리듀스에서 처리하기 적합한 데이터 형태로 변환 및 압축하여 빅데이터 인프라 환경의 저장 효율성을 증가시킨다. 또한 제안하는 기법은 저장 효율성을 중점으로 구현했을 때 발생할 수 있는 데이터 처리 시간의 지연 문제를 해결한다.
목차
등록된 정보가 없습니다.
참고문헌 (15)
참고문헌 신청
H. G. Lee / 2017 / Implementation of an Efficient Big Data Collection Platform for Smart Manufacturing / Journal of Engineering and Applied Sciences 12(2Si):6304~6307
Behrang Mahjani / 2017 / A Flexible Computational Framework Using R and Map-Reduce for Permutation Tests of Massive Genetic Analysis of Complex Traits / IEEE/ACM Transactions on Computational Biology and Bioinformatics 14(2):381~392
Y. W. Kim / 2017 / Implementation of Big Data Analysis System to Prevent Illegal Sales in the Cable TV Industry / Journal of Engineering and Applied Sciences 12(3Si):6542~6545
이협건 / 2018 / 스마트 팩토리 환경에서의GlusterFS 기반 빅데이터 분산 처리 시스템 설계 / 한국정보전자통신기술학회 논문지 11(1):70~75
박홍진 / 2016 / 다양한 NoSQL 데이터베이스의 성능 평가 연구 / 한국정보전자통신기술학회 논문지 9(3):298~305
Behrang Mahjani / 2017 / A Flexible Computational Framework Using R and Map-Reduce for Permutation Tests of Massive Genetic Analysis of Complex Traits / IEEE/ACM Transactions on Computational Biology and Bioinformatics 14(2):381~392
Y. W. Kim / 2017 / Implementation of Big Data Analysis System to Prevent Illegal Sales in the Cable TV Industry / Journal of Engineering and Applied Sciences 12(3Si):6542~6545
이협건 / 2018 / 스마트 팩토리 환경에서의GlusterFS 기반 빅데이터 분산 처리 시스템 설계 / 한국정보전자통신기술학회 논문지 11(1):70~75
박홍진 / 2016 / 다양한 NoSQL 데이터베이스의 성능 평가 연구 / 한국정보전자통신기술학회 논문지 9(3):298~305
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
Optimized Data Processing Analysis Using Big Data Cloud Platform
한국지식정보기술학회 논문지
2021 .01
-
시계열 빅데이터 처리 분석을 위한 맵리듀스 메커니즘 연구
정보기술아키텍처 연구
2015 .01
-
디퍼렌셜 프라이버시 환경에서 캐시를 이용한 맵리듀스 기법의 성능향상에 관한 연구
예술인문사회 융합 멀티미디어 논문지
2017 .03
-
라즈베리파이를 이용한 빅 데이터 처리 학습 환경 구축
디지털융복합연구
2016 .01
-
A Study on Big Data-based GraphX Model for Social Network Service
한국지식정보기술학회 논문지
2020 .01
-
하둡 기반 빅데이터 수집 및 처리를 위한 플랫폼 설계 및 구현
한국콘텐츠학회 종합학술대회 논문집
2015 .05
-
하둡 분산 환경 기반의 데이터 수집 기법 연구
한국융합학회논문지
2016 .01
-
빅데이터 수집 처리를 위한 분산 하둡 풀스택 플랫폼의 설계
한국융합학회논문지
2021 .01
-
하둡 환경에 적합한 클러스터 그룹 기반 속성 정보를 이용한 빅 데이터 관리 기법
디지털융복합연구
2015 .01
-
이중 해쉬체인을 이용한 계층적 다중 처리를 위한 효율적인 데이터 관리 기법
디지털융복합연구
2015 .01
-
빅데이터 환경에서 스트림 질의 처리를 위한 인메모리 기반 점진적 처리 기법
한국콘텐츠학회논문지
2016 .02
-
오프라인 마켓에 적용 가능한 빅데이터 분석 시스템 구축 방안에 관한 연구
디지털융복합연구
2016 .01
-
공공개방데이터 분석 기법 연구
예술인문사회 융합 멀티미디어 논문지
2015 .12
-
빅 데이터 환경에서 다중 속성 기반의 데이터 관리 기법
디지털융복합연구
2015 .01
-
[정보통신정책연구원] 빅데이터 시대 개인 행태 정보 수집 및 활용에 대한 정책 연구
국립중앙도서관 연계자료
2015 .01
-
[대전광역시교육청] 빅데이터 기반 수업전문성 진단 및 처방 시스템 개발 연구 : 2018년 교육정책 연구용역 최종보고서
국립중앙도서관 연계자료
2018 .01
-
빅데이터를 이용한 자동 이슈 분석 시스템
한국콘텐츠학회논문지
2020 .02
-
분산 컴퓨팅 환경에서 효율적인 유사 조인 질의 처리를 위한 행렬 기반 필터링 및 부하 분산 알고리즘
한국콘텐츠학회논문지
2016 .07
-
산업현장 실시간 센싱정보 활용/분석을 위한 빅데이터 플랫폼
창의정보문화연구
2020 .01
-
빅데이터 시대의 데이터 통합 전략: 공공부문 사례 분석
정보기술아키텍처 연구
2017 .06
이 논문의 저자 정보
최근 본 자료
댓글(0)
0