빅데이터의 많은 부분을 차지하고 있는 공간 빅데이터는 빅데이터의 일반적인 특징을 보유하면서 장소에 대한 속성 또한 추가적으로 포함한다. 따라서 생성하는 데이터의 양이 방대할 뿐만 아니라 다른 종류의 빅데이터에 비하여 다양성과 복잡도가 매우 높은 특징을 가지고 있다. 대부분의 기존 빅데이터 처리 기술들은 공간 정보 처리에 특화된 처리 기능을 제공하지 않거나 제한된 기능만을 제공하여 공간 데이터 처리 성능의 한계가 존재한다. 본 연구에서는 이러한 문제점을 해결하기 위해 개발하고 있는 Marmot 시스템을 소개한다. Marmot은 공간 빅데이터의 빠른 처리를 위한 함수 기반의 고성능 공간 빅데이터 저장관리 시스템이다. 이 시스템은 하나 이상의 공간 연산들의 체인으로 분석의 대상이 되는 응용을 기술하고, 입력 공간 빅데이터의 크기에 따라 맵리듀스(MapReduce) 또는 인메모리(In-Memory) 작업을 동적으로 선택하여 수행한다. 이때, 주어진 작업을 맵리듀스 방식으로 처리하는 경우 사용되는 맵리듀스 횟수를 최소화 하는 기능을 통해 고속의 공간 분석 응용의 수행 성능을 보여준다. 또한 개방형 공간 연산 기반의 데이터 처리 기능을 제공하여 사용자 정의가 가능한 공간 연산을 통한 높은 확장성을 제공한다.
KSP 제안 키워드
in-memory
저작권정책 안내문
한국전자동신연구원 지식공유플랫폼 저작권정책
한국전자통신연구원 지식공유플랫폼에서 제공하는 모든 저작물(각종 연구과제, 성과물 등)은 저작권법에 의하여 보호받는 저작물로 무단복제 및 배포를 원칙적으로 금하고 있습니다. 저작물을 이용 또는 변경하고자 할 때는 다음 사항을 참고하시기 바랍니다.
저작권법 제24조의2에 따라 한국전자통신연구원에서 저작재산권의 전부를 보유한 저작물의 경우에는 별도의 이용허락 없이 자유이용이 가능합니다. 단, 자유이용이 가능한 자료는 "공공저작물 자유이용허락 표시 기준(공공누리, KOGL) 제4유형"을 부착하여 개방하고 있으므로 공공누리 표시가 부착된 저작물인지를 확인한 이후에 자유이용하시기 바랍니다. 자유이용의 경우에는 반드시 저작물의 출처를 구체적으로 표시하여야 하고 비영리 목적으로만 이용이 가능하며 저작물을 변형하거나 2차 저작물로 사용할 수 없습니다.
<출처표시방법 안내> 작성자, 저작물명, 출처, 권호, 출판년도, 이용조건 [예시1] 김진미 외, "매니코어 기반 고성능 컴퓨팅을 지원하는 경량커널 동향", 전자통신동향분석, 32권 4호, 2017, 공공누리 제4유형 [예시2] 심진보 외, "제4차 산업 혁명과 ICT - 제4차 산업 혁명 선도를 위한 IDX 추진 전략", ETRI Insight, 2017, 공공누리 제 4유형
공공누리가 부착되지 않은 자료들을 사용하고자 할 경우에는 담당자와 사전협의한 이후에 이용하여 주시기 바랍니다.