18GH1200, Geospatial Big Data Management, Analysis and Service Platform Technology Development,
Lee Kang-Woo
Abstract
빅데이터의 많은 부분을 차지하고 있는 공간 빅데이터는 빅데이터의 일반적인 특징을 보유하면서 장소에 대한 속성 또한 추가적으로 포함한다. 따라서 생성하는 데이터의 양이 방대할 뿐만 아니라 다른 종류의 빅데이터에 비하여 다양성과 복잡도가 매우 높은 특징을 가지고 있다. 대부분의 기존 빅데이터 처리 기술들은 공간 정보 처리에 특화된 처리 기능을 제공하지 않거나 제한된 기능만을 제공하여 공간 데이터 처리 성능의 한계가 존재한다. 본 연구에서는 이러한 문제점을 해결하기 위해 개발하고 있는 Marmot 시스템을 소개한다. Marmot은 공간 빅데이터의 빠른 처리를 위한 함수 기반의 고성능 공간 빅데이터 저장관리 시스템이다. 이 시스템은 하나 이상의 공간 연산들의 체인으로 분석의 대상이 되는 응용을 기술하고, 입력 공간 빅데이터의 크기에 따라 맵리듀스(MapReduce) 또는 인메모리(In-Memory) 작업을 동적으로 선택하여 수행한다. 이때, 주어진 작업을 맵리듀스 방식으로 처리하는 경우 사용되는 맵리듀스 횟수를 최소화 하는 기능을 통해 고속의 공간 분석 응용의 수행 성능을 보여준다. 또한 개방형 공간 연산 기반의 데이터 처리 기능을 제공하여 사용자 정의가 가능한 공간 연산을 통한 높은 확장성을 제공한다.
KSP Keywords
in-memory
Copyright Policy
ETRI KSP Copyright Policy
The materials provided on this website are subject to copyrights owned by ETRI and protected by the Copyright Act. Any reproduction, modification, or distribution, in whole or in part, requires the prior explicit approval of ETRI. However, under Article 24.2 of the Copyright Act, the materials may be freely used provided the user complies with the following terms:
The materials to be used must have attached a Korea Open Government License (KOGL) Type 4 symbol, which is similar to CC-BY-NC-ND (Creative Commons Attribution Non-Commercial No Derivatives License). Users are free to use the materials only for non-commercial purposes, provided that original works are properly cited and that no alterations, modifications, or changes to such works is made. This website may contain materials for which ETRI does not hold full copyright or for which ETRI shares copyright in conjunction with other third parties. Without explicit permission, any use of such materials without KOGL indication is strictly prohibited and will constitute an infringement of the copyright of ETRI or of the relevant copyright holders.
J. Kim et. al, "Trends in Lightweight Kernel for Many core Based High-Performance Computing", Electronics and Telecommunications Trends. Vol. 32, No. 4, 2017, KOGL Type 4: Source Indication + Commercial Use Prohibition + Change Prohibition
J. Sim et.al, “the Fourth Industrial Revolution and ICT – IDX Strategy for leading the Fourth Industrial Revolution”, ETRI Insight, 2017, KOGL Type 4: Source Indication + Commercial Use Prohibition + Change Prohibition
If you have any questions or concerns about these terms of use, or if you would like to request permission to use any material on this website, please feel free to contact us
KOGL Type 4:(Source Indication + Commercial Use Prohibition+Change Prohibition)
Contact ETRI, Research Information Service Section
Privacy Policy
ETRI KSP Privacy Policy
ETRI does not collect personal information from external users who access our Knowledge Sharing Platform (KSP). Unathorized automated collection of researcher information from our platform without ETRI's consent is strictly prohibited.
[Researcher Information Disclosure] ETRI publicly shares specific researcher information related to research outcomes, including the researcher's name, department, work email, and work phone number.
※ ETRI does not share employee photographs with external users without the explicit consent of the researcher. If a researcher provides consent, their photograph may be displayed on the KSP.