ETRI-Knowledge Sharing Plaform

KOREAN
기술이전 검색
Year ~ Transaction Count Keyword

Detail

Erasure coding based data resilliency scheme for an exascale file system

Manager
Kim Hong Yeon
Participants
Kim Dong Oh, Kim Young Kyun, Kim Young-Chang, Youngchul Kim, Chei-Yol Kim, Kim Hong Yeon, Jeongsook Park, Park Joonyoung, Sang Min Lee, Lee Sang-Min, Cho Il Yeon, Jin Ki Sung, Cha Gyuil, Cha Myung Hoon
Transaction Count
4
Year
2018
Project Code
17HS3300, Management of Developing ICBMS(IoT, Cloud, Bigdata, Mobile, Security) Core Technologies and Development of Exascale Cloud Storage Technology, Kim Young Kyun
16MS2200, Management of Developing ICBMS(IoT, Cloud, Bigdata, Mobile, Security) Core Technologies and Development of Exascale Cloud Storage Technology, Kim Young Kyun
15MS5400, Management of Developing ICBMS(IoT, Cloud, Bigdata, Mobile, Security) Core Technologies and Development of Exascale Cloud Storage Technology, Kim Young Kyun
국내 외 스토리지 시장에서 중점 부각되고 있는 스토리지의 무한 확장성, 스토리지 서비스 가용성, 유지보수 비용의 최소화 등을 지원하는 핵심 파일시스템 SW
- 데이터 내결함성을 위한 소거 코드 기술
- 분산 파일 시스템을 구성하는 다수의 스토리지 서버에 저장된 데이터를 일부 데이터 서버 또는 디스크의 장애에도 불구하고 유실 없이 접근 가능하도록 하는 데이터 내결함성을 제공하는 기술임
기성품 x86 서버를 이용하여 엑사스케일의 대규모 스토리지를 보다 낮은 비용으로 구축할 수 있으며, 경쟁제품 대비 높은 데이터 입출력 성능을 제공함
A. 글로벌 파일 시스템의 향상된 데이터 내결함성을 위한 소거 코드 기반 데이터 저장 기술
- 페타바이트~엑사바이트의 대규모 데이터 저장을 위한 스토리지를 다수의 스토리지 서버를 클러스터하여 구성하는 기술임
- 다수의 스토리지 서버에 설치하여 운영되는 글로벌 파일 시스템 SW로 다수의 서버를 단일 거대 스토리지로 가상화 하여 POSIX 표준 인터페이스로 제공하는 기능을 수행함
- Linux 기준 POSIX 표준 입출력 인터페이스를 제공하여 본 기술 적용시 기존 응응의 수정을 최소화하여 적용 가능
- 분산 파일 시스템을 구성하는 다수의 스토리지 서버에 저장된 데이터를 일부 데이터 서버 또는 디스크의 장애에도 불구하고 유실 없이 접근 가능하도록 하는 데이터 내결함성을 제공
- 기존 분산 파일 시스템의 데이터 내결함성인 데이터 복제(replication) 방식은 실제 저장할 데이터 규모보다 2~3배의 스토리지를 구축해야 하며, 이에 따라 과도한 구축 비용 부담이 존재하였음 (예: 1Peta Byte 데이터 저장공간을 위해 3Peta Byte 스토리지 구축 필요, 데이터 3중화 가정, 2중 장애 감내 기준)
- 본 기술 이전을 통해 동등한 수준의 데이터 내결함성을 지원하면서도 기존 데이터 복제 방식 대비 최대 2배 수준의 데이터 저장 효율을 지원하여 과도한 스토리지 구축 부담 경감할 수 있음 (예: 1Peta Byte 데이터 저장공간을 위해 1.5Peta Byte 스토리지 구축 필요, 데이터 대 패리티 비율 4 대2 가정, 2중 장애 감내 기준)
A. 글로벌 파일 시스템의 향상된 데이터 내결함성을 위한 소거 코드 기반 데이터 저장 기술
- (SW) 소거코드 기반 데이터 분산 저장 SW
- (문서) 사용 설명서, 설계서, 시험 절차서, 시험 결과서
- 유전체 분석, 산업 설계 등 고성능 컴퓨팅을 위한 대용량, 고속 스토리지 인프라로 활용

- 클라우드 컴퓨팅, 빅데이터 분석을 위한 대용량, 고속 스토리지 인프라로 활용

- 글로벌 기업들과 경쟁력을 갖기 위하여 국내 중 대형 인터넷 서비스 기업들의 동영상 기반 인터넷 서비스와 최적으로 통합된 저비용 대규모 스토리지 플랫폼으로 활용

- IDC 센터에 대용량 자료 저장을 위한 저비용 대규모 스토리지 플랫폼으로 채택하여 저비용으로 자료 보관 공간을 제공하는 유틸리티 컴퓨팅 비즈니스 플랫폼으로 활용

- 국내 중 대 규모의 엔터프라이즈 스토리지 시스템으로 활용

- 대규모 인터넷 서비스에 적합한 스토리지 플랫폼 시스템 SW의 원천 기술을 통한 관련 제품 개발 유도 및 국내 관련 SW 산업의 경쟁력 강화