WEKA
대규모 데이터 처리와 고성능 컴퓨팅(HPC) 워크로드를 가속화하는 고성능 데이터 저장 및 관리 플랫폼
핵심 기능
Cloud Native, Datacenter Ready
코어 , 클라우드 또는 엣지 데이터 센터에 배포 가능한 공통 소프트웨어 스택
Unlimited Linear Scale
TB 에서 부터 수 십 EB 까지 원활한 무 중단 스케일링
Auto tuning Mixed Workload Support
세계에서 가장 빠른 파일 시스템 WeksFS 는 높은 I/O, 낮은 지연 시간 , 작은 파일 환경 , 자동 튜닝 , 혼합 워크로드 및 데이터 portable 특성을 갖춘 데이터 파이프라인을 지원
Class Leading Economics
고성능 플래시와 S3 간의 스마트 한 tiering 기능은 클래스 최고의 경제성을 제공
기존 문제점 : Multi-Copy 아키텍쳐
Weka 이전은
- 높은 인프라 비용
(데이터를 저장하고 실행하기 위한 여러 시스템이 필요) - 데이터가 실행 가능해지기 까지 많은 시간 소요
(GPU는 data를 기다리는데 전체 사용 시간 중 최대 70%까지 소비) - 제한된 확장성
(콜드 데이터를 다른 시스템으로 이동 → 추가 소프트웨어 필요) - 높은 관리 오버헤드
(데이터 센터에 여러 시스템을 구입, 관리, 전원 공급, 냉각 및 보관)
해결 방안 : Zero-Copy 아키텍쳐
Weka 이후엔
- 단일 시스템으로 축소/통합되어 인프라 비용을 최대 75% 절감
- 실행 가능한 데이터로 전환되는 소요 시간을 95~98%까지 단축
→ 시장 선점 이점 - 단일 네임스페이스에서 14EB 이상의 거대한 확장성
(추가 소프트웨어 불필요) - 관리 오버헤드 20배 감소
아키텍쳐
