[ASF] 아파치 재단, Fluss와 Pony Mail 최상위 프로젝트로 승격
아파치 소프트웨어 재단(ASF)이 8월 6일 Apache Fluss와 Apache Pony Mail 두 프로젝트를 최상위 프로젝트(Top-Level Project)로 승격했다고 발표했습니다. 인큐베이터 과정을 마치고 재단의 정식 프로젝트로 자리를 잡았다는 의미입니다.
이번에 눈에 띄는 쪽은 Fluss입니다. 재단 설명에 따르면 실시간 분석과 AI 작업을 겨냥한 레이크하우스 네이티브 스트리밍 스토리지로, 스트리밍 데이터와 계속 갱신되는 테이블, 그리고 레이크하우스에 쌓인 과거 데이터를 하나의 테이블 추상화로 묶어서 다루는 것이 핵심입니다. 프로젝트 공식 사이트에 정리된 특징은 대략 이렇습니다.
- 오프셋 순서가 보장되고 다시 읽을 수 있는 스트리밍 로그
- 밀리초 미만의 키-값 조회
- 자주 쓰는 데이터와 오래된 데이터를 나눠 두는 계층 구조
- 서버 쪽에서 최적화되는 컬럼 기반 분석
연산 엔진으로는 Apache Flink와 Apache Spark를, 저장 포맷으로는 Apache Paimon, Apache Iceberg, Apache Hudi, Lance를 붙여 쓸 수 있습니다. 알리바바 클라우드에서 오픈 데이터 플랫폼을 맡고 있는 Feng Wang은 이 기술이 오픈소스로 공개되기 전 알리바바의 핵심 이커머스 운영 환경에서 대규모로 검증됐다고 밝혔습니다. 함께 승격된 Pony Mail은 성격이 좀 다릅니다. 수백만 건 규모의 메일 아카이브를 웹에서 열람하고 검색하는 도구로, 초당 수백 건의 요청을 처리하며 스레드 안에서 바로 답장할 수 있고 공개, 비공개, 혼합 모드를 모두 지원합니다. 재단 자체가 메일링 리스트 문화를 오래 유지해 온 조직이라는 점을 생각하면 내부 필요에서 자란 프로젝트로 보입니다.
맥락을 조금 덧붙이면, Fluss는 2025년 6월 5일 아파치 인큐베이터에 들어가 2026년 7월 16일 졸업했습니다. 1년 남짓이면 재단 기준으로는 빠른 편입니다. 스트리밍 저장소와 레이크하우스를 각각 따로 운영하다 보면 같은 데이터를 두 번 쌓고 두 번 관리하게 되는데, 그 경계를 줄여보려는 시도가 재단 프로젝트 단위로 올라왔다는 점이 실무자 입장에서는 지켜볼 만한 대목입니다.
로그인 후 답글을 남길 수 있습니다.