- 아파치 아이스버그·R2 기반 서버리스 환경 제공…벤더 종속 없이 기존 분석 도구에서 데이터 직접 활용
클라우드플레어가 별도 서버 없이 데이터를 수집·저장·분석하는 개방형 데이터 플랫폼 ‘클라우드플레어 베이슨(Cloudflare Basin)’을 선보였다. 아파치 아이스버그와 클라우드플레어 R2를 기반으로 분석 데이터를 개방형 표준 형식에 저장하고, 기존 도구에서 분류·조회하도록 연결한다. 기업은 특정 벤더에 종속되지 않고 기존 분석 환경을 그대로 활용할 수 있다.
개방형 표준으로 데이터 복사·변환 줄여
기업이 대규모 데이터 분석 환경을 운영하려면 예상 수요에 맞춰 서버를 확보하고 데이터 수집과 분석 시스템을 연동해야 한다. 서로 다른 클라우드 사이에서 데이터를 이동할 때 발생하는 전송 비용도 기업이 부담해야 할 비용으로 남는다.
베이슨은 데이터를 아파치 아이스버그 형식으로 저장해 호환되는 분석 도구가 직접 읽도록 한다. 별도의 데이터 복사나 형식 변환 없이 기존 도구를 활용할 수 있으며, 특정 데이터 플랫폼에 종속되지 않고 데이터를 관리한다. 데이터 수집과 관리, 분석 작업은 필요한 시점에 클라우드플레어 네트워크에서 실행한다. 클라우드플레어는 데이터를 자사 네트워크로 가져오거나 외부로 내보낼 때 별도의 전송 비용을 부과하지 않는다.
클라우드플레어 데인 크네히트(Dane Knecht) 최고기술책임자(CTO)는 “개발자는 자신의 데이터에서 필요한 정보를 얻기 위해 데이터 인프라 운영자 역할까지 맡을 필요가 없어졌다”며 “베이슨은 클라우드플레어에서 사용해 온 서버리스 방식을 데이터 분석 환경에도 적용해 별도로 관리해야 하는 클러스터나 불필요한 데이터 이동 없이 개방형 표준을 기반으로 고객이 데이터 통제권을 유지하도록 지원한다”고 설명했다.
수집·카탈로그·SQL까지 서버리스로 처리
베이슨은 클라우드플레어 글로벌 네트워크에서 실행되며, 개발자는 별도 인프라를 마련하지 않고 데이터를 수집·저장·조회할 수 있다. 베이슨 파이프라인(Basin Pipelines), 베이슨 카탈로그(Basin Catalog), 베이슨 SQL(Basin SQL)을 통해 데이터 수집부터 관리·분석까지 서버리스 환경에서 처리한다.
오픈소스 AI 코딩 에이전트 오픈코드(OpenCode)를 개발한 어노말리(Anomaly)는 전체 데이터 파이프라인을 베이슨으로 이전했다. 어노말리 공동창업자 댁스 라드(Dax Raad)는 “기존의 복잡한 아마존웹서비스(AWS) S3와 아테나(Athena) 환경을 보다 간결한 서버리스 아키텍처로 대체했으며, 모든 이벤트 데이터를 안정적으로 처리하고 있다”고 밝혔다.
클라우드·리전 넘어 데이터 제품 활용
데이터 제품 플랫폼 기업 밥슬레드(Bobsled)는 베이슨을 이용해 서로 다른 데이터·AI 플랫폼에서 사용할 데이터 제품을 제공한다. 지역이나 플랫폼에 관계없이 데이터를 배포할 수 있으며, 별도의 데이터 송신 비용도 발생하지 않는다.
밥슬레드 플랫폼 총괄 줄리엔 그로벨라르(Julien Grobbelaar)는 “베이슨을 활용하면 주요 데이터·AI 플랫폼에서 지역에 관계없이 이용할 데이터 제품을 구축하고, 실제 운영 환경에 필요한 안정성을 유지하면서 데이터 송신 비용 없이 운영할 수 있다”고 설명했다.
#클라우드플레어 #Cloudflare #클라우드플레어베이슨 #Basin #아파치아이스버그 #ApacheIceberg #CloudflareR2 #서버리스 #데이터플랫폼 #데이터분석 #클라우드
