Snowflake와 함께 데이터 클라우드 효율성과 혁신을 주도하고 있는 Bluesky의 CEO Mingsheng Hong을 만나보십시오

Snowflake의 스타트업 스포트라이트에 오신 것을 환영합니다. 여기서는 Snowflake로 비즈니스를 구축하는 혁신적인 기업에 대해 알아봅니다. 이 Q&A 시리즈에서는 스타트업 리더들에게 문제 해결 방법, 데이터 사용법, 각각의 업계에서 한계에 도전하는 방법을 물어보았습니다. 가장 빛나는 최고의 스타트업과의 흥미롭고 영감을 주는 대화를 계속 지켜봐 주십시오! 

캘리포니아에 본사를 둔 Bluesky는 쿼리 및 분석을 더 적은 비용으로 더 빠르고 더 쉽게 조정함으로써 데이터 관리의 새로운 방법을 개척하고 있습니다. Bluesky의 SaaS 제품은 쿼리 패턴이라 불리는 혁신적인 기술을 사용하여 워크로드를 분석하고, 실행할 수 있는 권장 사항을 제시하여 즉각적으로 워크로드를 최적화하고 시간이 지나도 최적화된 상태를 예측대로 유지합니다. 이를 통해 데이터 엔지니어와 비즈니스 리더 모두 전에 없던 데이터 사용량 가시성을 확보할 수 있어 데이터를 관리하는 대신 데이터에서 비즈니스 가치를 도출하는 데 집중할 수 있습니다. 

Bluesky의 공동 창업자 Mingsheng Hong과 이 스타트업의 영감, 최적화에 중점을 두는 이유, Snowflake를 기반으로 기업을 구축하는 이유에 관해 이야기했습니다.

자신에 대한 간략한 소개와 영감을 주는 것이 무엇인지 말씀해주세요. 

저는 Bluesky의 CEO 이자 공동 창업자(Zheng Shao와 함께)인 Mingsheng Hong입니다. 제 업무는 모두 세계에서 가장 어려운 워크로드의 일부를 지원하기 위해 동급 최고의 데이터와 머신 러닝 인프라를 구축하는 것이었습니다. 저는 15년 이상의 경험이 있고, 가장 최근에는 구글에서 팀을 이끌어 구글의 1,000억 달러 규모의 광고 비즈니스와 AI 워크로드 성능 향상을 위한 새로운 TensorFlow 백엔드를 지원하기 위해 스토리지와 쿼리 스택을 구축하였습니다. 

영감에 대해 말하자면, 저는 빅 데이터가 나오기 훨씬 이전부터 약 25년 동안 데이터 마니아였습니다. 클라우드 기반 데이터 플랫폼의 워크로드 비용 효율성을 개선하고자 하는 모든 조직에서 데이터, 분석, 머신 러닝의 힘을 진정으로 민주화할 기회가 저에게 영감을 줍니다. 

Bluesky는 어떤 문제를 해결해주나요? 

Bluesky는 탁월한 운영 및 재정 가치를 제공하기 위해 쿼리와 분석을 더 빠르고 더 저렴하게 수행하도록 설계되었습니다. 저희의 워크로드 최적화 접근 방식으로 데이터 팀은 지능적이고 자동화된 솔루션을 활용하여 최적화된 데이터 레이아웃과 웨어하우스 설정을 신속하게 찾을 수 있습니다. 

Snowflake는 데이터 클라우드를 개척하고 소비 기반 가격 책정을 옹호하는 것으로 유명합니다. 혁신적이고, 아키텍처는 놀랍습니다. SQL 인터페이스와 프로젝트 시작 및 실행이 쉬운 덕에 많은 부분에서 상당한 가치를 산출했습니다. 클라우드에서 워크로드를 실행하는 기업이 증가하면서 잉여 워크로드를 적절히 할당하고 모니터하고 찾아내어, 보다 효율적으로 해제하는 것이 점점 어려워지고 있습니다. 이때 바로 Bluesky가 필요합니다. Bluesky는 데이터를 효율적이고 단순하게 만들고, 데이터로 더 많은 비즈니스 가치를 더 빠르게 창출하기 위해 존재합니다.

왜 바로 지금 이 문제를 해결해야 하나요?

Snowflake는 아주 강력한 플랫폼입니다. 사용자가 더 이상 무거운 컴퓨터 하드웨어를 미리 프로비저닝할 필요가 없어 전에 없는 유연성을 제공합니다. 많은 사용자가 지난 수년간 엄청난 비즈니스와 데이터 증가를 경험했죠. 하지만 이제는 경제 침체기에 들어섰고 모든 CFO가 자연스럽게 예산을 검토하고 더 엄격한 가드레일을 시행합니다. 데이터 클라우드 사용자와 재무 경영진에게는 비용 거버넌스, 워크로드 최적화, 운영 규율, 비용 절감이 주요 우선순위가 되고 있습니다. Snowflake 고객이 비용과 사용량을 더 잘 이해하면 더 효과적으로 책임을 시행하고 데이터 클라우드 투자 효율성을 개선할 수 있게 됩니다. 또한 동시에 경쟁력 유지를 위해 필요한 클라우드 리소스를 확보할 수 있죠. 

Bluesky는 Snowflake 워크로드를 전체적으로 분석하여 최적화되지 않은 쿼리, 반복적으로 실패한 쿼리, 고아 테이블 등과 같은 잠재적인 문제를 사전에 식별하고 최적화하도록 특별히 제작되었습니다. Bluesky를 이용하면 데이터 인프라 비효율성을 제거하여 Snowflake 사용자 경험 개선뿐만 아니라 엔지니어링과 재정적 리소스를 확보하여 이를 비즈니스에 다시 투자할 수 있습니다.

Bluesky는 어떻게 차별화되나요? 

저희는 기본적인 인프라 비용 측정 이상의 일을 합니다. Bluesky는 전체 인스턴스에서 고객들이 어떻게 데이터를 사용하는지 패턴을 살펴보고, 개선 기회가 있는지 확인한 후, 웨어하우스, 클러스터, 사용자의 개별 데이터 파이프라인, 쿼리별로 세분된 인사이트를 제안하여 개선 기회를 찾습니다. 사람 운영자가 지루하다고 생각하는 작업을 제거해 진짜 관심 있어 하는 일, 즉 즉각적인 비즈니스 가치 창출을 위한 데이터 활용에 집중할 수 있도록 하는 것이 목표입니다. 또한 혁신이 세상을 변화시킨다는 것을 알고 있기에 낭비되는 지출을 없애 고객이 그 리소스를 실험에 쓸 수 있도록 도와 드립니다. 

Bluesky가 어떻게 고객의 Snowflake 인스턴스를 최적화할 수 있게 지원하는지 많이 알려주셨는데요, 하지만 Bluesky에서도 Snowflake를 사용하고 있습니다. 어떻게 Snowflake로 업계의 한계를 뛰어넘을 수 있었나요? 

Snowflake는 SaaS 제품의 지속적인 운영에 핵심적인 역할을 합니다. 저희는 Snowflake 인스턴스를 통해 고객의 워크로드를 저장하고 분석합니다. 제품 개발 및 운영 단계 모두에서 Snowflake의 풍부한 SQL 지원, 다른 ETL/BI 도구와의 광범위한 통합 능력, 탄력적인 클라우드 컴퓨팅을 정기적으로 활용하여 혜택을 누리고 있습니다. Snowflake를 사용한 일상적인 데이터 관리를 통해 사내 리소스를 핵심 비즈니스에 더 집중할 수 있었습니다. 사용자를 위한 워크로드 최적화 아이디어를 파악하고 그에 착수하는 일 말이죠.

Snowflake 사용 전에는 클라우드 기반 데이터 인프라를 설정하고 유지 관리하는 데에 더 많은 투자를 해야 했기 때문에 핵심 비즈니스에 대한 투자가 분산되었습니다. Snowflake 덕분에 핵심 제품을 개발하고 비즈니스를 성장시키는 데에 노력을 집중할 수 있게 되었죠.

업계 내의 어떤 기술 트렌드가 제일 기대되나요?

데이터 클라우드는 혁신적이지만, 세계 대부분의 분석 데이터는 여전히 온프레미스 방식입니다. 저는 데이터 효율성 극대화를 돕는 차세대 도구를 통해 데이터 사용을 효율적이고 지속 가능하게 만드는 최고의 방법을 찾는 것이 가장 기대됩니다. 

또한 업계가 사용량 기반 가격 책정으로 전환하고 있으므로 조직 내에서 ‘FinOps’가 새로운 관행으로 부상하게 되어 매우 기쁩니다. 클라우드가 불러일으킨 용량의 유연한 개념은 전략적 변화를 이끌어 클라우드 비용 관리를 위한 비교적 새로운 기능인 FinOps를 탄생시켰습니다. 기업이 클라우드 기반 운영 비용을 모니터, 관리, 최적화하도록 도와주는 프레임워크이죠. Bluesky도 이러한 트렌드의 일부이고 최신 클라우드 기반 기업이 지출 목표에 맞춰 혁신을 이루어나갈 수 있도록 도와주는 특별한 기업입니다. 

앞으로의 계획은 무엇인가요?

Bluesky는 ‘가치 있는 비용’을 염두에 둔 기업을 위해 더 지능적이고 데이터 중심적인 지원을 제공하는 데 집중할 것입니다. 데이터 사용 방식을 관찰하고 최적화하고자 하는 고객을 위해 훌륭한 시스템을 보유하고 있으며, 그 다음 단계는 능동적이고 지능적인 모니터링, 실시간 경고, 결정 지능, 자동화를 통한 완전한 운영입니다.

고객이 낭비되는 지출 없이 실험과 혁신을 할 수 있도록 자동화된 보호 장치를 만들고 싶습니다. 피할 수 있다면 왜 지루하고 비용이 많이 드는 실수를 하겠습니까? 고객에게 데이터를 활용해 안전하게 실험할 수 있다는 확신을 심어주고 싶습니다. 

무엇보다, 개시 시점부터 완전히 자동화된 데이터 클라우드 에코시스템에 이르기까지 데이터 클라우드 사용 전 과정에서 고객을 지원하고 싶습니다. 고객의 목표가 무엇이든 데이터를 최대한 활용할 수 있도록 지원하는 것이 목표입니다. 언젠가는 저희 모두 과거를 돌아보며 왜 그렇게 다르게 일했는지 의아해하기를 바랍니다. 
Bluesky에 대한 더 자세한 정보는 여기에서 확인하실 수 있습니다. 지금 Snowflake 스타트업 프로그램에 대해 알아보세요.

참고: 이 내용은 2022. 10. 26에 게시된 컨텐츠(Startup Spotlight: Bluesky)에서 번역되었습니다.