스노우플레이크, ML 워크플로우 가속화를 위한 기능 강화

- 인터랙티브형 셀 기반 프로그래밍 환경을 통해 SQL 및 파이썬 사용자의 데이터 탐색과 머신러닝 개발을 지원하는 스노우플레이크 노트북(Notebooks) 발표
- 스노우파크 ML 모델링 API, 스노우파크 모델 레지스트리, 스노우플레이크 피처 스토어 등 개발자를 위한 신규 기능 공개

2023년 11월 22일 – 글로벌 데이터 클라우드 기업 스노우플레이크(Snowflake) 가 온라인으로 진행되고 있는 스노우데이 2023에서 개발자들이 데이터 클라우드에서 머신러닝(ML) 모델과 풀스택 앱을 더욱 쉽게 구축할 수 있도록 하기 위해 기능을 강화했다고 발표했다. 

스노우플레이크는 고객들이 협업을 용이하게 하고 생산성을 높이기 위해 파이썬을 지원하는 스노우파크(Snowpark)을 선보인 바 있다. 여기에 파이썬 개발자가 스노우파크를 쉽게 활용할 수 있도록 새로운 개발 인터페이스 도구 ‘스노우플레이크 노트북(Notebooks), 스노우파크 ML 모델링 API를 프라이빗 프리뷰 형태로 공개하고, 스노우파크 레지스트리를 업데이트했다. 이를 통해 개발자들은 컨테이너화된 워크로드와 확장된 데브옵스(DevOps)로 스노우플레이크의 안전한 완전 관리형 인프라 내에서 앱을 빠르게 개발하고 실행할 수 있게 했다. 

스노우플레이크 제품 관리 부문 선임 이사 프라사나 크리슈난(Prasanna Krishnan)은 “생성형 AI의 등장은 조직에서 데이터는 더욱 중요해졌다”며 “스노우플레이크 플랫폼으로 데이터 활용이 간편해져 기업들은 강력한 엔드 투 엔드 머신러닝 모델과 풀스택 앱을 직접 구축할 수 있고, ‘스노우플레이크 마켓플레이스’는 업계 최초로 크로스-클라우드 데이터 및 앱을 필요에 따라 자유롭게 구매 및 판매할 수 있는 서비스로 글로벌 사용자 간에 시너지를 낼 수 있게 될 것”이라고 말했다.

엔드 투 엔드 머신러닝에 필요한 강력하고 친숙한 기능을 개발자에게 제공

스노우플레이크는 SQL 외에 여러 코드를 안전하게 배포, 처리할 수 있는 스노우파크에 대한 투자를 지속적으로 추진하고 있다. 2023년 9월 기준, 스노우플레이크 고객의 35% 이상이 스노우파크를 주단위로 사용하고 있으며, 특히 개발자들은 복잡한 ML 모델 개발 및 배포를 위해 이를 활용하고 있다. 이번에 발표한 강화된 기능은 아래와 같다.

• 스노우플레이크 노트북(Notebooks): 현재 비공개 프리뷰로 제공되고 있는 스노우플레이크 노트북은 새로운 개발 인터페이스 도구로, 파이썬 및 SQL 사용자에게 인터랙티브형 셀 기반 프로그래밍 환경을 제공한다. 이를 통해 개발자는 스노우파크에서 데이터를 탐색, 처리하며 테스트할 수 있다. 또한, 내장형 스노우플레이크 노트북으로 코드를 작성 및 실행하고 스노우파크 ML을 사용해 모델을 학습 및 배포하며, 스트림릿(Streamlit) 차트 요소를 활용해 결과를 시각화할 수 있다. 
• 스노우파크 ML 모델링 API: 곧 일반에 공개될 예정인 스노우파크 ML 모델링 API는 개발자와 데이터 사이언티스트가 기능 엔지니어링을 확장하고 모델 학습을 간소화할 수 있도록 지원한다. 사용자는 저장 프로시저(Stored Procedures)를 생성하지 않고도 스노우플레이크의 데이터에 기본적으로 AI/ML 프레임워크를 구현할 수 있으며, 이를 통해 더 빠르게 직관적인 모델을 개발할 수 있다.
• 스노우파크 ML 업데이트: 스노우파크 ML 운영에는 퍼블릭 프리뷰 예정인 스노우파크 모델 레지스트리가 업데이트 된다. 스노우파크 모델 레지스트리는 네이티브 스노우플레이크 모델 개체를 기반으로 구축되어 있어 스노우플레이크 상에서 확장성과 안정성을 갖춘 모델 배포와 관리를 수행할 수 있다. 여기에는 ML 플랫폼인 허깅 페이스(Hugging Face)의 오픈 소스 LLM과 딥러닝 모델에 대한 확장된 지원도 포함되어 있다. 아울러, 스노우플레이크는 현재 비공개 프리뷰 중인 스노우플레이크 피처 스토어(Feature Store)를 통해 개발자가 한 곳에서 모델 학습과 추론에 필요한 ML 기능을 생성, 저장, 관리 및 제공할 수 있도록 지원한다. 

윌리엄모리스엔데버(WME), IMG & On Location, UFC 등을 산하에 두고 있는 글로벌 스포츠 및 엔터테인먼트 회사 엔데버(Endeavor)는 ‘파이썬용 스노우파크(Snowpark for Python)’를 통해 ML 모델을 구축 및 배포하고 고도의 개인화 경험과 앱 서비스를 제공하여 팬들의 참여를 늘리고 있다.

엔데버 데이터 사이언스 및 엔지니어링 부문 VP 사아드 자히르(Saad Zaheer)는 “스노우파크는 ML 모델을 안전하게 구축하고 학습해 초개인화된 팬 경험을 대규모로 제공할 수 있도록 다양한 부문의 데이터를 중앙 집중화하고 처리하는 방식을 지원하며 당사의 엔드 투 엔드 ML 개발의 기반이 됐다”며 “스노우플레이크를 중앙 데이터 기반으로 삼고 자사 데이터들을 활용한 앱을 개발할 수 있어 직접 고객 행동을 예상 및 예측할 수 있게 됐고 이를 영업과 마케팅에 활용했다”고 강조했다.

앱 수명 주기 전반에 걸쳐 개발자 기능을 향상하는 스노우플레이크 네이티브 애플리케이션 프레임워크
스노우플레이크 네이티브 애플리케이션 프레임워크는 스노우플레이크 플랫폼을 통해 앱 개발부터 배포, 운영, 수익화 등에 필요한 모든 구성 요소를 스노우플레이크 내에서 운영 할 수 있도록 제공한다. 글로벌 선도기업들이 스노우플레이크 마켓플레이스를 통해 스노우플레이크 네이티브 앱의 수익화를 실현하고 있으며, 등록된 앱의 수는 지난 6월 개최된 스노우플레이크 서밋 2023 이후 2배 이상 증가했다. 스노우플레이크는 계속해서 개발자 기능을 확대하면서 그 수가 더욱 빠른 속도로 늘어날 것으로 기대하고 있다.

데이터 서비스 공급업체 사이버신(Cybersyn)은 스노우플레이크 마켓플레이스 전용 네이티브 앱을 개발하고 있다. 2022년 6월 이후 40개 이상의 고객이 사이버신의 금융 및 경제의 본질(Financial & Economic Essentials) 네이티브 앱을 사용해 5000건 이상의 쿼리를 실행했다. 데이터 협업 플랫폼 라이브램프(LiveRamp)는 스노우플레이크 마켓플레이스를 통해 아이덴티티 레졸루션 및 트랜스코딩 네이티브 앱을 활용하는 고객을 80% 이상 늘렸다. 또한, SNP 그룹은 SAP를 위한 데이터 스트리밍 네이티브 앱을 통해 스노우플레이크 상에서 SAP 데이터 수집과 관련된 데이터 처리 비용을 10분의 1로 절감했으며, 이에 따라 데이터 지연이 대폭 감소하고 스노우플레이크에서 SAP 데이터의 가용성이 크게 개선됐다.

또한 스노우파크 컨테이너 서비스는 데이터를 이동하거나 복잡한 컨테이너 기반 인프라를 관리할 필요 없이 ML 학습을 비롯해 LLM, API 등 앱의 다양한 요소를 실행할 수 있도록 지원한다. 

앱, 데이터 파이프라인 및 기타 개발을 위한 데브옵스의 자동화 실현

스노우플레이크는 앱과 데이터 파이프라인의 테스트, 배포, 모니터링, 운영 등 전반에 걸쳐 주요 데브옵스와 관측을 자동화하는 새로운 방식을 제공한다. 이를 통해 개발자는 아이디어를 더욱 빠르게 구현할 수 있다. ‘데이터베이스 변경 관리’ 기능을 추가해 개발자는 선언적으로 코드를 작성하고 작업 내용을 손쉽게 템플릿화하여 여러 환경에 걸쳐 스노우플레이크 객체를 관리할 수 있게 된다. 이 기능은 다양한 환경에서 객체 생성에 대한 단일 진실 공급원 역할을 수행하며, 데브옵스의 일반적인 ‘코드형 구성(Configuration as Code, CaC)’ 접근법을 사용해 스노우플레이크 객체의 프로비저닝과 업데이트를 자동으로 실행한다.

이 외에도스노우플레이크는 스노우데이 2023에서 파워드 바이 스노우플레이크 벤처 펀드를 비롯해 모든 사용자가 생성형 AI의 기능을 고객의 데이터에 안전하게 활용할 수 있도록 지원하고, 스노우플레이크 호라이즌(Snowflake Horizon)을 통해 스노우플레이크의 주요 규정 준수 및 거버넌스 기능을 강화하는 개선 사항 등에 대해 발표했다. 

스노우데이에 대한 보다 자세한 사항은 홈페이지에서 확인할 수 있다.

###

스노우플레이크(Snowflake)에 대하여

어떤 조직이든 Snowflake와 함께하면 Snowflake의 데이터 클라우드를 통해 데이터를 집결할 수 있습니다. 고객은 데이터 클라우드를 사용하여 사일로화된 데이터를 통합하고, 데이터를 검색 및 안전하게 공유하고, 데이터 애플리케이션을 지원하며, 다양한 AI/ML 및 분석 워크로드를 실행합니다. 또한 데이터나 사용자가 어디에 있든 Snowflake를 통해 여러 클라우드와 리전에 걸쳐 단일 데이터 환경을 경험하고 있습니다. 2023년 10월 31일 기준, 2023년 Forbes Global 2000 기업(G2K) 중 647개사를 비롯한 다양한 산업 분야의 수천여 고객이 Snowflake 데이터 클라우드를 사용하여 비즈니스를 강화하고 있습니다. 자세한 내용은 snowflake.com에서 확인할 수 있습니다.

문의

© 2023 Snowflake Inc. All rights reserved. 여기에 언급된 Snowflake, Snowflake 로고 및 기타 모든 Snowflake 제품, 기능 및 서비스 이름은 미국 및 기타 국가에서 Snowflake Inc.의 등록 상표 또는 상표입니다. 여기에 언급되거나 사용된 기타 모든 브랜드 이름 또는 로고는 식별 목적으로만 사용되며 해당 소유자의 상표일 수 있습니다. Snowflake는 그러한 소유자와 연관되거나 후원 또는 보증을 받지 않습니다.