참고: 이 내용은 2022. 3. 8에 게시된 컨텐츠(NN Investment Partners’ Papyrus Team Delivers End-to-End Data Visualization with Snowflake’s Data Cloud)에서 번역되었습니다.
NN Investment Partners의 시니어 투자 엔지니어인 Marcel Naumann은 유동적이고 쉽게 액세스할 수 있는 데이터와 통찰이 포트폴리오 관리자가 책임감 있는 방식으로 투자하면서 수익을 달성하는 데 도움이 될 것으로 내다보고 있습니다. 우리는 Naumann와 이야기를 나누며 그가 Snowflake 데이터 클라우드를 통해 이러한 미래를 어떻게 실현하고 있는지 알아보았습니다.
NN IP(NN Investment Partners)는 37개국 투자자들의 자산을 관리합니다. 책임 투자 그리고 고객에게 우수한 재무 결과를 제공하는 것 두 가지에 중점을 둠으로써 자산 관리 분야에서 두각을 나타내고 있습니다.
이 두 가지 핵심 요소를 제공하기 위해 NN IP의 포트폴리오 관리자는 여러 출처의 데이터를 수집하여 투자 사례와 성과를 평가하고, 환경, 사회 및 거버넌스(ESG) 요인에 대한 각 투자 사례를 분석합니다. NN IP 자산의 91%는 ESG가 통합된 것입니다(2021년 12월 31일 데이터).
이 모든 데이터를 수집하고 대규모로 시각화하는 것은 간단하지 않습니다. 시니어 투자 엔지니어인 Marcel Naumann과 그의 팀이 레거시 온프레미스 데이터 웨어하우스 및 멀티 클라우드 데이터 파이프라인과 씨름하면서 데이터 기반 통찰을 더 빠르고 대규모로 제공하기 위한 솔루션, 즉 Snowflake의 데이터 클라우드에서 고객에게 효과적으로 제공하는 서비스를 찾기 시작했습니다.
데이터와 시각화 도구 간 브리지 구축
Naumann은 “적접 만든 데이터와 지식을 공유하고 더 나은 통찰을 제공하는 데 도움이 되는 타사 공급업체로부터 얻은 데이터가 혼합되어 있습니다.”라고 설명하며, “Papyrus라는 지식 플랫폼에서 이 데이터를 수집하고 스냅숏을 통해 AWS 인프라의 S3 버팃으로 보냅니다. 그후 해당 버킷을 Azure에서 호스팅되는 Power BI 시각화 도구에 연결하는 방법을 찾아야 합니다.”라고 덧붙였습니다.
Naumann은 여러 클라우드 공급자에 걸친 데이터 파이프라인으로는 선택권이 제한된다는 것을 알았습니다. “몇 가지 솔루션을 테스트한 후 시각화에 직접 연결할 수 없거나 유지하는 데 수작업이 너무 많이 필요하다는 것을 알았습니다.”
Naumann은 Snowflake 데이터 클라우드 테스트를 시작하면서 이 클라우드 소프트웨어에서 제공하는 솔루션에 열광하게 되었습니다. Naumann이 Snowflake 데이터 클라우드를 발견하자 상황이 바뀌었습니다. 그는 “Snowflake를 테스트했고 제가 바라던 대로 작동했습니다.”라고 말했습니다. Snowflake 커넥터를 사용하면 Papyrus 팀이 DirectQuery를 사용하여 Power BI에서 데이터를 사용할 수 있습니다. 그는 “인프라를 완전히 개조하지 않고도 Snowflake를 배포할 수 있다는 것을 알아차리고 이를 시도해봤습니다.” 그는 이렇게 말했습니다. “단 4주 만에 테스트를 성공적으로 실행하고 실제 가능성을 확인할 수 있었습니다.”
투자자에게 권한을 부여하는 플랫폼 및 지원
Naumann은 “Snowflake의 약간의 지원과 교육을 통해 몇 사람을 재빨리 적응시키고 테스트를 성공적으로 전달할 수 있었습니다.”라고 말했습니다.
NN IP의 Papyrus 팀은 첫 번째 전달을 완료하고 Snowflake를 일반 용도로 개방한 후 NN IP의 Papyrus 팀은 재무 및 비재무 성과 정보 전달이라는 회사의 핵심 우선순위를 더 잘 제공할 수 있게 되었습니다. 포트폴리오 관리자는 과거 투자 성과와 미래 수익에 영향을 미칠 수 있는 시장 데이터 및 ESG 점수에 기여하는 다양한 정보를 빠르게 시각화할 수 있습니다.
그리고 개발자는 이 모든 것을 전보다 빠르게 분석하고 수작업은 줄일 수 있습니다. Naumann은 “정보에 입각한 결정을 내리는 속도가 빨라졌습니다.”라고 말하며 “그리고 규모를 확대하더라도 성능과 속도를 유지하는 데 문제가 없었습니다. 더 많은 팀이 Snowflake 및 Snowflake에서 호스팅하는 데이터에 관심을 갖게 된 것으로 보아 며칠이나 몇 주가 아닌 몇 분만에 요청을 충족할 수 있다는 것을 알 수 있습니다.”라고 덧붙였습니다.
또한 Papyrus 팀은 강력한 규정 준수 통제 및 모니터링을 제공하는 플랫폼의 이점을 누리고 있습니다. Naumann은 “Snowflake에서 내부 데이터 공유 도구를 재구축하고 데이터 품질과 보안을 점검할 수 있도록 통제 기능을 복제했습니다.”라고 말하며 “당사는 엄격한 규제 환경에서 운영되기 때문에 회사 전체에 대해 분석할 수 있는 중앙화된 플랫폼을 만들기 위해서는 필요에 따라 도구를 구축하고 확장할 수 있어야 합니다. Snowflake는 포괄적인 데이터 거버넌스가 가능하므로 지속적으로 발전하는 높은 규정 준수 표준을 충족할 수 있습니다.”라고 덧붙였습니다.
“회사 전체에 대해 분석할 수 있는 중앙화된 플랫폼을 만들기 위해서는 필요에 따라 도구를 구축하고 확장할 수 있어야 합니다.”
미래를 위해 준비된 플랫폼
몇 주만에 Naumann의 Snowflake 파일럿은 통찰을 공유하기 위한 데이터 시각화 워크플로가 더 빨라졌습니다. Naumann은 팀의 데이터 여정을 지원하는 Snowflake 교육 및 지원 서비스를 이용할 수 있다는 것을 알았습니다. “Snowflake의 팀은 정말 많은 도움이 됐습니다. 파트너십의 기술적, 상업적 측면에 관한 질문이 있을 때 즉시 전문가의 도움을 받을 수 있었습니다.”
“우리는 아직 Snowflake 데이터 클라우드를 사용하는 여정의 시작 단계에 있지만, 자산 관리자에게는 이미 미래에 대한 흥미로운 계획이 있습니다. 저는 한동안 팀 전체가 필요에 따라 사용하는 자체 데이터 환경을 갖고 있는 이런 종류의 데이터 메시를 추진해 왔습니다. Snowflake를 사용하면 올바른 방향으로 나아갈 수 있으리라 기대합니다.”
장기적으로 NN IP의 잠재적인 인재 풀에 대한 이점도 있습니다. Naumann은 “어느 업종에서나 유능하고 지식이 풍부한 인력을 유치하는 것은 어렵습니다. 그러나 시장분석 및 데이터 시각화에 대한 보다 현대적인 접근 방식으로 전환함에 따라 최고의 인재가 직장에서 볼 수 있기를 기대하는 시장을 선도하는 도구를 제공할 수 있습니다.”라고 말했습니다.
또한 궁극적으로 Naumann은 최신 데이터 플랫폼으로의 전환을 통해 NN IP의 힘든 업무에 대해 더욱 자부심을 갖게 되었습니다. “저는 20년 넘게 IT 분야에서 일해왔고 상황이 변하는 것을 지켜봐 왔습니다. 이제 사람들은 더욱 다재다능해져야 하며 보안, 인프라, 데이터에 대한 전문 지식을 갖춰야 합니다.”
Naumann은 “가장 놀라운 것은 팬데믹 동안 성공적인 온보딩과 파트너십을 이뤄냈다는 점입니다.”라고 말하며 “이제 우리는 더 높고 책임감 있는 수익을 제공하는 데 도움이 되는 개선된 시스템을 갖게 되었습니다. 그리고 이 시스템은 모두 서버리스입니다. 온프레미스 시스템이 없으며 집을 떠날 필요도 없습니다. 즉시 사용 가능한 완벽한 엔터프라이즈용 데이터 클라우드입니다.”라고 덧붙였습니다.