Governance dei dati avanzata e integrata con Snowflake Horizon Catalog
I silos complicano la governance e la discovery
Con l’avvento dell’AI generativa e dei large language model (LLM), le aziende vogliono sbloccare il maggior valore aziendale possibile dai propri data asset, comprese app e modelli. Purtroppo, questi data asset sono spesso isolati in silos tra più cloud provider e soluzioni, oltre che tra ecosistemi diversi di partner, clienti e fornitori. Con l’aumento del numero di silos, la discovery e la democratizzazione dell’accesso diventano molto difficili e la gestione dei rischi per la sicurezza e dei costi associati al trasferimento di data asset tra sistemi diversi con modelli di governance diversi diventa estremamente complessa.
Semplifica la governance e la discovery su vasta scala con Snowflake Horizon Catalog
Uno degli obiettivi principali di Snowflake fin dall’inizio è stato quello di abbattere i silos di dati e rendere disponibili tutti i dati in modo semplice e coerente. Tuttavia, facilitare l’accesso ai dati non è sufficiente: deve essere facile trovare i dati, collaborare e governare tutti i dati di un’organizzazione. Queste informazioni ci hanno ispirato a creare Snowflake Horizon Catalog.
Con Horizon Catalog volevamo creare un catalogo che riflettesse la nostra incessante ricerca di semplicità e uniformità. Al centro di Horizon Catalog c’è un repository globale unificato per l’AI Data Cloud Snowflake, che include dati strutturati, semi-strutturati e non strutturati, modelli, Snowflake Notebooks, Streamlit, Snowflake Native Apps e prodotti in catalogo. Su questo repository abbiamo creato una suite di funzionalità attorno ai seguenti cinque temi:
Sicurezza. Horizon Catalog si basa su una potente piattaforma di sicurezza che garantisce una sicurezza di rete, una gestione e un’autenticazione delle identità robuste, insieme a un monitoraggio e una protezione continui dei rischi tramite il Trust Center. Inoltre, il controllo centralizzato degli accessi basato sui ruoli (RBAC) tra cloud aiuta a garantire la protezione dei dati dal momento in cui arrivano a quello in cui vengono utilizzati.
Conformità. Horizon Catalog fornisce ai clienti strumenti per garantire che l’accesso ai dati sia controllato e verificato, che i dati siano ad alta integrità e che i dati siano utilizzati per gli scopi appropriati attraverso funzionalità come la classificazione automatica per il rilevamento dei dati sensibili, criteri di autorizzazione granulari per proteggere i dati, ad esempio mediante mascheramento basato su tag e mascheramento dinamico dei dati, monitoraggio della qualità dei dati e visualizzazione del data lineage.
Privacy. Le organizzazioni spesso limitano l’utilizzo dei dati per motivi di privacy. Le funzionalità avanzate per la privacy di Horizon Catalog, come Synthetic Data Generation, Differential Privacy Policies e Snowflake Data Clean Rooms, consentono l’analisi dei dati e la collaborazione preservando la privacy, aprendo nuove possibilità.
Discovery. Gli utenti devono essere in grado di trovare i dati, le app e i modelli di cui hanno bisogno, comprenderli e accedervi in modo trasparente. Horizon Catalog consente di individuare facilmente contenuti (dati, app e modelli) operando sui dati indipendentemente dal formato o dalla posizione.
- Collaborazione. Horizon Catalog consente una collaborazione sicura con clienti e fornitori senza spostare i dati, sia all’interno che all’esterno dell’organizzazione. I clienti possono anche arricchire e sbloccare i propri dati con data set, app e prodotti AI di terze parti nel Marketplace Snowflake.
Un principio centrale che ci ha motivati a creare Horizon Catalog è la facilità d’uso su vasta scala: anche un piccolo team dovrebbe essere in grado di proteggere e gestire i data asset più complessi attraverso un unico set di strumenti. Horizon Catalog è stato creato per essere facile da usare perché è:
Multi-cloud e globale. Il patrimonio di dati può estendersi tra cloud e regioni diverse, compresi i luoghi in cui partner, clienti o fornitori possono archiviare i dati. Horizon Catalog ti aiuta a gestire il tuo patrimonio di dati con un unico modello di governance e sicurezza che funziona in modo coerente tra regioni e tra tutti e tre i principali cloud (AWS, Azure e GCP), oltre ai cloud sovrani per i mercati regolamentati.
Integrato per design. Non dovrai sprecare tempo e risorse preziosi a creare integrazioni personalizzate spesso fragili e inaffidabili. Le funzionalità di governance, le superfici di discovery e i flussi di lavoro delle richieste di Horizon Catalog sono integrati per design, per garantire coerenza di applicazione e affidabilità. Ad esempio, il marketplace interno di Horizon Catalog è completamente integrato con la governance e i controlli degli accessi per fornire un semplice meccanismo self-service sia agli utenti tecnici che a quelli aziendali. Nel frattempo, Horizon Catalog Trust Center fornisce un’unica piattaforma unificata che semplifica il monitoraggio della sicurezza cross-cloud per scoprire i rischi di sicurezza e fornire raccomandazioni per risolverli.
Powered by Snowflake Cortex AI. Horizon Catalog sfrutta Snowflake Cortex AI per automatizzare e potenziare quelle che un tempo erano attività manuali. Per automatizzare la data curation, Horizon Catalog si integra con Cortex AI per generare in modo intelligente descrizioni di oggetti e colonne. Puoi utilizzare la ricerca basata sul linguaggio naturale per trovare i dati di cui hai bisogno. Infine, puoi utilizzare l’AI per comprendere e analizzare i tuoi dati tramite Snowflake Copilot, Cortex Analyst e Cortex Knowledge Extensions, il tutto con un’interfaccia intuitiva basata sul linguaggio naturale.
Interoperabile. La piattaforma deve offrire la flessibilità necessaria per lavorare con formati di tabella aperti, in modo da ridurre al minimo il lock-in, e la libertà di scegliere lo strumento giusto per ogni workload. Horizon Catalog si integra con Apache Polaris (un catalogo open source per Apache Iceberg Tables) e Snowflake Open Catalog (un servizio gestito Powered by Apache Polaris) per gestire in modo trasparente non solo oggetti all’interno di Snowflake, ma anche oggetti Iceberg open all’esterno di Snowflake. Questa integrazione offre alle aziende livelli senza precedenti di scelta, flessibilità e controllo sui propri dati estendendo le funzionalità di governance e discovery di Horizon Catalog alle Iceberg Tables create da qualsiasi altro motore compatibile in Apache Polaris e Snowflake Open Catalog. L’ecosistema Snowflake Horizon Catalog estende ulteriormente le funzionalità di Horizon Catalog al di là di Snowflake e Iceberg.
Con Horizon Catalog, i data governor, gli steward, gli amministratori di sicurezza e i CISO possono comprendere, proteggere e verificare account e risorse tra regioni e cloud, consentendo al contempo ai team dati di scoprire, accedere e condividere dati, servizi e app a livello globale, senza processi ETL. Horizon Catalog si basa sulla leadership esistente di Snowflake nel data sharing, con migliaia di clienti che condividono i dati tra organizzazioni diverse e al loro interno e acquistano dati o app sul Marketplace Snowflake, e nella governance e sicurezza dei dati, con criteri RBAC, di classificazione, tagging e granulari apprezzati da migliaia di clienti. Allo stesso tempo, Horizon Catalog estende queste funzionalità native di governance e discovery a formati tabellari aperti per migliorare l’interoperabilità tra sistemi di gestione dei metadati, motori di query e infrastrutture cloud.
Scopri di più
In questo articolo abbiamo presentato perché abbiamo creato Horizon Catalog e come la sua facilità d’uso ti aiuta a gestire efficacemente la tua moderna piattaforma dati aziendale. Nei prossimi post vedremo più nei dettagli come le funzionalità associate ai cinque temi descritti possono aiutarti a raggiungere i tuoi obiettivi.
Per saperne di più su Snowflake Horizon Catalog, dai un’occhiata a queste risorse:
Guarda le demo nella playlist Snowflake Horizon Catalog su YouTube
Prova alcune funzionalità chiave con questo quickstart
Consulta la documentazione
Scopri di più su alcuni dei recenti annunci di Horizon Catalog:
Articolo di
